但是好景不長，沒幾年李夫人重病離世。
李夫人因年少早死，漢武帝十分憐閔她，總覺得對其有愧疚之心，於是就將他的兄長李廣利封海西侯，李延年為協律都尉。
但後來這個李廣利，卻讓大漢的威嚴掃地。
漢武帝曾多次派李廣利掛帥遠征，但得到的結果多是大敗。
最後一次李廣利帶領著大漢最精銳的七萬大軍與匈奴決戰，按說當時的匈奴早已被衛青、霍去病打的不複往日風光。
但還是因為李廣利的錯誤指揮，導致全軍覆沒，李廣利更是見大事不妙，轉身投降了匈奴。
這次戰敗讓大漢元氣大傷，漢武帝也因此不得不下了輪台罪己詔，暫停了對匈奴的戰爭。
之後李廣利在匈奴呆了一年多後被殺害，這個“草包將軍”的一生也就這樣結束了。
回顧李廣利的一生，他因為自己妹妹而得到皇帝恩寵並加以重用，但他的無能，也讓大漢王朝蒙羞，讓一生好勝的漢武帝丟盡了顏麵。
最後一個女人是鉤戈夫人。
鉤弋夫人本命叫做趙婕妤。
傳說，趙氏自從出生就一直緊握雙手，從看見武帝之後才鬆手，手中有一個玉勾，所以才稱為“鉤弋夫人”。
還有人們說鉤弋夫人跟李夫人長得非常像，所以得到武帝的寵幸。
後來，鉤弋夫人給劉徹生下了一個兒子，名為劉弗陵，也就是漢昭帝。
但是後來漢武帝立劉弗陵為太子，確立了下一代繼承人，但是卻把鉤戈夫人賜死了，這是為什麽呢，立了她的兒子為太子，為什麽又要把鉤戈夫人賜死。
這和漢武帝童年有很大的影響。
在漢武帝幼年到成為皇帝前期，都沒什麽權利，因為大權都在當時的竇太皇太後以及王太後手中。
他對呂雉專權的印象十分深刻，而且自己登上皇帝寶座的路程也十分艱苦，而且坐上這個位置後，還什麽權利都沒有。