政治人物的思想特別奇怪，當外部條件發生變化之後，他們對一些事物的基本看法也會發生翻天覆地的轉變。衛家在的時候，劉徹如鯁在喉，感到很不舒服；現在衛家的人被殺得幹幹淨淨了，劉徹還是渾身不舒服，又想念起衛家的好處和優點來了。
前太子劉據的平反昭雪成為衛家名聲好轉的轉折點。老百姓們對死去的劉據很有好感，對他的死很同情，都相信劉據不會用木偶人詛咒皇上。隨著時間的推移，江充等人陷害太子的證據也漸漸顯露，民間的輿論開始朝著有利於劉據的方向發展。劉徹冷靜下來後，也開始相信兒子劉據起兵主要是被逼自衛，並沒有謀害自己的意思。關鍵時刻，負責守護西漢開國皇帝陵墓的小官、高寢郎車千秋上疏為劉據犯顏直諫，扭轉了整個局勢。他寫道：“兒子對著父親舞刀弄槍，應該受到鞭笞。如果皇帝過失殺死了太子，那又應該做何處理呢？”劉徹對車千秋的上書非常感慨，之後，巫蠱動亂的處置完全被顛倒了過來。劉徹在兒子遇害地修建思子台和宮殿，追念劉據，追悔莫及。衛家的名譽也很快得到了恢複。
冤假錯案得到了撥亂反正，漢武帝劉徹的壽命也快走到了盡頭。他叫畫工畫了一幅周公抱著周成王接受諸侯朝見的圖畫賜給霍光。後元二年（公元前87年）春天，漢武帝劉徹又一次病重，霍光流著淚問道：“皇上萬一歸天，誰可繼承皇位？”劉徹說：“你難道不明白我賜畫的意思嗎？我讓幼子即位，你來當周公。”漢武帝定最小的兒子劉弗陵為新太子，選中謹慎可靠，又出身霍家的霍光來當輔政大臣。
霍光是霍去病同父異母的弟弟，是霍仲孺正兒八經生下的孩子。霍去病成人之後才知道自己的身世，一次征討匈奴路過霍仲孺的家鄉，認了霍仲孺這個父親。霍去病認父後，把弟弟霍光帶走了。當時霍光年紀十歲出頭，因為霍家的蔭庇，擔任了郎官，伺候在漢武帝劉徹身邊。霍光的性格和霍去病完全不同，他埋頭做事，小心謹慎，在服侍漢武帝的二十多年時間裏，竟然連一丁點的小錯誤都沒有犯過。