劉詢的不配合讓霍光很不高興。後來劉詢提出，既然許婕妤做了皇後，那她的父親許廣漢做個侯爺總沒有問題吧？雖然以霍家的權勢和地位來看，許家就是多出三五個侯爵對霍家也造成不了什麽威脅，但霍光仍然很幹脆地一口回絕了劉詢的提議。劉詢知道，自己大概已經惹怒了霍光，也沒敢再堅持自己的意見，雙方在這件事上保持了沉默。
經過一段時間的觀察，劉詢發現在立皇後一事上霍光雖然不高興，但似乎並沒有什麽後續動作，以為事情就這麽過去了。然而，劉詢沒想到的是，在這件事上，比霍光更憤怒的是霍顯。她的女兒居然沒能當上皇後，這讓一向要風得風要雨得雨的老太太怎麽能接受，在家裏不住地埋怨自己的男人沒用。
霍光拿這個女人沒辦法，但他自己也沒往心裏去，畢竟自己的外孫女做著太皇太後，現在多出一個沒有勢力根基的皇後，對他霍光並沒有什麽影響。如果哪天霍光不爽了，想要廢掉現在的皇帝，並不用多費多少力氣，犯不著現在就跟皇帝翻臉。再說了，把現在的皇帝整成劉賀第二，下一個劉病已可就不好找了，所以霍光隻是一個勁兒地給霍顯賠不是，並沒有繼續做什麽。
一向蠻橫慣了的霍顯看這次霍光居然沒有順她的意，氣不打一處來，思慮再三，老太太決定自己動手。
最毒婦人心，這話在那些驕橫的女人身上一點兒也不假。要是霍光一意想要自己的女兒做皇後，他大概會找個理由廢了現在的許皇後，然後把她送入永巷了此殘生，而霍顯則不同，她準備弄死許皇後。
然而，皇後不是普通人，也不是一般的貴族，即便沒什麽勢力，皇後的身份地位還擺在那裏，不是說弄死就能弄死的。因此，霍顯一直在等待一個機會。
也算她有耐心，等了一年多之後，機會終於來了。本始三年(公元前71年)正月，懷胎十月即將臨盆的許皇後突然生了病，這下可急壞了劉詢，不僅召了好多太醫來看病，還召了幾個曾經給許皇後做過護理的女醫入宮，準備讓她們二十四小時輪值，而受召的女醫中有一個叫淳於衍。