劉驁在通常的尋歡招式中漸漸覺得有些乏味，便花樣翻新，尋求更大的刺激。劉驁在深宮裏和趙氏姐妹尋歡的地方，都讓近侍重新裝飾，四麵擺上屏風，屏風上畫著生動的紂王、妲己長夜**樂圖。可是成帝雖然年紀尚不算太大，但怎麽也架不住如此晝夜放縱，雖然他經常服用補品，但不管怎麽補，也架不住身體的虧空，便日漸消瘦，神思恍惚，連日常生活都得依靠近侍張放了。
張放雖然是男身，但長得相當的秀氣，一點兒也不像是男人，倒長得像一個女人。劉驁寵著張放，實際上張放是劉驁的同性戀者。劉驁縱情聲色，和趙氏姐妹縱欲尋歡，以至於弄垮了身體，被太後知道了，可是太後又不能直截了當指責趙氏姐妹，或者批評劉驁，因為畢竟劉驁是皇帝，而趙氏姐妹一人為後，一人是昭儀啊。所以太後便首先拿張放開刀。太後有一天把劉驁召到自己的宮裏說道：“皇兒啊，母後經常聽到一些傳言，總說你過於寵信張放，以至於懶於朝政，隻知道尋歡作樂，這哪裏還有皇帝的威嚴呐，母後希望皇兒不要過於寵幸張放，要親理朝政，而且母後還希望皇兒降旨把張放放回到自己的封地去，立即離開皇宮，最好永遠遠離京師，如果這件事皇兒不答應的話，母後自有辦法。”劉驁聽到王太後這麽說，雖然並不情願，但也不敢違背自己母親的意思，隻得同意了。
可是劉驁離不了張放日常的服侍，張放如果離開的話，他哪裏受得了？可是太後的觳旨已經下來了，他哪裏敢違抗，明明不願意也隻得照辦。張放呢，也隻得接旨出宮，誰也救不了他。張放離開皇宮之前，劉驁特地前去送行，這個多情的皇帝此時哭如同淚人兒一般，依依不舍的送走了張放，一直到張放遠遠的不見了人影兒他回到皇宮。涼州刺史穀永覺得皇帝這樣做不是聖明天子的所作所為，在一次天象有變的時候，穀永便借題發揮，上奏劉驁道：“陛下乃為萬乘之尊，樂於做家人仆役的賤事，而厭惡高貴的尊號，而好匹夫小人的卑名，終日裏同群小廝混，晝夜尋歡，不理朝政，以至於公卿百官不知道陛下身在何處，已經有好幾年了。”這封奏章落到劉驁的手中之後，劉驁隻是一笑置之，根本就不置可否。