三天後，司馬相如果然呈上了一篇新鮮出爐的《上林賦》，漢武帝讀後驚訝不已，一個普普通通的園林竟能寫得如此美輪美奐。
“司馬先生當真是神來之筆，朕佩服之至。”漢武帝心悅誠服道。
“上林苑雖是冬天，規製尚在，臣相信，到了春天必如賦中所寫。”
漢武帝想了想：“朕開春後想重修上林苑，你覺得如何？”
“蕭相國曾說過，夫天子以四海為家，非壯麗無以重威，且無令後世有以加也。臣竊以為，營建上林苑並非為帝王一己之私欲，而是彰顯我大漢的繁榮昌盛。”
漢武帝大喜：“先生所言正合朕意。讓你負責重修上林苑如何？就依你賦中所言。”
司馬相如麵露難色：“臣長於作賦，卻不懂營造，恐難擔此重任。”
漢武帝有些遺憾：“既如此，你先做個郎官吧。”
自此以後，司馬相如得召的機會大為減少，如果不是有重要的文書，漢武帝很少想起他。相比之下，東方朔則時常跟隨在漢武帝身邊，排憂解悶，插科打諢，不失為調劑心情的一大法寶。
不過，憑借一把綠綺、一支生花妙筆，司馬相如在長安的名氣卻遠勝於東方朔，成了達官貴人的座上賓。有了嶽父卓王孫的資助，他的日子也過得極為瀟灑，不為生計愁，不為仕途憂，一派名士風采。
建元三年（公元前138年）的正月，漢武帝開始謀劃重修上林苑。想來想去，他決定讓太中大夫吾丘壽王負責這件事。
吾丘壽王是趙人，兩年前因善下棋被召入宮中，為人聰明機智，博學多才，是個辦事的幹才。漢武帝先讓吾丘壽王對上林苑進行一番考察，計算占用民間土地的麵積，以及補償方案。一個月後，吾丘壽王考察完畢，在宣室內向漢武帝報告。
看完報告，漢武帝很高興，問道：“如果以司馬相如的《上林賦》為藍圖，大概需要多長時間能建好？”