卻說齊天大聖到底是個妖猴，每天就知道吃三頓飯，夜裏睡覺，沒有煩惱事縈懷，自由自在。遇到閑的時節，就去遊玩交友。見到三清就稱“老”字，遇到四帝就叫“陛下”。跟九曜星、五方將、二十八宿、四大天王，都隻是稱兄道弟，也不叫官稱。每天東遊西**。
許旌陽真人見了，就跟玉帝說，齊天大聖整天沒事情閑逛，結交天官做朋友，就怕閑得久了會生出事，不如給他找個事做。玉帝就叫來大聖，說：“朕見你閑著沒事，給你件事做。你權且管那蟠桃園，多留心。”大聖歡喜謝恩，就去了蟠桃園查看。
園中的土地叫來一班鋤樹力士、運水力士、修桃力士，一起來見大聖，然後察看桃樹。土地說：“一共有三千六百棵桃樹。前麵的一千二百株，結果小，三千年一熟，人吃了能成仙。中間的一千二百棵，果子甜，六千年一熟，人吃了能長生不老。後麵的一千二百棵，是緗核的，九千年一熟，人吃了跟天地同壽。”大聖聽了，查完了樹，然後回府。隨後，三五天來看一次，也不再去別的地方玩了。
這一天，就見枝頭桃子大半都熟了，他想嚐個新鮮，就對仙吏們說：“你們去門外伺候，讓我在這亭子裏休息片刻。”然後爬上大樹，揀熟透的大桃，吃了起來。吃飽之後，才跳下樹來。過了兩天，又跑去偷吃。
一天早上，王母娘娘設宴，在寶閣瑤池中搞蟠桃盛會，就叫紅衣仙女、青衣仙女、素衣仙女、皂衣仙女、紫衣仙女、黃衣仙女、綠衣仙女，去蟠桃園摘桃子。七衣仙女提著籃子到門口，土地和仙吏正在那裏守門，問明之後，就說：“現在齊天大聖管理這裏，需要報他知道。”仙女說：“大聖在哪？”土地說：“大聖在園子裏累了，正在亭上睡覺呢。”仙女於是跟著土地進了園子，亭子裏卻沒有大聖。原來，大聖玩了一會兒，吃了幾個桃子，變成二寸長的人，在大樹梢的濃葉下睡著了。土地就讓仙女先摘桃。