杜聿明到全國政協文史專員辦公室上班之前，曾在北京大興縣紅星人民公社舊宮大隊果木生產隊當了兩個月的農民。這與邱行湘曾在南京白下區洪武路躍進製盒廠當了兩個月的工人一樣，都是源於周恩來總理的安排。“不勞動者不得食，這是普天下最為樸素的道理。”那天在中南海西花廳，周恩來這樣告訴昔日的皇帝與將軍，“有機會參加體力勞動，對你們來說還是必要的，所以你們都去鍛煉一段時間。”
就在這段時間裏，杜聿明接到國務院辦公室的電話通知，說是英國元帥蒙哥馬利來華，周總理於當晚要在人民大會堂宴請他，屆時要杜聿明作陪。杜聿明放下話筒，眉頭緊鎖地從公社回到生產隊。同隊的楊伯濤得知電話內容後說：“這是好事呀！抗戰期間，英國軍隊和你指揮的中國遠征軍在緬甸聯手作戰，這麽多年過去了，蒙哥馬利想要見你，也在情理之中呀！”杜聿明瞪了楊伯濤一眼：“要是這位英國元帥希望見麵，我不會去的。當年若不是英軍臨陣怯逃，中國遠征軍也不會傷亡過半。好在今天是周總理的邀請，等會兒車子來了，我自然要去。”楊伯濤回瞪了杜聿明一眼：“粗布棉襖，滿身泥土，你怎麽進得了人民大會堂？再者說了，蒙哥馬利現在還是英國元帥，可是你隻是一個農民，農民雖不低賤，但千萬不能讓高貴的英國元帥看不起我們。”說完，楊伯濤從箱子裏取一套他在國民黨十八軍軍長任上購置的深色西裝，匆匆替杜聿明穿好。雖然不太合身，杜聿明還是表示了感激。
席間，見杜聿明神態凝重、沉默寡言，周恩來特意向蒙哥馬利介紹了杜聿明的過去：“中國人民解放戰爭的最後階段，我們經曆了遼沈戰役、平津戰役和淮海戰役，這三大戰役國民黨軍隊的戰場最高指揮官，就是我們今天在座的杜聿明先生。要知道，他先後指揮過武器精良的百萬大軍哩！”蒙哥馬利扭過頭，突然問杜聿明：“你的百萬大軍到哪裏去了？”杜聿明愣怔了一會兒，隨後笑道：“都送給他了。”杜聿明指了指坐在席桌對麵的陳毅。陳毅沒有笑：“你哪有這麽大方？你的百萬大軍是我們一口一口吃掉的！”杜聿明無言以對，倒是周恩來出麵打了圓場：“不以成敗論英雄嘛，杜聿明先生從戰犯到公民，也不失為壯士斷腕英雄氣概，實在是難能可貴呀……”