天寶元年三月初八，正是春和景明的天氣，高力士陪同李隆基與楊玉環在梨園裏待了一日。晚間回到宮裏，高力士將諸事安排停當，即向李隆基請求出宮。
李隆基笑道：“你今日侍奉一天，畢竟有些累了。再巴巴地返回外宅居住，不怕往返折騰嗎？”
高力士道：“今日母族有人來京，臣須去麵見一回。”
李隆基知道高力士事母至孝，高母雖已逝去，其猶對母家之人以禮相待。高力士生在嶺南，那裏尚為蠻荒之地。其多年來散施財貨，對家鄉之人幫助不小。李隆基遂示意他可以離去。
高力士趁著月光進入宅內，家鄉來人早已等直了脖項。他們尋高力士多為兩件事兒，或求高力士替自己謀一出身，或求些財帛。高力士向來不吝嗇，皆使來人滿意而歸，由此來人更多。對母家之人，高力士又多以禮相待，與他們說了一會兒話，將他們所求事兒辦妥，才返回寢室。
妻子呂氏雖與高力士無夫妻之實，但還是一個稱職的女主人。她征得高力士同意收了數個養子養女，宅內器物甚精，她還享有朝廷五品的俸祿，實為令人尊崇的貴婦人。呂氏見高力士有些疲累，就親手服侍他臥於榻上，邊替高力士解衣邊說道：“今日李相派人送來了一些禮物，妾推辭不要，來人卻說李相得知嶺南來人，由此致以心意，妾隻好收下了。”
高力士疑竇頓生：“他如何知道嶺南來人了？所送禮物為何？”
“有潞綢、馬蹄金等物，其價不菲。”
高力士“嗯”了一聲，畢竟有些累了，很快閉眼沉沉睡去。李隆基不上早朝，由此也解脫了高力士，這一覺直睡到天色大亮。他醒來後又想起李林甫送禮的事兒，心中暗自歎道：實乃聰明之人啊！其既討皇帝歡喜，又待朝中上上下下重臣一團和氣，明白事體孰輕孰重，這宰相之位一坐就是六年，皇帝至今還沒有換相的意思。