杜甫之所以沒有立即離開夔州，也是迫於生計，不得不暫時留在此地。
在杜甫四處奔走時，有一次他去夔州長史元持的家中做客，偶然見到了臨潁李十二娘的劍器舞表演。恍然間，他想起了自己年幼時見公孫大娘舞劍的情形。他在《觀公孫大娘弟子舞劍器行》這首詩的序中說：“大曆二年十月十九日，夔府別駕元持宅，見臨穎李十二娘舞劍器，壯其蔚跂，問其所師，曰：‘餘公孫大娘弟子也。’”
往事不堪回首，初見公孫大娘舞劍時，杜甫還是年幼的孩童。如今再見《劍器行》舞，已是白發蒼蒼的老翁了。於是，他不禁感慨道：“五十年間似反掌，風塵澒動昏王室。梨園弟子散如煙，女樂餘姿映寒日。金粟堆前木已拱，瞿唐五城草蕭瑟。玳筵急管曲複終，樂極哀來月東出。老夫不知其所往，足繭荒山轉愁疾。”
杜甫老了，不知去往何處，荒山裏下足太難，越走越令人淒楚心傷。
杜甫憶起小時候，不免想起了家中舍弟。他自幼在姑姑家長大，與弟弟們相處的機會本就不多，長大後他們又分散四處，見麵的機會就更少了。如今，姑母身在江東，身邊有弟弟杜豐陪著。這些年，他從秦州走到西蜀，途中也曾見過杜占和杜穎。
其中，與杜甫感情最深的是杜觀。大曆二年，杜觀因為有同族中的杜位出任江陵行軍從馬，想落腳南方便探望了杜甫。兄弟相見，悲喜交集，杜甫的激動之情溢於言表。他把這情寫到了《得舍弟觀書自中都（至德二年以西京為中京）已達江陵令茲暮春月末，行李合到夔州，悲喜相兼，團圓可待，賦詩即事情見乎詞》和《喜觀即到複題短篇二首》詩中。
不久，杜觀去往藍田成親，杜甫也有詩相贈。之後，杜觀落腳荊州，並不斷勸杜甫出峽。杜甫雖然不喜歡夔州的氣候，此地朋友也不多，卻沒有立即動身，依舊居住在夔州。