她就是這樣的“林下之風”，而絕非一“閨房之秀”。她就完全沒有當好一個後宅婦人的自覺性，而作為夫君的趙明誠，對這些，也不在乎。
《金石錄》就是他們的孩子
大觀元年（1107年）三月，趙挺之被罷相，五天後病逝。
三天後，蔡京下令逮捕趙挺之在京城與老家的族人，嚴加拷訊，欲治他貪贓之罪，然而都未找到實據。又來查抄家產，除了俸祿所得，也並無其他可疑收入。於是，胡亂安了個“包庇元祐黨人”之罪，褫奪了趙挺之的封贈。
京城這虎狼之穴，眼看是待不得了。這年秋天，官司結束之後，夫人郭氏便帶著全家老小，回了山東青州（趙家祖籍山東密州，後遷居青州）。
自此，開啟了李清照夫婦青州十餘年的退隱生涯。
趙挺之在老家也置了產業——當時蔡京派人去青州查賬加抓人，便是奔著這些產業來的，沒料到趙家正當經營，竟是一點兒把柄也沒能抓到。加上在京時積累的家私，現在郭氏帶著三個兒子，連帶兒媳孫輩一大家子，浩浩****回了鄉，房價物價都便宜，日子還是好過的。
三位公子，都沒了差使。說起來，也是理所應當，一是守製：父親亡故，為子者自當離職回鄉，結廬守墓三年。二來老母年事已高，需人奉養，所謂“清憲公三子皆有賢德，以母夫人高年，家居不仕，講學博古，琴書自娛。”[131]
作為三房最小的兒婦，趙明誠與李清照的小日子，更輕鬆一些。家中庶務，自有母親或兄嫂處理，除了晨昏定省，承歡老母膝下，日常就沒啥事可操心了。李清照一直擔心的她爸李格非，早在崇寧五年（1106年），已被朝廷赦免，大觀二年（1108年），便離開廣西，平安地回到了家。
心無掛礙，有錢有閑有時間，這對才二十來歲的年輕夫婦，便過上了“老有所為、老有所樂”的退休生活。