隨著小愛玲的慢慢長大，煩惱也隨之而來，因為在這座大宅院裏，無聲的戰場上彌漫的硝煙越來越多。
張佩綸一共有兩個妻子，原配夫人生下了兒子張誌滄和張誌潛，第二個妻子生下了張誌沂，不過張誌滄在年少時就早早夭折了。張誌沂一家與張誌潛一家開始了長達幾年的“同居”生活。
不過這種“同居”生活並不和諧，張佩綸去世後，張誌潛作為家庭的大家長，掌管著家庭的日常事務，張誌潛雖然有錢，持家卻十分的節約，他嚴格控製家庭裏的每筆錢，而且對弟弟、弟媳時刻保持著家長的威嚴。張愛玲還在作品《小團圓》中，寫下了父輩們對這段往事的抱怨：
從前提親的時候，嗬喲！從前提親的時候，嗬喲！講起來他們家多麽了不起。我本來不願意的，外婆對我哭了多少回，說你舅舅這樣氣她，我總要替她爭口氣。好，等到過來一看——她又是氣又是笑，“那時候你大媽當家，連肥皂都省，韓媽膽子小，都怕死了，也不敢去要。洗的被窩枕頭都有唾沫臭。還要我拿出錢來去買，拿出錢來添小鍋菜，不然都不能吃。”
眼見著兩個家庭之間的矛盾越來越深，一個突如其來的消息讓張誌沂看到了希望：北洋政府交通部長的堂兄長張誌潭有一個英文秘書的工作，這個工作最基本的要求就是需要具備最基本的英語書寫能力，回複英語信件。因為母親的嚴格要求，英文對於張誌沂來說是信手拈來，而且最令他心動的是，這個工作遠在天津。在得知這個工作機會後，張誌沂當機立斷決定與二哥分家，帶著全家到天津生活。
張誌沂帶著全家還有分配到的房產、地產等財產，從上海來到了天津，生活在張佩綸結婚時生活過的一座洋房裏。這座洋房沒有花園，沒有草坪，也沒有那麽奢華，但從房子內散發出來的清新、自由的空氣，讓張誌沂和黃素瓊忍不住鬆了口氣。