放下了這件事之後，高懷遠對於金國已經徹底失去了興趣，他們自己找死，由著他們去吧！他該忙他的事情，還是要忙他的事情的。
可是他不想趙於莒的事情，有人幫著他在想，其中最熱情的便是他的老爹高建，高建在紹興也是第一時間聽說了趙於莒的事情。
這件事被他得知之後，高建立即便動起了心思，他怎麽也沒有想到，當初自己兒子無意間結交的一個平頭老百姓，這個時候突然就飛黃騰達，莫名其妙的成了沂王的兒子，而且聽說是當今朝中第一人史彌遠所親點，於是他便開始坐在屋子裏麵合計這個事情。
很快他提筆給高懷遠寫了一封長信，信中替高懷遠分析了這件事的好處，讓高懷遠無論如何，也要想辦法聯絡上趙於莒也就是現在的趙貴誠，並且通過趙貴誠，再想辦法掛上史彌遠的關係，無論花多少錢，隻要打通了史彌遠這層關係之後，他們父子二人以後便會官運亨通，不說能到京中當個大官，起碼回頭都弄個知府當當應該問題不大吧！
高懷遠收到了老爹這封信之後，被高建的這個計劃搞得更是哭笑不得，他老爹現在真是有些昏頭了，當了一輩子官了，居然還沒有他看得清楚這件事之中隱藏的危機，還想讓他通過趙於莒去抱住史彌遠的粗腿，這個時候按照紀先成的想法，躲都躲不過，唯恐避之不及，高建還讓他這麽做，弄不好就會人仰馬翻，他們父子二人都一塊倒黴。
於是他幹脆將這封信置之高閣，隻是簡單回複了一封信給高建，讓高建稍安勿躁，這件事不是那麽簡單的事情，萬不可這個時候去蹚渾水去。
高建接到了高懷遠這封信之後，被弄得一頭霧水，怎麽也看不出這是一盆渾水，高懷遠為什麽不要讓他去蹚渾水呢？
於是他再接再厲，再給高懷遠寫信，甚至還親自跑去全氏家，拜見全氏，還拿出不少錢，資助全氏和趙於莒的弟弟趙於芮讀書，一心想要通過這個途徑，為自己和兒子謀個更好的出身。