淳熙二年(公元1175年)的年節過後，肩負著“收回河南陵寢地”神聖使命的湯邦彥自金國中都輾轉回朝。“善為大言”的湯邦彥歸來後，似乎失去了居諫院時的論事風生，失去了出發時的意氣風發，失去了督責“貢船”北行疾進時的頤指氣使，在皇帝和朝廷官員們期待著“崇尚中原儒學經典”的金國皇帝對歸還“河南陵寢地”出使結果的稟報時，竟變得囁囁嚅嚅，含混不清。詢其同行人員方知，湯邦彥一行十餘人在金國南京(開封)鎮防軍副指揮使完顏承裕率領的五十多名金兵執戈操刀的“護衛”下，於臘月二十日從南京啟程，一路走走停停，半個月後，方始到達金國中都。沿途所過之處，多見金國兵營，均呈秣馬厲兵，騎射操練，荷戟待戰景象。待到人中都城後，金國皇帝完顏雍以“年節未過，諸事緩行”口諭，置宋國使者於驛館不理不睬。其間，又有金國兵丁、無賴騷擾滋事，口稱“此乃侄國使者耳”汙言挑唆。湯邦彥厲誡眾人“駐足閉門，勿惹事端”。又逾半月，方得金國皇帝上朝召見諭旨。召見之日，議事大殿外，百餘名身荷甲胄，配刀執戟，麵現殺氣，目露凶光的禁衛軍士豎立蹕階兩側。湯邦彥在刀拱槍門下，兩股抖顫，幾不能行。及至殿內，竟“不能措一詞而出”。
朝堂上一幹禦史、台諫官員沸水烹油般炸開了鍋，紛紛指斥湯邦彥鼠膽無能，有辱國威。轉而更加激烈地參劾葉衡舉薦非人，輕率誤國。
湯邦彥在群情激憤的指責聲中強自辯解，懦懦而語：“非是微臣不措一詞，實是金國皇帝完顏雍強橫無理，他言說河南陵寢地地處金國腹地，念及我國君臣往來不便，欲起禦林軍三十萬兵馬護送諸位先皇棺梓至江南。”
聞聽此言，眾臣子憤情更熾：“金人也忒無理，此等挖墳掘墓之語竟也說得出口，枉稱崇尚儒學，難道孔孟之書都看人了狗眼之中……”