安政二年（1855年）四月初，長崎奉行小栗忠順拜訪了伊豆下田港，和下田奉行江川太郎左衛門交談後堅定了“以扶桑金易海外銀”的決心，之後他便繼續前往江戶述職——“以金易銀”的牽扯甚多，老中們在去年就收到了小栗的提議，但直到最近才召集他回江戶當麵商議。
坦庵先生知道，既然幕府特召小栗返回，那可能是中樞已經對此已經有了定論，此策十有八九必然施行，但自己在之前從未收到任何風聲。小栗特意過來通報，也隻是為了避免日後事泄造成猜疑和隔閡。
雖然自從小栗忠順榮任長崎奉行後，自己早就預料到這一天，但真發生這樣的事情，事後他還是唏噓不已：
小栗父子如今都是遠國奉行，其聲勢已經超出江川家太多了，以前是人家配合自己，如今輪到自己配合對方了。
自從黑船兩次來訪後，幕政動**不安，自己急流勇退，從中樞返回伊豆國，外人看來，自己是明哲保身，但自家一片發展西洋產業、挽救幕府頹勢的苦心，卻很少有人能理解。
在大事將行前，小栗能特地前來通告一聲，足見盛情，也不能再要求更多了。
他提點了兒子幾句，英敏點頭稱是——自從參與白主機密後，英敏的心態不知不覺發生了變化，壓力使人成熟，他也長進了不少，因此這些他都能理解。
雖然在治政和生意上，大家是親密盟友，但各自都有自身的顧忌，好些事做得說不得，比如“彼得羅巴甫洛夫斯克包圍戰”自己就沒全盤托出，這次隻是告知小栗，“聽說魯西亞在北方受到了英佛聯軍的攻擊，損失慘重。”
“誰還沒有點小秘密”，直秀說的話，現在自己深有體會——幕府暮氣深重，做事顧忌太多，大家都不容易啊。
裝上船這次小栗忠順給的兩門線膛炮、三十隻後膛槍，帶著老爹和弟弟給湊的二百餘家臣領民，英敏踏上了回白主的航程——這些軍械不是挪用的，而是鹹亨洋行的返@點，相當於扶桑的“漂沒”。