1854年7月8日，直秀剛帶兵從廟屯回來，江川英敏就把直秀拉到自己的屋敷裏嘀嘀咕咕——英敏攢了一肚子疑問，“這白主特立獨行的，直秀你在白主到底攢著啥蔫壞？”
直秀笑而不答，他反問英敏：“坦庵先生兩年來過的舒心麽？”
一句話就把對方噎住了——英敏說白主“特立獨行”，其實就是指責直秀心懷不軌甚至有大逆不道的嫌疑，而直秀反過來問他這句，其實也不是啥好話，言下之意是坦庵先生平時嘔心瀝血的可混出好來了麽？
不提還好，一提江川英敏也自己也覺得別扭：
米人黑船到來前老爹的仕途就開始蒸蒸日上了，本來覺得“黑船這麽一來，他老爹作為蘭學旗幟，宦途應該更上一層樓才是”。可沒想到，居然一年不如一年了，別的精通蘭學的幕臣紛紛高升，可老爹不升反降，連自己這個親兒子也受到了連累——江川英敏一直認為自己到白主這個鬼地方來就是被幕府發配了。
而且更鬧心的是，眼前這個崛直秀還是沾了江川家的光才爬起來的，可江川家倒黴這個直秀反倒成了遠國奉行，到哪說理去啊！
但仔細想想，好像自己家莫名其妙地轉運就是從認識眼前這個崛直秀開始，莫非這是老爹的有意安排，把我放到直秀這裏轉轉運，唔，好像真有這個可能啊。
天保十年（1839年），因為“蠻社(洋學黨)之獄”，老爹被“蝮蛇”鳥居耀藏隨手擊倒——除了世襲的韭山代官，身上的其它役職被剝奪得幹幹靜靜，自己老爹隻能在繩武館教書為樂。
好像是天保十四年（1843年）,具體記不清了，崛直秀拐彎抹角地見到了自己的父親還獻上了幾本農書，也不知道因為啥得到了老爹的另眼相看——直秀表示當然是因為才華了，難道是因為長的帥不成！咦，好像這麽說也不是不行啊。