張嘯林在聽說日本人要全麵進攻上海的消息之後，就立刻說要去莫幹山避暑，實際上，他是避難。臨走之前，他把家中所有金條、珠寶、英鎊、法郎、美元以及文件契約，包括那份提煉海洛因的處方在內，統統存入國際飯店地下金庫。金庫始建於1932年，麵積一百多萬平方米，四麵布滿了大大小小三千四百多隻保險箱，全用幾厘米厚的鋼板製成。庫房圓形鋼門直徑2米，厚達65厘米，重達9噸，需要兩位大力士緩緩拉動機關，方能啟動開關。庫房保持恒溫，裝有煙霧報警與防盜設備。
張嘯林把家中能搬動的東西，紛紛藏入地下金庫，確保萬無一失了，才帶著小妾和隨侍，悄悄來到莫幹山。莫幹山是天目山之餘脈，位於錦繡江南的滬寧杭金三角腹地，距杭州60公裏，離上海240公裏，有“江南第一山”的美稱，有“三勝”“四優”的特色。因春秋末年，吳王闔閭派幹將、莫邪在此鑄成舉世無雙的雌雄雙劍而得名，這裏山巒連綿起伏，風景秀麗多姿。那“三勝”，即是竹盛，品種之多，品位之高為全國第一；泉多，峰峰皆水，步步有泉；雲幻，雲海茫茫，變幻莫測。“四優”是指“綠”、“涼”、“清”、“靜”四大特點。張嘯林的“林海幽居”坐落在山嶴裏。進大門以後，隻見篁竹千竿，綠葉萬簇，光線一下子變成青色的了。鋪滿了落葉和青草的軟軟的地上，流著一條彎彎的手臂粗細的泉水，在石頭和樹根上麵叮叮咚咚作響。小泉邊上長著搖搖欲墜的滿天星；貼著地麵的，是一大片紫色小花，依傍在深綠色闊葉上，人們叫它勿忘我。十幾年前，張嘯林為了打通浙江煙土的銷路，在莫幹山給當時的浙江督軍盧永祥建了一座避暑用的別墅。
1924年10月3日，盧永祥的浙軍已退守鬆江，受到杭州方麵來的孫傳芳軍隊與江蘇方麵來的齊燮元軍隊夾攻，敗退回上海。13日在龍華總司令部召集緊急軍事會議，討論戰守問題。盧永祥的部下臧致平、楊化昭、何豐林等人主張不惜犧牲，戰鬥到底，誓死保住上海這塊地盤。可惜，當時大多數的部下家產萬貫，舒服日子過習慣了，正想趁此時機脫下戎裝去租界過公寓生涯，不肯去戰場送死。一向忠心於盧大帥的第四師師長陳樂山，這會兒變得膽小如鼠，說什麽“軍無鬥誌，如何堅持”的喪氣話了。盧永祥眼見殘局無法挽回，便於當天下午命秘書起草下野通電。10月14日，盧永祥偕何豐林、臧致平乘日本輪船“嶽陽丸”去了日本。盧永祥在東渡日本前，早已作了打算。他在上海的日本橫濱正金銀行和英商匯豐銀行均有大量存款，有著用不完的金錢。