做好一切準備事宜後，朱子敬命令翁世忠帶騎兵第一團掩護六萬難民攜帶繳獲的物資，有序地迅速離開兗州，他則帶著騎兵第二團留在兗州城內，他還有兩件事情要做的。
第一件事情，是找到兗州城之戰中戰死的明軍官吏和官兵們的遺體，並妥善掩埋，樹立墓碑。
清軍圍攻之下，兗州的守城戰，打得非常慘烈，在知府鄧藩錫帶領下，缺少糧餉的明軍以劣勢的兵力，被二十倍兵力的清軍攻破，監軍參議王維新、推官李昌期、 副將丁文明、滋陽知縣郝芳聲等戰死，知府鄧藩錫也在被俘後不願投降隊清軍罵聲不絕，最後被清軍砍斷手腳大卸八塊而犧牲。
朱子敬命人找到這些烈士們的遺體，使用上好的棺木裝殮好，在兗州城外找了一個地方，掩埋了他們的遺體，並找到幾個石匠，刻上幾個簡單的碑文，記錄烈士們平生和在兗州守衛戰中的事跡，也好讓他們的親屬找到。
朱子敬親自帶隊向烈士們鞠躬致禮，並且焚香祈禱請他們安息，飛虎軍日後保證會消滅清軍，為他們報仇雪恨。
最後，飛虎軍向天鳴銃三遍，向烈士們致敬。
安頓好烈士們身後事宜後，朱子敬便要去做第二件事情了。
這第二件事情，朱子敬是要去取一筆財富。
在兗州城內有明廷的宗室魯王朱以派的王府，在清軍大舉來攻兗州的時候，朱以派眼睜睜地看著守城明軍缺糧少餉卻無動於衷，一開始就打算一毛不拔。
當時，兗州知府鄧藩錫得知清兵進關的消息，趕緊組織力量加強兗州城防，為了籌集軍餉，去找兗州城內最大的大戶朱以派籌餉，以鼓舞守城軍民的士氣。他嚴肅地對朱以派說：“臣聞城之不守，皆由城內貴家自惜金錢，自愛安樂，而令窶人餓夫傭子登陴擊柝捍禦，遂多敗事。夫城郭者，我之命也；財賄者，人之命也。我不能畀彼以命，而望彼畀我以命乎？王能散積儲以鼓士氣，城猶可存，命猶可保；不然，大勢一去，玉石皆燼，悔無及矣！”