紫禁城裏的道光帝，隻有苦惱和憤怒。他堂堂天朝皇帝，對蕞爾小國英吉利，已經給予了最大程度的“懷柔”，他們要告林則徐、鄧廷楨，兩個人都已經革職，甚至林則徐銷毀的鴉片，他已經默許琦善設法給予五百萬元的賠償，他們還有何“冤抑”，為什麽還要提出過分的要求呢？
在道光帝看來，他對英吉利已經是“皇恩浩**”了，他們不但沒有感恩戴德，還占據著定海不還，又通過琦善提出非分要求，就連大臣們也看不下去了。派到福建的欽差大臣祈雋藻、署理兩江總督裕謙、浙江巡撫劉韻琦都主張武力收回定海。禦史言官們筆鋒都對準了琦善，掌廣東道監察禦史高人鑒，上奏斥責琦善：“身任大員，輒以懦怯之詞輕宣諸口，惑人聽聞，尤屬何心？”革職留任太常寺卿唐鑒指斥琦善“意主苟安，心殊畏縮，長叛國之驕誌，生漢奸之逆謀”。掌廣西道監察禦史蔡家玕連續上奏，說英國“國強且富，海外諸國多被並吞，而且仁義不聞，以利為命”，對這樣的國家“必以力製之”。他認為“能守而後能戰，能戰而後可和”。琦善一味媚敵，才致英夷“猖獗之形愈甚”。戶科給事中萬啟心更直接，認為琦善根本無疆吏之才，讓他趕緊打道回京，重新起用林則徐、鄧廷楨，“臣訪問粵人及士大夫有識者，皆謂兩人在粵熟悉夷情，加以屢次防守夷船，頗殫智慮，幸免疏虞，深為該夷所畏”。他要求朝廷要對英軍“大彰天討，起複兩人，令其專辦戰守”。
“撫夷”是道光帝做出的決定，如今卻引起這麽多人的不滿。派往浙江和廣東的兩位欽差大臣卻很不爭氣。琦善就不必說了，浙江伊裏布不僅未能實現以英俘換回定海計劃，反而與英夷達成所謂“休戰協議”，而且與琦善遙相呼應，說琦善是在“萬分緊迫”的情況下對英作出讓步，“實因無可如何”，並借口“現在炮尚未齊，兵尚未集，海道尤須確探，民力不可深恃”，遲遲沒有出兵。