徐鉉的離任在唐國官場裏炸鍋了，沒想到是於樂的第一把火燒走了吏部尚書，並讓韓熙載繼任。
南唐采用的是文人政治，對安定社會、防止武人專權，維護統治有很大的積極作用。但用人的失當也造成了嚴重的不良後果，特別是後來的朋黨之爭，也就是李璟做皇帝時發生的。李璟任用以詩詞歌賦文章見長的文人，馮延巳、馮延魯、潘佑、徐鉉等，對阿諛奉承的奸佞小人如陳覺、查文徽等也聽之任之。
李璟任用的大臣裏宋齊丘、馮延巳、馮延魯、魏岑、查文徽為一黨，孫晟、常夢錫、江文蔚、李德明為一黨。兩黨明爭暗鬥，爭權奪利，並導致大批精英級別的文臣武將成為犧牲品，讓南唐損失了大批有用的人才，從而導致了南唐朝政荒弛，國運衰退。特別是與周國的淮南戰爭失利之後，南唐政權遭到了嚴重的打擊，軍事上的慘敗促使李璟痛下決心整治朝堂上的朋黨問題，但其猶豫不決的性格並沒有做到斬草除根，依然存在。
於樂的第二把火是燒向了寺院，先是金陵的寺院，他讓明成帶領金陵大學早歸的學生，由官兵保護，丈量金陵城內所有寺廟的土地並嚴查賬目，這麽做的目的不是滅佛，是要控佛。當然阻力之大，前所未有，除了寺廟公然對抗外，還有朝臣站出來幫腔，更有甚者鼓動信佛的百姓製造騷亂。對於這些於樂早有防範，曆史不是白學的。
對於不聽話的寺院鎮壓、對於朝堂上為佛求情的大臣抓、不明事理的百姓抓領頭的殺。雖然不可能血流成河，但殺人是避免不了的。
“執相大人，你這麽做會動了國之根基啊！先皇是極力崇佛的，你這麽做對得起先皇嗎？”嚴續不得不跳出來意圖阻止於樂的行為。朝臣都想看看於樂的舉措。
於樂看了眼嚴續說道：“嚴大人老了，頭腦昏花，不明事理，該頤養天年了。來人，送嚴大人回鄉。”