在陳寶箴的主持，以及黃遵憲、梁啟超、江標、徐仁鑄、譚嗣同、唐才常等人的相繼協助、參與下，湖南在甲午戰爭之後一段時間走在了全國的前列，維新運動獲得了迅速的發展，湖南不僅創辦了影響極大的時務學堂、南學會和《湘學報》《湘報》，而且在政治、經濟、軍事及教育體製的改革等方麵都獲得了長足的進步。
就政治方麵而言，陳寶箴根據梁啟超的建議，在政治體製、機構設置等方麵作了一些工作，設置了課吏館和保衛局，整頓了湖南的吏治，改變了官場的一些陋習。
陳寶箴出任湖南巡撫後，就以整頓吏治為急務，先後罷黜一批昏庸腐朽、貪贓枉法的官吏，但是怎樣才能為湖南培養一批具有新思想、新知識的新型官僚，陳寶箴也在苦苦思索，一直沒有什麽好的辦法。
梁啟超來到湖南後，除了致力於時務學堂的教學管理工作外，對陳寶箴發起的湖南新政也有很高的期待，他在向陳寶箴提出一係列積極建議的同時，也建議陳寶箴在吏治整頓和吏治改革方麵著力進行，其中一個最主要並發揮實際作用的就是建立培養新式官僚的課吏館。
梁啟超在《論湖南應辦之事》中認為，由於湖南地處內陸，湖南的官吏大都缺乏世界觀念，對外部世界所知甚少，“不知學堂、工藝、商政為何事，不知修道、養兵為何政”，湖南如果僅僅依靠這樣一批“未嚐學問無所知識”的舊官僚去推行新政，其效果也就可想而知。因此，梁啟超建議要將開民智與開紳智、開官智相結合，成立時務學堂並擴大招生是為了開民智，設立南學會以興紳權是為了開紳智，然“他日辦一切事，舍官莫屬。即今日欲開民智，開紳智，而假手於官者，尚不知凡幾也。故開官智又為萬事之起點。”而為了開官智，梁啟超鄭重建議設立課吏館，並建議由巡撫出任校長，司道擔任副校長，由課吏館對那些官僚尤其是候補官僚進行新知識的培訓，“稽查功課，隨時教誨”，使他們增加對外部世界的了解，以及講求居官事理，研習吏治刑名諸書，考其所得之深淺，用力之勤惰，以此作為官吏任用的依據，並以此提高湖南新政的行政效率和成功率。