豪族、世家。是中國封建社會中不可回避的勢力集團，唐宋以前，每一個主政者都要頭疼於地方豪族對地方政權造成的威脅。而秦漢到隋唐的曆史從某種角度來說，可以用中央政權和世家豪族的發展史來代替。
在秦朝，地方豪族世家的強大可以說是六國殘餘勢力的積澱。甚至，偏激的說秦朝的兼並戰爭還促進了這些豪族世家的發展。
六國政府為了對抗秦王朝的兼並戰爭，就必須要擴兵。為了擴兵，就需要征納賦稅。這樣的情況下，盡管山東六國普通不算貧窮，可依舊讓許多自耕農因為戰爭而破產。
為了躲避戰爭，許多自耕農迫不得已隱蔽在豪族世家的帷幕之下。為了對抗強大的秦國，沒有那個國家希望動亂。同樣，構成一個地區統治基石之一的豪族世家也不是中央政權可以肆意動搖的存在。除非出現齊管仲、楚吳起、燕樂意、韓申不害、魏李悝、趙武靈王這種強勢大臣、君主才能在壓製內部豪族的時候對抗強大的秦國。
如此，當六國滅亡時候。已經有相當龐大數目的自耕農托庇在豪族世家的門下，以豪族世家的羽翼來抵抗來自朝廷的苛捐雜稅。盡管他們要麵對的是同樣不輕來自豪族世家的剝削。
在雁門，故趙之地同樣不例外。若不是邊塞之地，土地廣袤。豪族世家、官府就算苛刻，民眾也可以提前拓荒來解決窘境。不然，扶蘇路途各郡通過特科隱隱所見的尖銳矛盾隻怕在雁門早就明麵化了。
要知道，若不能生存，民變對於彪悍的邊郡之民而言並不算太難的事情。
在雁門，最大的豪族並非是李行李左車父子所在的李家。但雁門豪族世家的頭領的確是傳承李牧之後的李家。李牧盡管沒有被趙國平反，可實際上秦朝統治之後很多秘密已經解封。借助李牧強大的影響力，李家的確是雁門甚至周邊諸郡的話事人。