清代學者趙翼在研究中發現南朝宋、齊、梁、陳四朝開國君主的出生地，均集中在今內蒙武川縣南地方“數百裏內”,而特別是北周、隋、唐三代的開國先祖“皆出於武川”。小小的武川鎮，竟然孕育出了三姓帝王，建立了三個王朝，不能不使世人感到驚異。
這個人才輩出的武川鎮到底有什麽特別之處呢?武川鎮是北魏政權建立之初，為抵禦北部邊陲遊牧民族的侵擾，捍衛當時的首都平城(今山西大同市)而建立的六個軍事據點之一，其地在今內蒙古自治區武川縣西南烏蘭不浪土城梁大青山中分之北缺口處。另外五個軍事據點沃野、懷朔、撫冥、柔玄、懷荒也都分別排列在從今內蒙古河套平原的五原縣到今河北張家口一帶的塞外風沙塞土之中。北魏正光五年(524),六鎮起義爆發，作為中級軍官的楊禎站在北魏朝廷一邊，沒有參加起義，舉家避亂於中山(今河北定縣),並糾集武裝“誌士”討伐已進入河北的由鮮於修禮統率的六鎮義軍，結果被起義軍打死。這是史書所載楊忠的先祖最具體的一個“事跡”。
楊氏的發跡，完全是依仗於楊廣祖父楊忠的軍功。另外，外祖父獨孤信也具有重要影響。
楊忠小名叫奴奴，生於北魏正始二年(505),關於他小時候的情況，史書沒有記載，知他長大後生得魁梧雄壯， "美髭髯，身長七尺八寸，狀貌環偉，武藝絕倫，識量沉深，有將帥之略”。
楊忠很可能參加了邢杲領導的流民起義，充當“舌遝榆賊”,失敗後逃到南朝。但由於封建時代視農民起義為大逆不道，其子孫認為不光彩，所以，把這段“不光彩”的曆史加以隱瞞，捏造梁軍陷郡俘獲楊忠的情節。
528年，南朝的梁武帝趁北魏六鎮起義後的內部戰亂，命大將陳慶之率眾七千護送降梁的北魏北海王元顥去洛陽爭奪帝位，好充當自己的傀儡，染指北方。二十三歲的楊忠也被征入了這支軍隊，隨軍回到北方，被提拔為直閣將軍。後北魏丞相爾朱榮遣爾朱兆、賀拔勝率軍反攻洛陽，殺北海王元顥，梁軍全部陷落。具有八尺身長、將帥之表的楊忠被爾朱榮的從弟爾朱度律看中，召為帳下統軍，於是，楊忠加入了契胡爾朱氏軍事集團。