李林甫不斷擴張自己的權勢，大起冤獄排斥異己，其實有兩個人物卻特別“走運”,一個是少數族出身的將領安祿山，一個是楊貴妃的堂兄楊國忠。
安祿山，是營州柳城(今遼寧朝陽)的混血種胡人。父為康姓胡人。母阿史德氏，突厥巫師，以占卜為業。據說，其母是在軋犖山祭神後生下安祿山的，故初取名為“阿犖山”(亦作“軋犖山”)。軋犖山是突厥人崇拜的戰神象征。不過，“阿犖山”從未用過康姓，又從小即以孤兒寡母的在突厥部落中遊**，所以，“阿犖山”很可能是個私生子。後來其母嫁給突厥安波注(一作安波至)的兄弟安延偃。
開元初，安延偃部落破散，突厥將軍安道買的兒子安孝節和安波注的兒子安思順、安文貞帶著“阿犖山”逃至嵐州。安孝節的弟弟安貞節在嵐州擔任別駕的官職，故收留了他們。其時“阿犖山”年僅十餘歲，遂與安孝節、安貞節和安思順並為兄弟，冒姓安氏，改名祿山。
安祿山長大後，“奸賊殘忍，多智計，善揣人情”。因其從小在多民族聚居的地區混跡，因而“能解九蕃語”(一作“六蕃語”)。與安祿山一起逃出來的還有一位史思明，與安祿山為鄰裏相好，前後一日生，史思明除日(除夕之日)生，安祿山元日(正月初一日)生。兩人長大後，情誼甚深，皆為當地諸蕃互市牙郎(市場管理小吏),又善於打仗，以驍勇著稱。
開元二十年(732),張守珪為幽州節度使，任安祿山和史恩明同為捉生將。安祿山熟悉當地“山川井泉”,對奚、契丹的情況也很了解，故命其出戰必有克獲。有時隻帶三五騎兵，也能生擒契丹兵數十人。張守珪“每益以兵，擒賊必倍”。
張守珪是長期轉戰邊境的宿將，頗賞識安祿山的驍勇之才，故提拔他為偏將。每戰，據說是“所向無不摧靡”,深得張守珪的寵信，繼而將其收為自己的養子，並以軍功加員外左一騎衛將軍，充衙前討擊使，視為自己的心腹將領。