他和他爹一樣，為了家產，直接把長孫無忌一家攆出了家門，沒地方住的高小姐隻能帶著兩個孩子回了娘家，就是高士廉的家。
後來高士廉看李世民不錯，就把年僅十三歲的長孫氏嫁跟了這位二公子。
之後是李淵在太原起兵，長孫無忌火速去投奔這位妹夫李世民。
後來李淵登上皇帝，李世民和長孫氏被冊封。
長孫無忌也被冊封了個上黨縣公。
長孫無忌和和妹妹都出人頭地了，而那個長孫安業可沒弟弟妹妹爭氣，他是整天遊手好閑吃著老爹的遺產，不僅是坐吃山空，還是個嗜酒無度的潑皮無賴。
如果一直這樣還好點，但李世民在武德九年發動了玄武門之變，李淵不得不把皇位交給這個二兒子。
掌權後的李世民，按照慣例是大行封賞有功之臣，按照禮製帝王登基還要追封嶽父家的官爵。
雖然這個慣例會引發皇後娘家兄弟爭搶的事例有很多，但畢竟是禮數不能廢掉。
然後李世民就給這個已故的嶽父封為齊國公，這是國公的爵位，因嶽父已故，就讓長孫無忌繼承爵位，結果自然是引發了長孫安業的不滿。
他認為自己是長子，就該繼承父親的爵位，而長孫無忌雖然是功勞大，但完全可以獲得個新的國公爵位。
這本是無可厚非的事，但長孫無忌又不是什麽聖人，加上你這個兄長曾經攆自己一家，差點害死自家的仇難道就想這樣算了不成？
李世民沒有這麽做，曾經就聽過小舅子的牢騷，加上長孫皇後又是這麽的賢惠，必須要給她家一個好回贈。
根本不理會長孫安業的胡攪蠻纏，在其他大臣的反對當中他直接問：
“這個長孫安業為我大唐做了什麽貢獻，好像是吃的比別人多，整天遊手好閑吃喝嫖賭吧？”
大臣們無奈，但長孫無忌家畢竟是功臣家，而且他的父親都獲得了封賞，長孫安業畢竟是長子，不給好處說不過去！