李淵與原配夫人竇氏共生有四男一女：長子李建成，次子李世民，三子李玄霸，四子李元吉；一女是平陽公主，女婿是隋東宮千牛備身柴紹。其中除三子李玄霸早亡外，其他的三男一女一婿全部參與了李淵從起兵到建唐的全過程。
而其中表現最為突出的人，當然非李世民莫屬。
公元599年1月23日，即隋開皇十八年十二月二十二日，李世民出生於武功（今陝西武功縣）。相對於李淵來說，李世民的出生就多出了一層神秘色彩。史稱其出生時，有兩條龍在他們家門口嬉戲喧鬧，整整鬧了三天才離開。
李世民四歲時，又有一個神秘的相士來到他們家，對李淵說：“公是貴人，且有貴子。”看到李世民後，這位相士更是嘖嘖稱奇，情不自禁地說：“龍鳳之姿，天日之表，年將二十，必能濟世安民矣！”（《舊唐書·太宗本紀》）
李淵又驚又喜。喜的是他們父子二人均有天命，來日必將貴有天下；驚的是此事一旦泄露，必定惹來殺身之禍。李淵狠狠心，決定把這個不知來自何方的相士殺了。可轉眼之間，那個神秘人物便已消失無蹤了。從此，李淵便以“濟世安民”之義，為次子取名李世民。不知道李世民在此之前是否有過別的名字，反正從這個時候起，這個寓意深遠的名字就將伴隨他的一生，並且注定要載入史冊、彪炳千古了。
關於李世民的少年時代，各種史籍的記載都很簡略，我們隻能從相關史書的隻言片語中略窺端倪：
貞觀初年，李世民曾對時任尚書左仆射的蕭瑀說：“朕少好弓矢，自謂能盡其妙。”（《貞觀政要》卷一）
貞觀年間，李世民在寫給魏徵的一道手詔中說：“朕少尚威武，不精學業，先王之道，茫若涉海。”（《全唐文》卷九）
貞觀十五年（公元641年），四十三歲的李世民在武成殿大宴群臣，曾回憶自己的過去說：“朕少在太原，喜群聚博戲，暑往寒逝，將三十年矣。”（《舊唐書·太宗本紀》）