在對抗隋朝的過程中，李氏兄弟之間的合作壹直到唐朝建立之前都是默契的。燕王知道自己的功勛和威望不如百姓，很害怕，就和弟弟齊王李元吉聯手排擠陷害李世民。受李世民重創的竇建德追隨魏徵，試圖奪回兵權，李淵也試圖任用裴濟，最終大敗，不得不用李世民領兵。
玄武門之變，太子李和的第四子李元吉，都死在秦的箭下。李世民讓尉遲恭穿著盔甲去迎接唐高祖。得知兩個兒子都死了的消息，唐高祖被徹底收監，秦王李世民被立為太子，並下令從此所有政務都要先交給太子，再由太子傳給唐高祖。言外之意很清楚，唐高祖害怕了。
早些時候，當唐高祖開始他的軍隊和他的財富，他早就想到了政變。秦王李世民的才能和威望在軍中無與倫比，因此沒有官員獎勵他。但是太子的位置已經讓給了李，選擇了放縱。他想看到勝者為王的局面。可以說，秦王造反，唐高祖猜到了，但是他沒有控制好局面，壹不小心僥幸逃脫了。
早在宣武門兵變之前，就已經對秦王李不滿了。李世民戰功卓著，名聲大振。此外，他全副武裝，這註定是壹個麻煩。雖然唐高祖被確立為王子，但他並沒有給他多少政治上的幫助。隨著秦王權力的擴張，東宮開始先發制人。可惜政變失敗，兩兄弟成了刀下鬼。此時，唐高祖再也說不出什麽了。相反，他不得不在金殿安撫李世民，說他早就想立李世民為太子，痛哭流涕。那時候，唐高祖壹定從心底流下了眼淚，但他當然不後悔沒有讓他的二兒子當王子。
李被殺後，原太子集團的部分勢力依然存在，如宰相裴濟，但此人的權利壹天天被壓制，最後不了了之。作為皇帝的父親，唐高祖自然知道自己的兒子不殺自己，但是自己手裏沒有權利，每天只能在宮裏自娛自樂，這和他未出道前的日常生活非常相似。然而，正是在這壹時期，唐高祖給李世民留下了許多麻煩。
從退位到去世九年，李淵唯壹能做的就是組播播種。那段時間，李世民有30多個兄弟姐妹，最小的弟弟比他的兒子還小。比如《二十二個兒子》中的李元嬰，他有很高的藝術修養，但他的生活方式卻不盡如人意。每到壹個地方，山東鳳儀、蘇州、龍州、李元嬰都會蓋很多樓，搞得人苦不堪言，被當地人指著後背唾罵。因為他是李世民的哥哥，只要他不犯政治錯誤，李元嬰就敢無視法院的警告。相反，李世民和李治對他毫無辦法。也許這是唐高祖死後留給李世民的唯壹懲罰。