隋唐皇室都是出自关陇集团的门阀，所以他们之间从北周时代起就有密切的关系，像隋朝建立者杨坚的妻子独孤伽罗和唐朝建立者李渊的母亲，都是独孤信的女儿，也就是说李渊实际上是独孤伽罗的外甥。
后来，在隋炀帝的暴政下，强盛一时的隋朝二世而亡，李渊则重新整合了关陇集团的力量，并依靠关陇集团统一了天下，建立大唐。建立大唐的过程中，功劳最大的是他的儿子李世民。李世民则在征战天下的过程中，建立了自己的势力，还趁机娶了已经家破人亡的表妹：隋炀帝的女儿杨妃。
李世民早年与杨妃的交往已经不可考证了，但两人作为关陇门阀的贵族子弟，又有姻亲关系，很可能早就是旧识了，所以乱世之中，已经毫无依靠的杨妃最终归于李世民也是一段美事。两人一共有两个儿子，分别是第三子李恪和第六子李愔，可见李世民与杨妃之间的感情还是不错的。
尤其是李恪，很早就被封为吴王，李世民非常喜欢他，在当了皇帝后更是对他不停的封赏。后来，太子李承乾谋反被废黜，同时导致了魏王
可是，虽然长孙皇后已经不在了，但她的哥哥，关陇集团的代表长孙无忌还在，他坚决反对立吴王李恪为太子，李世民非常生气：你是因为吴王不是你的外甥，才反对的吧！
可长孙无忌不为所动，他给出了两个理由：第一，现在国家强盛，不是开国时候，不需要英武的皇帝，而需要守成之君。李治仁厚，再合适不过了，难道前朝隋炀帝还不够有才吗？因为太有才了，结果把国家折腾灭亡了。第二，立嫡为储君是自古以来的道理，哪有嫡子还在就选择庶子的道理？
唐太宗听了，觉得很有道理，再加上他非常顾念和长孙皇后之间的感情，也不忍心，所以依然以李治为太子。可他却不知道，就此在长孙无忌心中，把李恪视为心腹大患，是一定要消灭的敌人。
唐高宗李治即位后，长孙无忌独揽大权，于是他利用高阳公主与玄奘的徒弟辩机私通，并阴谋造反的事，诬告了吴王李恪，说李恪也参与进了谋反。李恪也真是倒霉，人在家中坐，锅从天上来，忽然之间就成了谋反的逆臣。
而且，是长孙无忌一心想要他死，所以李恪是不是冤枉，是不是参与了谋反都不重要了，就被判处死刑。可怜李恪父系是李唐皇室，母系是杨隋皇室，自己英果过人，却依然含冤被杀。临刑前，李恪悲愤的大喊：社稷有灵，无忌且族灭！后来他的话果然应验了，李治和他的皇后武则天彻底毁灭了关陇集团，长孙无忌被逼自杀，家族成员都被流放到了岭南，当时的人都把这看成是长孙无忌诬陷李恪的报应。
