但是这一想法遭到了李治的舅舅，在朝中手握大权的长孙皇后的哥哥长孙无忌的强烈反对，他担心李治被废的话，长孙家族的权力会遭到削弱，因此极力向李世民劝说立李治为太子的好处和优势。李世民最终拗不过他，只得放弃了这个想法。

在李世民去世之后，李治登基为帝，就是后来的唐高宗。此时失去了李世民佑护的李恪被与他素有嫌隙的长孙无忌诬陷为参与了房遗爱谋反一案而被处死，死于公元654年，享年三十五岁。