李永办宴会娱乐，老师多次劝谏他，都不听从。使得反对他的人找到了他的把柄。而此时王德妃不再得宠，得宠的是杨贤妃，她不满李永，多次在文宗面前诋毁李永，而且引出物证人证，使得文宗不得不信。说得多了，文宗对李永也不满起来，终于发怒了。

他把群臣招来说道：“太子有太多过错，不能把天下交给他，今天的议题就是废了他。”群臣一听废太子，这还了得，赶紧上奏道：“太子还年青，虽然有错，还可以改正。况且太子是天下的根本，不能够轻易废掉，请陛下宽恕他。”

御史中丞狄兼暮流泪流为太子争辩。见大臣如此拥护太子，文宗心中有所动摇，没有马上下诏废太子。后来群臣接连上奏劝解，文宗也改变了废太子的心思，只是诛杀了他身边的一些人。李永受了这场莫名其妙的打击，心中很憋屈，又没处诉苦，无法向父亲表明自己的冤枉，在这一年突然死亡。

儿子死了，文宗感到后悔了觉得自己冤枉死儿子了，只有追谥儿子为庄恪太子。第二年，文宗立了侄子李成美为太子。在宴会上，有一个小孩表演爬杆子的杂技，他的父亲在底下来回的转生把儿子掉下来。这种父子之情使得文宗想起了儿子，于是说道：“我拥有天下，却不能保全一个儿子。”马上将当初诋毁太子的坊工刘楚才等人杀掉，以慰儿子在天之灵。