这事传到唐高宗李治的耳边后，他也十分的无奈，事情是荒唐了一些，但还没有到不可原谅的地步，于是将他贬到更远的四川阆中当刺史，任由他自生自灭。然而，李元婴到四川阆中也并没有收敛，反而以"衙役卑陋"为名，开始修起大量的高宇楼阁来。
种种荒唐的行径根本就不像是一个成年人，更不像是一个王爷的做派，于是有人就认为李元婴是"傻子"，净会做一些荒唐之事。
据传，武则天在登基前后杀了大量的李唐宗室，却因为李元婴做事太过于傻了，最后懒得杀他，留他一命。不过，真"傻"还是假"傻"只有他自己清楚了，或许这是明哲保身的一种方式呢？
