然而，李显仍然不能放开手脚，对外，他要面对仍然势力庞大的武氏家族；对内，曾经对他鼎力支持的妻子韦氏也强悍擅权，颇有要做第二个武则天之势。
而李显在经过了10几年的痛苦和压抑之后，也想给自己、给妻子、女儿一些补偿。所以，他放纵享乐，不理朝政，把自己失去的全部找回来。他溺爱韦后和女儿安乐公主，大权全部让渡给了这对母女。
李显这种优柔寡断、懦弱不堪的性格，让他近乎自暴自弃。而此时，韦后想要临朝称制，安乐公主想要被封为皇太女，李显成为了她们复制武则天故事的最大障碍。
710年7月3日，李显猝死。《资治通鉴》和《旧唐书》均认为，他被自己的妻女所毒杀。
