李凤娘的所作所为越来越过分，皇帝赵惇又一声不吭，这让身为太上皇的赵昚非常恼火。于是他真的动了废黜李凤娘的心思。他找来自己最信任的前首相史浩商议此事，史浩却回答说："李凤娘这个女人确实混账，可眼下新皇刚登基，太上皇就要废掉他的皇后，此举恐怕遭天下人耻笑。"赵惇想想觉得还是皇家脸面重要，只好再次忍下了此时。死要面子活受罪，哪怕是贵为太上皇和皇帝，也同样会遇到这样的尴尬。
赵家祖孙三代都好面子，可李凤娘不怕丢面子，于是她继续作威作福，但又不给人留下足以废黜她的理由，这下反而没人拿她有什么办法了。为了防止被太上皇针对，李凤娘挖空心思离间赵昚和赵惇的父子感情。赵惇本来就是个缺心眼，老婆的话跟他多说几次，他就什么都相信了，结果他竟然决定再也不去向父亲请安了。
在李凤娘的长期压迫下，本来智商就不够用的赵惇终于变得疯疯癫癫。皇帝身体有恙，李凤娘身为皇后便堂而皇之地涉足朝政事务。不过，李凤娘并非是干政治的材料，在处理了几件事情后，她就觉得治理国家索然无味，于是调整工作重心，将心思都放在给娘家人捞好处上了。对南宋朝廷来说，这反倒是不幸中的大幸。
绍熙五年（1194年）六月初九，太上皇赵昚驾崩，这对南宋来说是一件举国哀痛的事情，可是脑子有问题的赵惇却不愿出面为父亲治丧。此举很快就引起了朝野上下的极度不满，朝臣们都对这个"疯皇"感到忍无可忍。同年七月，赵汝愚、韩侂胄等人在太皇太后吴氏的支持下，拥立赵惇和李凤娘之子、嘉王赵扩登基。同时尊赵惇为太上皇、李凤娘为太上皇后。自此，李凤娘彻底失势。
