祸不单行，本就已经失宠，宫中有个王美人怀孕，赵飞燕告发说许皇后和她的姐姐许谒及诅咒怀孕的王美人，汉成帝一直没有子嗣，这个罪名就更加严重，结果许谒处斩，许皇后废黜废，囚禁于昭台宫。许氏家族被遣返老家昌邑。
许娥从此过上了冷宫生活，但她还对汉成帝抱有期望，一心想着二人曾有过的恩爱时光，恰好她的另一个姐姐许靡，与王太后的侄儿、宫廷卫尉、侍中淳于长私通。之后，将许靡娶来作妾。淳于长挥霍无度，便通过许靡向许皇后表示，只要有钱财，他有办法让许皇后复出当"左皇后"。许皇后竟信以为真，陆陆续续送去千余两银子，并表示只要能做个婕妤，便已足矣。但淳于长并没做任何努力，反而和许靡一起嘲笑许皇后异想天开。
后来，王莽为了打击淳于长，说出了许娥和淳于长互通私信的事情，诬告他们有奸情，汉成帝听说后大怒，赐死了淳于长，赐了许娥毒药。直到此时，许娥才彻底的对汉成帝死了心，绝望的吞下了毒药，结束了这不幸的一生。
