但是在这时，朝堂上出现了一个权臣桓温，桓温曾经说过一句话：大丈夫不能流芳百世，亦当遗臭万年。这句话足以证明了他的野心。桓温想要篡夺皇位，而此时的皇帝司马奕虽然无作为，但是并没做过什么错事，那么该如何会废掉他呢？
桓温在民间偷偷发布了司马奕不能生育，并且好男色的流言，为了繁衍皇家子嗣，桓温请求褚太后废掉司马奕。就这样，司马奕被废，重大臣经过商议，决定改立东晋开国皇帝的小儿子司马昱为帝，史称晋简文帝。
《晋书·卷三十二·列传第二》也有记载：及哀帝、海西公之世，太后复临朝称制。桓温之废海西公也，太后方在佛屋烧香，内侍启云："外有急奏"，太后乃出。尚倚户前视奏数行，乃曰"我本自疑此"，至半便止，索笔答奏云："未亡人罹此百忧，感念存没，心焉如割。"温始呈诏草，虑太后意异，悚动流汗，见于颜色。及诏出，温大喜。
司马昱当皇帝的时候已经五十多岁了，褚蒜子不必再垂帘听政，于是她又在后宫中过起了清静的生活。
可惜的是，没到一年，司马昱因病去世了。而新帝司马曜即位的时候才十一岁，我们在上文中说到的权臣桓温也已经去世。不得已，褚蒜子再次垂帘听政。等到司马曜成年的时候，褚蒜子还政于他，复称崇德太后。
384年，褚太后在显阳殿去世，终年六十一岁。三次垂帘听政，经历六位皇帝，这短短十二个字便概括了褚蒜子的一生。令人敬佩的是，褚蒜子没有任何的野心，她虽没有成为像武则天那样的一代女皇，但是也不愧为一代贤后。
