武帝走后，司马道子对赵牙说："皇上要是知道这灵秀山是人工堆起来的，你的脑袋只怕就要搬家了。"赵牙毫不在意，胸有成竹地回答："只要有你丞相在，我赵牙就死不了。"司马道子崇信佛教，僧尼成为相府的座上客。有一个尼姑叫支妙音，备受他的青眯。司马道子专为她盖了一座简静寺。因支妙音手能通天，简静寺前面车水马龙，趋炎附势的人来往频繁，支妙音甚至还企图干预朝政。司马道子的儿子司马元显平定了王恭对朝廷的讨伐，及后政事皆由司马元显掌握，司马道子则终日蓬首昏，沉测于酒醉之中。
司马元显最终败于桓玄的征伐，权倾朝廷的司马元显连同他的六个儿子全被杀掉，其父司马道子被废为庶人，在流放地安成郡（今江西安福）饮鸩酒而亡，时年39岁。
