此前在372年，当时年仅11岁的晋孝武帝司马曜在权臣桓温的监视下登基上位，373年桓温死后，晋孝武帝又在嫂子崇德太后临朝听政的情况下大权旁落，就在真正成年掌权以前，晋孝武帝司马曜内心都是非常困惑痛苦的，以致有一次他在建康皇宫中喝酒时，当看到一颗流星掠过时，司马曜竟然举起酒杯向流星敬酒，自言自语说：
"流星啊流星，敬你一杯酒。古往今来的帝王都跟你一样，转瞬即逝。人人都喊我万岁，可万岁天子世上哪里有呢？"
当时，司马曜身边左右的人听后都潸然泪下。
所以，当淝水之战晋军大胜时，当时已经22岁的晋孝武帝司马曜，显然不甘心皇权再度旁落，而致使司马家族沦为世家大族的傀儡和附庸，在此情况下，司马曜启用自己同父同母的弟弟司马道子执政，并处处排挤谢安，为了避祸，并无野心的谢安决定以北伐的名义离开建康，并将政权全部交给司马道子。
于是，谢安被任命为都督扬州、江州等十五州军事，并出镇广陵，作出进军中原的态势。为了让晋孝武帝和司马家族放心，谢安还让人在南方的始宁建造了一座庄园，将家小全部搬到庄园里去居住，以表示自己将在平定北方后，举家搬迁过回隐居生活。
