他当然可以不搭理江忠源，但对咸丰却马虎不得。琢磨了一天，想到了如何搪塞咸丰。他对咸丰说："衡州周边匪徒有春风吹又生之势，我若离开，他们和太平军连成一气，后果不堪设想啊，所以我不能走。"
不多久，曾国藩又收到咸丰的圣旨。咸丰说："长毛贼在进攻安徽庐州，你即刻带上你的人入安徽，支援庐州。"曾国藩拿上次的回信复制一回，发了出去。1854年2月，咸丰的圣旨又来了："长毛贼进攻黄州，曾国藩你他娘的赶紧带人去增援。"
曾国藩三次不出兵，不是懦弱，更不是保存实力。他很明白一个道理，太平军骁勇善战，名将众多，没有一支劲旅绝不能去碰他们。而且和太平军一决雌雄的战场是在水上，他的水师还羽毛未丰，绝不能高飞。
他给咸丰回信说："衡州乃湖南省之重地，我若离开贼必来，容我剿灭衡州附近土匪后，再出山。"
曾国藩摇摇摆摆的"千呼万唤不出来"，咸丰终于发了雷霆之怒。他给曾国藩回信，语气充满了讥讽："你真是吹牛不打草稿，好像衡州离了你就会从世上消失一样。我也和你打过交道，我只是想问一句，你的才能行吗？平常牛气冲天，以为天下人都不如你。如果你的话能抵上你一半才能，我还真放心，倘若遇事后一败涂地，岂不是贻笑天下。好吧，我暂时相信你的话和你的才能是相匹配的，你出山给我看啊！"
