所以，接到圣旨，曾国藩立马组织起来团练，和塔齐布一负责军事，当时正好太平军进攻长沙，被塔齐布击败，于是曾国藩依靠塔齐布，组建湘军的雏形，他把这一支5000人的湘勇分为塔、罗、王、李等十营，成为此后镇压太平天国的中坚力量。
1854年，经过曾国藩的训练，以及和太平军战斗中的磨练，湘军战斗力已经很强悍，于是曾国藩发布讨伐太平军的檄文，在文中，以传统文化卫道士自居的他数落太平军的罪行，在他眼中，太平军可能摧毁中华几千年的文化，不仅仅是清朝江山的问题，而是孔孟之道能否存续的问题。
举中国数千年礼义人伦诗书典则，一旦扫地荡尽。此岂独我大清之变，乃开辟以来名教之奇变，我孔子、孟子之所痛哭于九原
不止孔孟之道，当时的他认为天主教横行中原，而太平军自恃异端邪说，毁坏宫庙，冒犯神祗，即使李自成、张献忠这样的流寇也没这么坏。但是洪秀全等人却一律夷为平地。
自古生有功德，没则为神，王道治明，神道治幽，虽乱臣贼子穷凶极丑亦往往敬畏神祇。李自成至曲阜不犯圣庙，张献忠至梓潼亦祭文昌。粤匪焚郴州之学官，毁宣圣之木主，十哲两庑，狼藉满地。
