此刻，秦桧正暗中谋划岳飞撤军事宜，他串通张俊、杨沂中向朝廷上疏，表示"兵微将少，民困国乏，岳某若深入，岂不危也。愿陛下降诏，且令班师。"赵构求和心切，立即下令岳飞停战，撤军。
而岳家军此时胜利在望，高宗却连下十二道金字牌班师诏令，要求岳飞立刻班师回朝。面对荒唐至极的命令，男儿有泪不轻弹的岳飞当即流下气愤惋惜的泪水，仰天长叹，"十年之力，废于一旦！"又曰，"所得诸郡，一旦都休！社稷江山，难以中兴！乾坤世界，无由再复！"其忠烈之言，气壮山河。
金兀术一看岳家军撤退，精神为之一振，他当即写信给秦桧，要求"必杀岳飞，而后和可成"。本来主动权掌握在南宋手里，现在反而变成了被动，扶不起的阿斗只能让英雄欲哭无泪。
岳飞回朝后，宋高宗任由秦桧党羽污蔑岳飞，罢其官职，没有兵权的岳飞请求回庐山旧居赋闲，哪知秦桧以赵构的名义加紧迫害岳飞，即便岳飞袒露当年岳母所刺"尽忠报国"四个大字亦不放过。
