实际上，三大将明升暗降，他们虽然升官了，但却被剥夺兵权。与此同时，宋高宗又对三大将的军队进行一系列改编。首先，"罢淮东，西，湖北、京西宣抚使，诸军以御前为名"。其次，各部军队直接听命于三省、枢密院。同时，南宋朝廷还对各路军队进行分化、瓦解。
宋高宗在位时期，曾发生过两次较大规模的兵变，一次是"苗刘之变"，另一次是淮西兵变，都对南宋朝廷造成了非常严重的影响。为了除掉岳飞，宋高宗、秦桧等人进行了精心的谋划。在剥夺岳飞的兵权后，朝廷任命王贵为鄂州驻扎御前诸军都统制，负责统率"岳家军"。
与此同时，宋高宗、秦桧对岳家军进行分化、瓦解。首先，"岳家军"前军统副统制王俊进行诬告。王贵接受了王俊的状书，并递送到镇江枢密行府。秦桧以此为借口，先逮捕了岳飞的亲信张宪，以及岳云。至此，岳飞在军中的亲信被清除。直到此时，他们才对岳飞下手，派人将其逮送至京城。
也就是说，当岳飞被捕时，岳飞的亲信已经完全被控制起来。掌握岳家军的王贵，虽然是岳飞的左膀右臂，但他与岳飞的关系并不好，再加上张俊等人的胁迫，他为了自保，完全投向朝廷一方，根本不敢造次。在岳飞被害后，王贵也十分害怕，主动请求辞职，朝廷于是任命他为添差福建路马、步军副都总管、侍卫亲军步军副都指挥使。
朝廷又任命张俊的党羽田师中为鄂州驻扎御前诸军都统制。田师中到任后，继续分化瓦解岳家军，并将大将牛皋毒死。随着岳飞之死，岳家军就已经名存实亡了。再加上岳飞"尽忠报国"的思想，他宁肯自己被杀，也不可能让部下造反。
