公元1129年，苗傅和刘正彦发动兵变，强迫赵构退位。
这时候的岳飞还籍籍无名，跟随杜充在淮河一带抗击金兵。天有不测风云，万万没想到，杜充突然投降金国，岳飞无处可去，只好撤往南方。一年后，岳飞趁金军主力在黄天荡与韩世忠激战，率部收复了建康（南京）。
岳飞一战成名，进入了赵构的视野，赵构对岳飞欣赏有加，连连对他点赞。岳家军很快成为了继韩世忠韩家军、刘光世的刘家军、张俊的张家军之后，第四支南宋重要的军事力量。
这些家军之间在共同抵抗金军的同时，又划清界限相互猜忌如同盗贼一样提防对方。
四大家军对朝廷的命令能拖就拖，能应付就应付，这让宰相张浚和赵构都十分不爽。张浚曾策划用四大家军联合围剿位于淮河一带伪齐。四个人起了争执，刘光世主张防守，韩世忠主张进攻，张俊模棱两可，岳飞也罕见地表示不能进攻。
张浚见岳飞和他意见不一致也非常恼火，因此怀疑岳飞也有拥兵自重的念头。
手下不听话，赵构开始考虑罢免四大家军的军权，把兵权收回自己手中。赵构和张浚首先罢免了刘光世的兵权。但刘光世的五万多士兵交给谁来管理？
说来也巧，道君皇帝宋徽宗在金国枯井底“得道升天”了。赵构得知父亲客死异乡哭得捶胸顿足，他召见了岳飞，岳飞也希望能有更大的权力和兵力和金国开战。头脑发热的赵构给岳飞许下承诺，除了韩世忠的韩家军和张俊的张家军，其他部队全部归岳飞调遣。
