尽管岳飞和韩世忠先后率军击败了金和伪齐两次对南宋的侵略，但是宋高宗并不想主动北伐得罪金人，宋高宗的消极抵抗，极大的纵容了金人对南宋的挑衅之心，他们更是加大力度对南宋开始侵略，好在抗金斗争接连取胜，没有给金人掠夺南宋领土的机会。消息传来，朝野上下非常高兴，但是在宋高宗眼里就是个大麻烦，他屡次派出使臣和金和谈，金人得寸进尺要求南宋称臣，还要向金进贡。
这样屈辱的议和条件对于宋高宗来说却是个天大的好消息，他加紧和金和谈的步伐以免夜长梦多。朝野上下强烈反对宋高宗的决定，尤其是武将们反对的最厉害，士兵们在前线浴血奋战保家卫国，皇帝却在背后掣肘，武将们容忍不了宋高宗的无耻行径。岳飞在大殿上义正辞严的向众臣说明金人根本不可信，议和完全没有必要，强烈要求宋高宗收回成命，这引起了宋高宗的反感，加上之前他还的罪过宋高宗，更令皇帝对他不喜。
一件事是朝廷之前收回了刘光世的兵权，本来打算是把这部分兵权分给岳飞指挥的，自己的兵力大增岳飞自然很高兴，在还没有正式得到兵权时他就提出说要带兵10万，北上抗金。宋高宗很不高兴，临时变卦拒绝把兵权交给岳飞。皇帝的出尔反尔惹怒了岳飞，一气之下他丢下岳家军上庐山为母守孝，这个行为在宋高宗看来就是仗着自己劳苦功高要挟皇帝，但是当时正是用人之际，宋高宗对岳飞不得不好言相劝他才返回岳家军驻地。
