四月，张俊、韩世忠、岳飞三大将被调离军队，到临安枢密院供职。
五月，张俊在和岳飞巡视楚州韩世忠的军队时，暗中挑唆岳飞，欲一同分解此军，却遭飞严肃回绝。秦桧又欲陷害韩世忠，飞再次保全了韩。岳飞回朝后，即遭秦桧党羽万俟卨、罗汝楫的弹劾，诬蔑飞援淮西"逗留不进"、主张"弃守楚州"，要求免除岳飞枢密副使之职。八月九日，岳飞被罢枢密副使，充"万寿观使"的闲职，飞自请回到江州庐山旧居赋闲。
岳飞此时已无兵无权，但对他的迫害却仍在步步紧逼。在秦桧授意下，张俊利用岳家军内部矛盾，威逼利诱都统制王贵、副统制王俊先出面首告张宪"谋反"，继而牵连岳飞。
张俊私设公堂，向张宪严刑逼供，毫无结果之下，竟捏造张宪口供"为收岳飞处文字谋反"。岳飞在江州居留，为时甚短，就接到宋廷命令，召他回"行在"临安府。十月十三日，岳飞被投入大理寺（原址在今杭州小车桥附近）狱中，此前其长子岳云也已下狱。
