秦桧每月只给少量的米粮，生活必需品全靠自己获取，一家人生活的异常艰苦。这只是当时秦桧代表的宋高宗对待岳飞一事的一小部分，后面还有着更加凶险的博弈。岳飞之死底层的百姓对其抱着同情心，如一狱卒冒死为岳飞收尸，葬于杭州城外的九曲丛祠旁。
士大夫们对待此事的态度落井下石的有，举报检举的有，无中生有的污蔑的有，绝大部分都划清着与岳飞的界限，生怕殃及池鱼。还有的人踩着死后的岳飞不上，谋求荣华富贵加官升职。
例如岳飞原引为心腹幕僚的姚岳，岳飞遭到诬陷还未定罪时，姚岳迅速划清两人界限。姚岳上奏说明自己与原主岳飞的关系，拼命往他身上泼脏水，洗清自己原同党的嫌疑。末尾提议将含"岳"字的岳州改为纯州，含"岳"字的岳阳军改为华容军。要不是宋代重孝悌伦理，姚岳自己名字中的岳都会改了。
