秦桧认为王贵肯定心怀怨恨，可是事实是王贵一开始严词拒绝了秦桧等人要他站出来指证岳飞谋反。但是后来不得已答应秦桧等人，王贵答应帮忙转发王俊诬告状，已是帮凶，宋高宗却仍不放心，授意在岳案判决书中说他烧毁岳飞写给他的谋反信。什么意思的呢？就是陷害岳飞的一整套程序是从王贵手里开始的。
王贵做完这个事也是夜夜睡不着觉，每晚被吓起来一身汗，眼看岳家军的将领一个个被清理，发配的发配，处斩的处斩，他知道再恋栈死无葬身之地，赶紧称病辞职，宋高宗顺水推舟，立委虚衔侍卫步军副都指挥使，添差闲职福建路马步军副都总管，领双份高薪赋闲，死后更追赐节度使，备极哀荣。王贵因此善终，但也因此成为岳家军五虎上将中最不受人欢迎的一位。
其他四位，张宪和岳云一同被处斩，徐庆失踪，牛皋被毒死，董先被贬谪。
