当年十月，宋高宗以躲避金兵为由，带着身边的亲信逃到了扬州。在扬州，高宗自认为可以获得暂时的安稳，于是，开始了奢华享乐的生活。太监康履同高宗形影不离，引导着高宗玩各种东西，很得高宗的欢心。大将军王渊本是一个敢打敢拼的大将，一直跟在高宗的身边保护高宗。结果，高宗不仅不勉励王渊报效国家，反而经常教王渊敛财的办法。
在高宗的影响下，王渊从一个身先士卒的战将，迅速变成了搜刮民脂民膏的军阀。他在扬州一带作威作福，欺压百姓，闹的是民不聊生。大臣们上书指责王渊，想要铲除这个毒瘤。但是，王渊早就重金贿赂康履，使康履不停地在高宗面前说好话。高宗见到大臣们的上书后，只是口头告诫了王渊几句，并没有进行什么实质性的责罚。
王渊见状，牢牢地抱紧了康履这个大腿，继续过着无法无天的生活。金军得知高宗并没有锐意进取的心思，于是，不断在金、宋边境制造摩擦，想要获取更大的利益。建炎三年（1129年）二月，金军趁宋军不备，突然派出大批军队，占领了南宋不少的城池。高宗得知消息后，第一反应不是部署军队，而是收拾行囊，领着康履和王渊等人继续南逃。
高宗先是从扬州逃到镇江，逃到镇江后，他感觉不太保险，又跑到了杭州。高宗的未战先怯，更加助长了金兵嚣张的气焰。金军统帅不断地派出小股军队进行骚扰，想要趁乱活捉高宗。为了自己的安全着想，高宗一边加快逃跑的步伐，一边令王渊在后面殿后。但是，此时的王渊，已经不再是从前那个一心为国的大将军了。
