这次战败张浚也给高宗留下了不好的印象，不过宋朝有钱，就当买教训了。从那个时候开始，高宗也再也没有重用过他，也被定义为文人，和武将根本不沾边。到了建炎四年，张浚又自告奋勇经营川陕。高宗心想，这可是当时为了助自己即位的人，念在旧情的份上，便任命他为川陕宣抚使。这个职位可不小，相当于现在的一省之长。
当时的军事主帅吴阶也是一个比较激进的人，双方不谋而合。随后来回上书朝廷，上演了"富平之战。"这场战役在他们两个人眼里是万无一失的，皇帝为了确保战争的胜利，派出了步兵十八万，兵分五路与女真人决战。其实某种程度上来讲，这也算得上是"国运之赌"了。这场战争他们还向高宗借川陕地区五年民赋，结果以失败告终，赔了个底朝天。
这次战败也彻底让宋高宗对他失去了信心，公元1163年宋孝宗要北伐收回幽云十六州。其实以他们的军事状态可以看出来，根本不是对手。高宗在知晓后也赶紧跑过去劝他。不过眼看没有什么结果，宋高宗也对孝宗说了一句话："无论你怎么做都支持，唯独不能重用一个人。"孝宗点了点头，随后高宗再次叮嘱："宁可亡国，不用此人"，此人也正是张浚。
