建炎四年（公元1130年）秋天，金将宗弼出兵江淮，张浚急于在陕西决战，以缓解江南的军事压力，曲端又一次反对他的贸然行动，张浚恼羞成怒，罢免曲端的兵权，并将他的部将一并羁押。陕西民众长期以来依靠曲端保护乡土，如今曲端无故被贬，军心开始动摇。
除曲端不愿意配合之外，张浚曾着力提拔的吴玠也不想轻举妄动，但刚愎自用的张浚根本听不进去，一心与金国决战。金将宗弼会合娄室，与宋军在富平（今陕西富平县）相遇，张浚树立曲端的将旗试图恐吓金军，早已知道内情的娄室不禁哈哈大笑，说："闻曲将军已得罪，必绐我也。"两军交锋，宋师大溃，四十万大军，数年积蓄化为乌有，陕西沦陷，张浚这时候才相信了曲端的远见卓识，为了收拢人心，又重新起用曲端。
曲端被弃用后，陕西在金国的进攻下沦陷
不幸的是，与曲端有宿怨的王庶和吴玠认为他被重新任用于己不利，开始罗织罪名企图置之于死地。绍兴元年（公元1131年）正月，张浚把曲端安置在阆州（今四川阆中），准备重用。然而，吴玠向张浚进谗言说："曲端再起，必不利于张公。"耳根子软的张浚本来就缺乏容人之量，听这么一说又对曲端产生了怀疑。
