赵构来到南方以后，表示我太难了。因为他手里压根就没有兵权，也没有可以任用的文官。所有事情都需要他自己去处理，跟各路军阀之间的联系，也需要他亲自去跑腿。
可以说赵构手下的中兴四大名将，全是靠他比较出色的交际能力给跑回来的。当时南方一片战乱，赵构必须要先想办法把南方的内乱给平定了，回头才能收拾旧山河。
二月，会京畿宣抚司都统制姚平仲夜袭金人砦不克，金人见责，邦昌恐惧涕泣，帝不为动，斡离不异之，更请肃王。癸卯，肃王至军中，许割三镇地。进邦昌为太宰，留质军中，帝始得还。金兵退，复遣给事中王云使金，以租赋赎三镇地。又以蜡书结辽降将耶律余睹，为金人所得。八月，金帅粘罕复引兵深入，陷太原。斡离不破真定。---《宋史》
可是与此同时而来的，还有金人南下的危险，赵构几乎是多次被金人南下给赶得四处逃窜，这也导致了后来他出现了不孕不育的状况，实在是被吓坏了。
内外都有战乱，手底下的士兵们有些也不听话。赵构在做皇帝的时候，甚至被手下人赶下了台，差点就死于非命。
