赵构因此远离女色，这倒成全了他，成为宋朝最长寿的皇帝，在位三十五年，活了八十一岁。
宋高宗没有自己的亲生儿子，不得不考虑在宗室子弟中选择皇位继承人，在其母亲韦太后及部分大臣的劝说下，从宋太祖赵匡胤的后裔中选择皇储。
赵构子侄为"伯"字辈，大臣们就在"伯"字辈宗室里挑选了十个七岁以下的男孩，入朝后进一步精选，最终确定了两个人选--赵伯玖、赵伯琮，他们都进入皇宫，成为高宗皇帝的养子。
《宋史》记载：赵伯玖，字润夫，宋太祖赵匡胤七世孙，秉义郎赵子彦之子，自幼聪慧，因生来肥壮，有所谓的帝王之相，入宫后颇为宋高宗喜爱，赐名为"璩"。
