赵旉死的时候，年仅二十三岁的宋高宗年轻气盛，加上后宫嫔妃无数，刚开始没把皇嗣问题当成大事。可是过了两年，始终不见哪个嫔妃传出喜讯，这就不能不引起朝臣的猜测。而宋高宗也似乎感到了问题的严重性，每天愁眉不展，密诏太医诊治，三餐补药不断，但是，想重振往日雄风的愿望依旧渺茫。

宋高宗不能生育之事也让群臣们感到不安起来，为了保证大宋江山后继有人，于是就有人上书皇帝，提议从宗室后裔中挑选品行贤良的人暂时摄皇太子位，以待宋高宗的子嗣出生。如果宋高宗将来生出皇子，到时候再废除皇太子之位，行封蕃处理，这样既可以告慰太祖的在天之灵，又可以堵住众人之口。

就在这个时候，隆祐太后做了一个怪梦，惊了她一身的冷汗。隆祐太后思前想后，仍觉得事态严重，还是告诉宋高宗为好。隆祐太后说：“我昨天晚上做了一个梦，梦见太祖了。太祖以神武定天下，子孙不得享之。他的后裔更是凋零离散，实属不易。当今皇帝无嗣，应当把皇位归还。”宋高宗听到，沉默不语，虽然不悦，可是自己不能生育的事实又摆在面前。经过反复考虑之后，宋高宗也认为形势所趋，如今之计只能依群臣的建议，从宗室子弟中选出一个人暂时作为储君培养。

于是，宋高宗就找来朝臣商议此事，朝臣看到宋高宗亲提此事，也就不再避讳，纷纷上书皇帝，或称赞太祖高风亮节，胜过尧舜百倍，或请宋高宗尽快挑选宗室贤良之人作为皇储培养。

于是，在绍兴二年（1132年），赵匡胤的第七世孙，赵德芳的六世孙赵昚被宋高宗选中，将其收养于宫中。30年后，赵昚在宋高宗退位后，登上了皇帝的宝座，是为宋孝宗，宋朝的皇位再次回到了宋太祖一系。