赵构原本有一子五女，五个女儿在靖康之难中被俘，独子赵旉三岁时因宫女碰倒炉子受惊吓夭折。建炎三年，金军突袭扬州，正在行乐的赵构受惊吓落下病根，丧失生育能力。此后虽遍寻名医、求神拜佛，却再无子嗣，最终只能传位给养子赵昚。