杜聿明与曹秀清育有三子三女，他们的名字饱含传统文化寓意。1949 年是他们人生的转折点，杜聿明被俘，曹秀清带家人迁台，此后二十多年饱受台当局冷眼。
长女致礼在美勤工俭学，三子致仁因学费倒下，五子致严辍学。次女致义成为医疗工作者，六女致廉情况不详。四子致勇与致严是双胞胎，他晚年活跃在业余无线电圈，在两岸小有名气。
1981 年杜聿明病逝，彼时两岸未开放探亲，台当局驳回子女回大陆奔丧申请，子女无缘送终。曾经的悲欢离合、命运多舛，令人唏嘘，好在如今两岸往来畅通，这样的遗憾不会再重演。