公元1127年(靖康二年)金兵掳徽、钦二帝北去后，被宋钦宗封为天下兵马大元帅的赵构在南京应天府即位，改元建炎，重建宋朝，史称南宋。赵构好不容易登上了帝位，却因为南逃路上受到金军惊吓丧失了生育能力，实在不甘心，延医用药，历经针灸治疗，却依然恢复不了生育能力。满朝文武看到赵构憋红了脸生不出儿子，都劝他，实在生不了，就领养一个吧。赵构万般无奈，只好接受了现实，同意领养一个。当然，领养的人选不能是随便哪个平头小百姓，得是皇胄贵亲、龙枝凤脉。宋徽宗赵佶这一脉除了赵构外，基本上都在靖康之难中被一网打尽了。只能从其他支系中找了。
网络配图
吴乞买文武兼济之外，长相也很奇特，有缘目睹过他真容的汉人曾在《靖康稗史》之六的《呻吟语》记载说：“吴乞买当金太祖朝尝使汴京，其貌绝类我太祖皇帝?象，众皆称异”，直言吴乞买的相貌酷似宋太祖赵匡胤的画像。