关于香妃，有一个动人的传说。香妃原本是新疆一位反清酋长的妻子，长得十分漂亮，又因为她通体生香，很受人们喜爱。清军人疆后，酋长战死，定边将军兆惠把她带回京城献给乾隆。乾隆对香妃十分喜爱，为讨好她，特意建了一座宝月楼给她住。无奈香妃始终不为所动，在袖中藏了好几把匕首，让乾隆无法靠近。后来，皇太后怕香妃对乾隆不利，就趁乾隆不在的时候，把香妃赐死了。香妃死后，乾隆命令按照王妃的礼遇把她送往新疆安葬。
香妃传说原本只是一个动人的故事，但是1914年的一次文物展览，却给这个传说蒙上了一层扑朔迷离的面纱。当时，古物陈列所从沈阳故宫和承德避暑山庄调了一批文物在故宫西华门展览，其中有一幅少女戎装画像，画像下面有一段明确的标注:“香妃者，回部王妃也。美姿色，生而体有异香，不假熏沐，国人号之曰香妃。”自此，香妃之名广为流传，香妃故事也真假难辨。看来，香妃确有其人，那么她真的像传说的那样神奇，通体生香，嫁过人，被人从战场上掳来，最后被皇太后赐死吗?
乾隆后妃中有一位妃子，历史上称为“容妃”。
历史文献与考古发掘都有关于容妃的史实。《清史稿·后妃传》记载：“容妃，和卓氏，生于雍正十二年(1734)九月十五日。新疆噶木巴尔的后裔，其家族为和卓，故被称为和卓氏，也称霍卓氏。其父阿里和卓为回部台吉(贵族首领)，哥哥叫图尔都。香妃家族世代居住在新疆的叶尔羌。
乾隆二十四年(1759)秋，大小和卓的叛乱被平定。配合清军平叛有功的图尔都及其家属先后被召进北京，封官晋爵，宴请赏赐，为他们建造了专门的居住地。香妃也随哥哥图尔都来到北京。为了感谢皇恩，向朝廷尽忠，图尔都决定将美丽聪明的香妃送进皇宫，服侍皇上。
乾隆二十五年(1760)二月，27岁的香妃进宫，被册封为和贵人。
她大概就是传说中的香妃了。乾隆的容妃虽然十分漂亮，但她是否通体生香却没有记载。她的身世也并非传说中的那样出身贫寒，她是不折不扣的贵族后裔。为了叙述方便，我们仍然称她为香妃。
另一种说法：据档案记载，清宫选秀女，13岁的女孩就可以参选。就是普通女子一般十几岁也都出嫁了，有人据此猜想香妃嫁过人，甚至可能婚嫁期不短。由于一直找不到关于香妃出嫁或丧夫的任何记录。
也有人认为，香妃人宫前也可能未出嫁。事实上，大龄婚嫁在清朝也是有的，当年叶赫部首领布扬古之妹，风姿绰约，聪慧柔顺，是有名的美貌佳人，33岁才出嫁。也有人推测，香妃美貌出众，出身高贵，又遇上边疆战乱，所以花季年龄仍未出嫁。会不会是这样的原因呢?乾隆身为一国之君娶一位27岁女子，除了香妃的绝世美貌外，也许是为了保障边疆稳定，因此这也可能是一桩典型的政治婚姻。
清朝在乾隆以前，没有回族妃嫔的先例。香妃以回部女子至清朝，乾隆没有把她安置在后宫，而是特营建西苑宝月楼，作为金屋藏娇之所。有诗云：“轻舟遮莫岸边维，衣染荷香坐片时;叶屿花台云锦错，广寒乍拟是瑶池。”此以嫦娥比拟香妃。由于饮食习惯和生活风俗的不同，香妃在衣服、装饰上同皇宫的后妃、宫女都不同，在宝月楼则可免去其他妃嫔争宠之扰。
乾隆五十三年(1788年)四月十九日，香妃因病去世，年55岁，葬清东陵。至于“香妃”之名，不知何时而起。今新疆喀什有香妃遗棺，当地传说是从北京运回去的。