根据明史记载，明宣宗的皇后胡氏即胡善祥，于宣德三年被废黜。这位善良、仁德的皇后在位期间，从不曾做过出格之事。当时，宫中众人对她的评价都极高，所以胡善祥被废绝非自身原因，完全是因为另一个女人及仁宗皇帝一再默许。
明宣宗坚持废掉皇后完全出于个人喜好，这里就要牵扯到另一个人了——孙贵妃。胡善祥是明宣宗的发妻，两人是年少夫妻，在明宣宗还是皇太孙的时候，胡善祥就已嫁他为妻。从理论上来说，古代的皇帝很少会废掉自己的发妻，因为这样的举动很可能会惹人非议。但世俗的眼光显然不能改变明宣宗的决议，甚至可以说，当年为孙贵妃创皇贵妃这一品阶，也只是为了让她不在人前低于皇后。
相比于胡善祥来说，孙氏与明宣宗朱瞻基的相识时间更长一些。两个人之间的缘分源于朱瞻基的外婆彭城伯夫人。作为皇长孙，年少时期的朱瞻基，很受朱棣和皇后的喜爱，而两人之间的缘分就在这个时期。时值少年的朱瞻基，一次陪同自己的外婆回到河南探亲，偶遇了当时还是主簿之女的孙氏。
当时的孙氏还是一个只有几岁大的小女孩，但是聪明伶俐的小女孩儿却得到了皇长孙外婆的青睐。因为彭城伯夫人很喜欢这个小姑娘，所以孙氏得到了入宫陪伴他的机会。从此之后，这个小姑娘与朱瞻基就没有分开过，两人算是青梅竹马的恋人。因此，两个人之间的感情很难被另外一个人介入和超越。只可惜，身份上的不足和其他种种外在原因，使得孙氏没有办法成为皇长孙妃。
在1417年，皇帝朱棣为自己的皇孙朱瞻基下诏遴选皇太妃。就这样，在钦天监的观测以及生辰八字的参考之下，当时锦衣卫百户胡荣的女儿胡善祥进入了朱棣的视线。不过，青梅竹马的感情毕竟非比寻常，即使胡氏在之后的岁月里成为了太子妃，甚至登上了皇后之位，且名声极好。
在整个皇家人的眼里，尤其是在朱瞻基看来，这个皇后并不符合自己的心意，孙氏的地位也是因为她才显得如此卑微。此外，为了弥补青梅竹马的损失，孙氏的待遇被一再地提高。而在这一点上，就连仁宗皇帝也保持了默许的态度。而胡善祥这样的遭遇，让人忍不住地同情、怜惜。
时间来到了1425年，朱瞻基接替了自己父亲的皇位，成为皇帝的他，仿佛是真的无法忍受自己这位皇后了。胡善祥的皇后之位，只坐了三年，就被他一纸诏书废黜了。当然，皇后作为国母，即使是不讨皇帝喜欢，也不可能随便被废，皇帝一定拿出令人无可反驳的正当理由才可以让人信服。
在其颁布的诏书上，最重要的一条理由应该就是“无子嗣”。确实，作为一国之母，胡善祥无后的事情是众所周知而无可指摘的存在。但是这条最严重的罪证，也并不那么不可饶恕。毕竟，纵观历朝历代，没有子嗣却登上太后之位的皇后并不在少数。
因此，明宣宗废后的这条理由好像并不是特别有说服力，不过，凡事就怕有对比。多年无子的胡善祥被废之前，刚好赶上了孙贵妃诞下皇子的喜讯。而这个子嗣，对于年近30的明宣宗来说是一个天降之喜，因为这意味着整个大明王朝可以后继有人。
对于明宣宗来说，拥有儿子的喜悦很快就变成了对儿子身份的忧虑，出于对爱人和孩子的爱护，明宣宗此刻有了废后的念头。于是，在明宣宗的策划中，这个皇子诞生不久，朝中的大臣就开始纷纷上奏，表示应该赶快册立其为太子，他们还纷纷上表，说这是稳固明朝江山社稷的良策。
之后，为了能够让废后这件事情更容易一些，当时的内阁大学士杨士奇，受到了皇帝的暗示，前去求见胡皇后，并向她说明了皇帝的意思。善良懦弱的胡善祥听得此话，把所有的错误放在了自己的身上，她认为没有为皇帝生育皇子，是自己最大的失职之处，深感愧疚的她主动揽下责任，递交了退位让贤的“辞职书”。
在宣德三年的3月份，明宣宗朱瞻基下诏，册封孙皇贵妃为新皇后，而原来的废后胡善祥则是移居别宫。虽然一切待遇从旧，但是身份地位的变化，还是让她的住所迅速成为了一座无人问津的冷宫。在废黜胡皇后的这件事情上，明宣宗的强硬态度，绝不仅仅只是因为这位皇后无子。最重要的原因，应该是年少时期的皇帝，已经厌烦了自己的身边一直有一个会批判、劝导自己的人。
作为一位皇后，除了“无所出”之外，胡善祥无疑非常优秀。她能够站在大局观上，去劝导皇帝多学习处理国家政务，而不是和孙皇贵妃一样与他一起吃喝玩乐、说说笑笑。也许身为皇位准继承人的朱瞻基，会说服自己忍耐这个一直用教导口吻说服自己的妻子。但是，在他登上皇位的那一刻，他的忍耐就已经走到了尽头。他更青睐于自己的青梅竹马孙氏登上皇后之位，而不是这个木讷、无趣的妻子。
从明宣宗登上皇位之后，把金印授给孙氏这一行为就可以看出，在他眼里这个青梅竹马的女人不是皇后胜似皇后。而时至今日，即使是明宣宗的生母张太后，也无阻止自己儿子的行为了。
而在胡善祥被废之后，唯一与她时常来往，并对她呵护有加的应该就只有张太后了。毕竟在这位婆婆的眼中，自己这个儿媳妇堪称模范国母。
胡善祥死后是以嫔制葬入皇陵的，尽管老年之时的明宣宗，曾隐晦地表达过自己对于此事的悔意。但出于种种原因，他依旧没有为自己这位发妻正名。后来，直到明英宗去世的前一年，才为这位嫡母正名，让她得以以皇后的身份重新葬入皇陵。由这位继子的行为就可看出这位废后的人格魅力。也正因此，她的被废才得到了那么多人的同情。
