成化二十三年(公元1487年)九月，明宪宗朱见深病逝，17岁的明孝宗朱佑樘继位。一天，明孝宗无意中在宫中找到一个小箱子，打开一看，原来是介绍房中术的奏疏，书上还署名"臣安进"。原来，这个万安把倪进贤讲述的内容记了下来，随身携带，还落在宫中。当时明孝宗刚继位不久，对万安并不了解，就直接把奏疏送到内阁，问："这是大臣所做的吗？"大庭广众之下，万安真是丢尽颜面，明宪宗把万安给罢免了。
明宪宗朱见深与万贵妃2
正因为此事，万安成了整个大明王朝风评最差的内阁首辅。可是即便如此，万安在内阁首辅这个位子上也坐了整整十年，难道明宪宗朱见深不知道他自己提拔的内阁首辅是这么一个
德性
