这一切，直到公元1407年，由于徐皇后病死，朱棣开始广选秀女，于是大批美女被送到了京城。纪纲眼馋了，私自选出了其中最貌美的几位，藏着自己的府中，成了他的小妾，这等于是公开抢朱棣的女人了。
此事被一位宦官得知后，再也忍不住了，便偷偷告知朱棣，关于纪纲的所作所为。朱棣气疯了，下旨彻查，最终诛杀了纪纲。
从此朱棣便对锦衣卫，产生了"心理阴影"，于是着手设置"东厂"，目的就是"访谋逆妖言大奸恶等，与锦衣卫均权势"，东厂老大，也由自己信任的宦官担任。
锦衣卫不可避免的地位下降。直至后期，锦衣卫老大见了东厂老大，也要赶紧下跪磕头。由此这才有了后来的"厂卫"之说--厂在前，为尊。锦衣卫成了东厂的小弟一般。
