孙太后是老江湖了，自己儿子被抓，群臣要立长君，在国家危难的情况下她不得不同意。可她还是留了后手，她先立自己的长孙朱见深为皇太子，然后才立朱祁钰为皇帝。孙太后的意思很明显，这江山还是她儿子的，朱祁钰只是不是代为看管。等朱祁钰去世后，皇位还得回到他儿子这脉。朱祁钰起初并没有当皇帝的心思，可一登上帝位，肯定就不想下来。于是当哥哥正牌皇帝朱祁镇被瓦剌放回来后，他便将哥哥软禁在南宫，禁止大臣和哥哥见面。景泰三年（1452年），手中有权的明代宗废掉了侄子朱见深，立自己的儿子朱见济为皇太子。孙太后对此也无可奈何，而吴氏当然乐见其成。
时也命也，吴氏的孙子朱见济被立为皇太子后仅一年就夭折了，而朱见济又是明代宗唯一的儿子。这让明代宗深受打击，要命的是明代宗之后再也没有生育皇子。景泰八年初（1457年），明代宗病重，卧床不起。这年的正月十六日，将领石亨、太监曹吉祥等发动政变，领兵撞开了南宫的大门，拥立明英宗朱祁镇复位，史称"夺门之变"。二月，明英宗废明代宗朱祁钰为郕王，软禁在西苑。不久明代宗去世，年仅30岁。
随着儿子被废，吴氏在宫里的地位急转直下。她从皇太后又变成为"贤妃"，明英宗称她为"宣庙贤妃"。皇宫里又只有孙太后这一位皇太后了。
孙子夭折，儿子也去世了，孤独的吴氏又在皇宫里生活了四年。明英宗天顺五年（1462年），经历了大起大落晚景凄凉的吴氏在后宫默默的死去，明英宗给她上谥号"荣思"。崇祯十七年(1644年)，在吴氏去世将近两百年后，风雨飘摇的南明弘光政权承认了她皇太后的身份，给她上谥号"孝翼温惠淑慎慈仁匡天锡圣皇太后"，所以她又被称为"孝翼太后"。
