人才是得罪不得的，何况是一代名相的吕夷简，郭皇后大意了。
这吕夷简也是北宋的一代名相，位列"昭勋阁二十四功臣"之一，他的主要功绩是辅助仁宗安定大宋天下，岂是一般几句话就能真给压制住的。过了没多久，当仁宗听说自己的亲生母亲李宸妃去世后，是吕夷简在老皇帝面前进谏，才使得他母亲依皇后规格安葬时，由是感激，当即就恢复了他的职务。因此，当郭皇后"掌掴"仁宗的事情到了朝堂上后，一切事情就都明了了。
在吕夷简的操控下，很多官员要求查看仁宗被掴伤的脖子，谏官范讽则趁机向仁宗进言："后立已有九年，尚无子，义当废。"吕夷简一帮随从和其本人随后也应声附和，大力支持仁宗皇帝废掉郭皇后。虽然后来还有范仲淹等人对此持有异议，但对郭皇后无爱的仁宗在吕夷简及其亲信的怂恿下，最终决定废除郭氏的皇后之位。明道二年（公元1033年）十一月，仁宗颁布诏书，以郭皇后无子之尤，贬入道观，封其为净妃、玉京冲妙仙师，赐名清悟，正式废除皇后尊位。
废除了郭皇后的仁宗曾经有段时间念旧情，毕竟是"仁"宗嘛，想把郭女道士接回皇宫，可生性强横的郭女道士死活不肯，非要仁宗恢复她的皇后之位才肯回来。仁宗的这一举动最终害死了郭皇后。
