好景不长，北京政变爆发后，溥仪与文绣之间便有了裂痕，军阀冯玉祥将溥仪等皇室成员赶出紫禁城，溥仪十分的气愤，在大臣郑孝胥等人的建议下，他准备寻求日本人的庇护，文绣见此，当即劝说，日本人有狼子野心，不应与他们合作，溥仪当时急于想要对曾赶走自己的军阀报仇，他不顾其他，还是住进了天津的日本公馆，文绣因与溥仪不同的看法，受到了溥仪的冷落。
当时溥仪整日里与婉容醉生梦死，对文绣则是不闻不问，后来文绣屡屡向溥仪进言，要他远离日本人，溥仪对此不仅不欣慰，反而是愈来愈感到生气，每每都会对文绣唾骂，1931年，文绣在表姐的帮助下，逃离了住处，将溥仪告上了法庭，两人协议离婚，之后，他们在报纸声明，两人结束婚姻关系，文绣由此也成为了历史上第一个和皇帝离婚的妃子。
离开溥仪后，文绣的日子不好过，为了谋生，她曾当过小学老师，甚至是糊纸盒，在瓦工队卖苦力为生，最困难时，她还在小巷处卖香烟，1945年抗战胜利后，文绣的生活才算有了改观，她成为了华北日报的一位报纸校对员，当时作为社长的张明炜因文绣的认真，对她十分的器重，没多久，他还主动给文绣介绍了一个对象。
