1925年，溥仪家族和亲信，在罗振玉和芳泽谦吉的阴谋下，离开了日本在北京的大使馆，搬到了天津日租界，在天津，溥仪住在张彪私人花园的一栋三层白色洋房里，他和婉容住在二楼，文绣住在楼下。
文绣面对溥仪的错误行为，多次对溥仪说日本不可信，郑孝胥的话听不得，应该悬崖勒马，溥仪不仅没有听进去，反而厌恶起文绣，冷眼看文绣，他天天与婉容在一起，逛街时也只带着婉容，就连吃饭也不和文绣一个桌子。
与此同时，文绣还因为婉容寻机生事，时不时受到无理的谩骂和羞辱，一些宫女和仆人也在溥仪面前失宠，偶尔也会受到歧视或虐待，文绣常常以泪洗面，在天津的静园皇室家族已经呆不下了，她开始尝试挺身离开。
1931年10月，文绣聘请律师向法院提起诉讼离婚，溥仪无奈之下与文绣签订了离婚协议，所以文绣成为历史上第一个与皇帝离婚的妃子。
