而冯玉祥考虑到她们毕竟是同治帝的遗孀，是女人，虽然是皇室人员，但于政治，于他的大事没有什么大的妨碍，因此冯玉祥并没有直接将她们赶出紫禁城，而是给她们时间，责令她们尽快离开紫禁城。
两人知道她们与紫禁城的缘分到头了，因此在紫禁城中收拾了几日，将属于她们的东西都带走，那些东西足以让她们余生衣食无忧了。离开紫禁城后，她们并没有跟着溥仪，毕竟大清已经亡了，溥仪对她们实际上也没有什么责任了，所以两人相约去原来的荣寿固伦公主府居住。
说起来，荣惠皇贵妃和敬懿皇贵妃生于同一年，都是1856年，又是同一年成为同治帝的妃子，更是同一年失去了丈夫，两人之间算是打交道了半个世纪，早就成了好朋友，离宫的时候自然会结伴而行，至少也能在晚年有个伴，所以她们才一起离开紫禁城，去了荣寿固伦公主府。
荣寿公主比她们大两岁，在皇室很受欢迎，话语权也很大，当年连慈禧太后都怕她三分，不过她年纪轻轻就守了寡，1924年，71岁的荣寿公主去世，因此荣惠皇贵妃和敬懿皇贵妃住进她的公主府中之后，实际上依旧是两人相依为命。
