只是这属于太监的荣光并不长，只是一年多的时间，皇室成员们就被军阀赶出了紫禁城。1924年，孙耀庭从皇后婉容身边离开，回到了老家，但是已经失去了农活的能力。没有地，又只能靠兄弟接济，孙耀庭最终选择去了兴隆寺。
兴隆寺是民国收留清末那些太监们的地方，这里还住着几十个孙耀庭的"同事"。一开始大家靠着出租土地房屋生活，日子倒还过得去，但是出租屋被破坏了后，几十个太监就只能去拾荒了。
直到1949年，新中国成立，孙耀庭这些剩下的太监们才有了新工作和工资。孙耀庭无疑是高兴不已的，他当出纳的时候收入最高，每个月可以领到35元。那几年是他人生中最富足也是最开心的时候。
