明世宗为了减轻国家负担，开始取消外戚的封爵。所以周瑛死后，庆云侯这个爵位也被取消了。
周瑛的儿子名叫周世臣，不能继承庆云侯，只得到一个锦衣卫的指挥，而且是只拿薪水，没有实职。如此一来，周家也就渐渐败落下去，住到北京东城的一条小巷子里。
周世臣的妻子死后，他无力再娶，就和家里的女仆荷花同居，另外，家里还有一个名叫王奎的仆人。
《万历野获编》记载，隆庆六年的九月，北京城里正在给刚刚死去的明穆宗举行葬礼，到处戒备。但就是在这种非常时期，有一伙强盗大胆作案，趁着夜色闯进周世臣的家里抢劫。周世臣挺勇敢，抄起家伙与他们搏斗，到底抵挡不住，最后被杀。
