但是都说人是会随着自己当下所处的境遇而发生相应的改变的，匡衡亦是如此，在他深受汉元帝的青睐以后，更是肆意妄为，贪婪腐败之事更是经常发生，就连老百姓的财产也不放过，在皇帝赏赐他31万亩的土地时，他私自改成了35万亩，不仅如此，匡衡也是受到宫中众大臣及百姓的憎恨厌恶。但善恶终有时，天道好轮回，不是不报，时候为到，匡衡也终于等到了为其作为遭到惩罚的一天了。
在汉元帝驾崩后，其儿子上位，发现匡衡的真面目，于是革去了他的官职，并把他所有财产都没收了，从此匡衡便是一代庶人了，而此时的他已经人老年迈，只能独自一人回到当初他凿壁偷光的小寒屋了，到头来，没落的一样东西，孤苦伶仃地过完了下半生。
