然而，这并没有阻止后人对这一工程的"想象"，一句"覆压三百余里，隔离天日。"再结合司马迁的那"火三月不灭"，大家很是自然的以为，当年那把大火烧的就是阿房宫。但《汉书》里却是直接道明"复起阿房，未成而亡。"因此，没人真正知道阿房宫的真实模样。
甚至于，连阿房宫的前殿，据后来考古专家指出，这遗址中也就只修了三堵墙（东、西、北），南边的墙都没来得及修。可能当时的修筑很仓促，再者时事动荡，自然无法完工了。按照南宋程大昌《雍录》所言："乃其立模，期使及此。"也就是说，当时只是建了一个模。
试想一下，如果这项工程修筑完成，后来的胡亥和子婴，没有理由不住进阿房宫。而史籍上却从没提过他们在阿房宫有任何活动的足迹，只提及咸阳宫或者忘夷宫。一座没修完的宫城，居然能被后人如此记忆，自然要感谢杜牧了。
他的《阿房宫赋》，仔细读来似是赞美这伟大工程的瑰丽。不过，再结合历史，这应是古人常用的"以古说今"方式。当年，秦始皇统一六国，从大局观上来看，是好事。但是，秦始皇却并不爱惜天下苍生百姓，否则，国家哪能这么短寿？
