刘贺早前当散皇帝当惯了，到了长安之后，还是以前那套作风，带着他那200位旧臣天天饮酒作乐，荒淫无度。相传，在他登基的这27天里，竟然干了1127件坏事，他的所作所为引起了霍光和众大臣的强烈不满，于是众人上书给太后，要求废黜刘贺。
就这样，刘贺成了汉废帝，被贬回了昌邑老家。而他带过去的200名旧臣因没有尽辅佐教导君臣之谊，使昌邑王误入歧途而获罪，被霍光杀了个精光。没了臣子，刘贺所在的昌邑国也被降级成山阳郡，他也成昌邑王变成了普普通通的郡主，史称海昏侯。
不过，在后来司马光编著的《资治通鉴》里，却为刘贺平了反。他认为，刘贺再怎么昏庸无能，也不可能在27天内做1127件有违封建礼仪的坏事，给任何一个正常人也都做不到。而廷上之所以这么传，无非是霍光的政治阴谋。
他想通过立废刘贺来营造一种自己为君担忧，忧国忧民的形象。而之后他扶植上位的刘洵则对他言听计从，相当于进一步巩固了自己在朝中的统治地位。而当了几年散皇帝，啥都不懂的刘贺，就这样成为了霍光的政治道具。
只是，刘贺的悲剧并没有结束。数年后，扬州刺史给朝廷告状，说刘贺不满自己的现状，和孙万世来往密切，似乎有造反之意。于是，刘洵再次削了他食邑三千户。本就当了个短命皇帝，还被冤枉做了1000多件坏事，最后刘洵还要砍了他的封地。气的刘贺牙直痒痒，不久，刘贺就愤懑而亡，只活了33岁。
所以，按正史记载的推测，刘贺很有可能是含冤被废。可怜他不谙权斗，最终成为了政治的牺牲品。
