在汉昭帝即位后，刘胥一时竟生得觊觎帝位之心，私下使巫女诅咒昭帝，使得声名不佳。昭帝猝死后，权臣霍光为独掌朝纲，不可能考虑这位成年健壮的刘胥，转而拥立根基不深的刘询，是为宣帝。

待及宣帝即位，刘胥与楚王刘延寿私相授信，以待时变。不久再次发生诅咒宣帝之事，并被宣帝发觉，引得刘胥畏罪自杀，谥曰厉，其封国也只能被罢夺，惹得身死名灭耳，甚有所幸的是，其子后承袭爵位，宗族未得夷灭。

五子，昌邑哀王--刘髆

至于第五个儿子，是汉武帝和当时的宠妃李夫人所生的刘髆，也即后来的昌邑哀王。在汉武帝的儿子相继被杀或失宠后，刘髆也曾赢得武帝欢心。