听说有客人送来万钱，吕公连忙迎了出来，但实际上，刘邦却身无分文，幸好吕公擅长看相，认为刘邦面相非凡，才没将其殴打一顿赶出去。靠着大言不惭宣称自己带来万钱的流氓行为，刘邦得到了吕公的亲切接见，还得以迎娶了其女吕雉。今天我们常说，一个人结婚后便会收心，更加专注于事业了，而这对于刘邦来说并不适用。
结婚后，吕雉要照顾刘邦的长辈，也要养育刘肥等儿女，过着操劳而辛苦的生活。不久之后，刘邦带着一批徒役去骊山修宫殿，但行至半途，就有很多人不愿服役而逃跑了。刘邦想到最终就算到达，估计也没剩多少人了，还会招致处罚。便将剩下的徒役都释放遣散，自己则带着其中一些人躲到了深山里。丈夫躲进了山里，吕雉在平日的家务之外，又多了给他送衣送食的任务，对此，刘邦却并没有当一回事。
秦末农民起义爆发，刘邦破罐子破摔，加入了起义军，而吕雉和刘邦父亲、儿女都被他留在了家乡。等到吕雉再与刘邦相见时，刘邦已经贵为汉王，身边也多了以戚夫人为首的许多年轻貌美的妃子，以至于刘邦外出时总带着宠妃，而留下年老色衰的吕后在朝中处理政务。
此外，据《史记》记载，对于刘邦，人们还有着"诸客冠儒冠来者，沛公辄解其冠，溲溺其中。与人言，常大骂"、"慢而侮人，骂詈诸侯髃臣如骂奴耳，非有上下礼节也"等评价。可见，在人品、性格、行为等方面都有着很大缺陷的刘邦，被称为"流氓"实在是恰当而贴切的。
