刘邦侥幸逃走了，他这时候才想起来家人都还在沛县，于是先跑过去接。
可是刘邦的家人听说汉军在彭城战败，全都四散逃走了，所以刘邦没见到家人，只好自己先往西方逃。
半路上，刘邦遇到了儿子刘盈和女儿鲁元公主，就把他们都带回了汉国。其他的家人，例如妻子吕雉和父亲刘太公，由于慌不择路，刚好遇到了楚军追杀汉军的部队，就被楚军给俘虏了。
这是高帝二年8月发生的事，从这个月开始，吕雉和刘太公就成了项羽用来威胁刘邦的人质，经常被项羽安置在军营中；一直到高帝四年8月左右，刘邦与项羽谈和，项羽派人才把吕雉和刘太公送回汉国。
