刘太公、吕雉和儿女在刘邦部下审食其的护送下，正在赶小路，不幸遇见项羽的军队，刘太公、吕雉被生擒，儿子和女儿失踪了。刘太公和吕雉被押上囚车，押往彭城，被项羽作为人质扣押了两年半。吕雉受尽了折磨。
吕雉的哥哥吕泽率兵驻在下邑，刘邦率几十骑奔向下邑。半路上，遇到刘邦的儿子和女儿，把他们载在车上赶路。项羽的骑兵很快追了上来，驾车的马非常疲惫，眼看楚军就要追上了，刘邦把一对儿女都踹下车。
大将夏侯婴说：“大王，您怎能抛弃亲生骨肉呢？”夏侯婴跳下车去，把两个孩子抱上来。刘邦多次把两个孩子夺过来，扔下车。夏侯婴又把孩子们抱上来。
之后，刘邦在荥阳，很快稳住了阵脚，先驻守自固，于荥阳、成皋(今河南荥阳西北)一线与楚军相持。楚汉争战激烈险恶之际，吕雉的处境也异常艰辛。
有一次，项羽为了激怒刘邦，寻求战机，把吕雉与刘太公五花大绑押至城下，先把刘太公押在高高的肉案上，对城上的刘邦喊道：“你不赶快退兵，速速降我，我就把你父亲烹煮了吃肉。”
刘邦却说：“霸王，当年咱俩曾在义帝面前约为兄弟，我父亲也就是你的父亲。你一定要煮了他老人家，别忘了分给我一杯羹。”刘太公虽然没有真的被烹，但吕雉看在眼里，心里当然清楚作为阶下囚的境遇。