后来刘邦还曾经路过邯郸，张敖小心翼翼地服侍刘邦，而刘邦并不领情。他一直把这个女婿呼来唤去，动不动就骂上几句。张敖作为女婿，当然不敢有任何的不满。但是张敖的手下却有人看不下去了。张敖的国相贯高等人认为刘邦羞辱张敖，就是在羞辱整个赵国人。于是，他们准备刺杀刘邦。结果，刘邦在关键时刻发觉有些异常而逃脱。事发后，张敖、贯高等人都被刘邦给抓起来了。刘邦下令严审贯高，目的就是希望能够让他说出张敖也参与到谋刺案件，从而废黜张敖的王位。出于对女婿的关爱，吕后还曾经亲自找刘邦讲情，刘邦对吕后说，不要以为张敖会顾及到你女儿，他要是夺取了天下，女人多得是。但是，贯高无论如何严刑拷打，都坚持宣称谋刺的所有事情，都是他一人所为，与张敖无关。最终，刘邦也没有找到张敖参与谋刺的证据，刘邦不得已赦免了张敖，把他从赵王废黜为宣平侯。
受贯高事件的牵连，赵姬也被下到狱中。赵姬的兄弟托人找到吕后的老情人辟阳侯审食其，希望能走走吕后的门路把赵姬放出来。可是，对于吕后来讲，这个女人是自己的情敌，怎么可能出言相救呢？赵姬后来在狱中生下了一个男孩，眼看着脱身无望，赵姬愤而自杀。就在赵姬自杀后，狱卒将这个孩子送到刘邦面前，刘邦这会儿才回过神来，可惜赵姬已死，也无可奈何。最终，刘邦给这个孩子取名为刘长，封为淮南王，他是刘邦最小的儿子。刘长母亲已死，刘邦下令让吕后抚养他。由于赵姬已死，吕后也没了醋意，收养了刘长。
