但张敖了解刘邦,可他底下的那群大臣们就受不了了。因为张敖好歹也是一地之主,是汉朝的藩王--赵王。而且当时的大臣们都是追随过张敖父亲张耳的,身上都有一股任侠之气,天不怕地不怕。看到自己的君主被人羞辱,所谓主辱臣死,这群臣子就很气不过。所以张敖底下的丞相贯高就跟张敖提议,干脆把刘邦杀了算了。但张敖胆子没那么大,他对自己这位岳父怕得要死,根本没有想要杀掉刘邦的想法,所以口头上制止了贯高。贯高明白张敖的顾虑,索性就自己召集了一帮人商讨刺杀刘邦的事,不再跟张敖提起。
等到次年,闲不住的刘邦又从皇宫里跑了出来,到处巡游的时候,又来到了赵国。贯高就觉得时机已到,准备在柏人县刺杀刘邦。因为贯高已经查到刘邦下一站就会到达柏人县。没想到的是,刘邦这个人比较迷信,他觉得柏人县这个名字不好,尤其"柏人"跟"迫人"一样,听得刘邦有点不开心,所以就不打算再去柏人县里留宿。阴差阳错,贯高没能将刘邦刺杀成功,最糟糕的是,这件事还被贯高的政敌给知道了,于是立马将贯高刺杀的这件事,密报给了刘邦。刘邦听到之后,当然是又惊又怒,立马就派人把张敖和贯高一群人给抓了过来。