此时南越的闽越国和东瓯国因为七国之乱时吴濞儿子的挑拨离间，开始相互搏杀。而赵胡也因为害怕武乱殃及自己而对汉朝更为倚重，于是他特遣太子赵婴齐到长安去当人质，以示他对汉朝的忠心。汉武帝对南越的友好态度很满意，派王恢和韩安国平定了闽越的动荡局势。
按理说，事情到这里就可以暂告一个段落了。然而，后来的发展却并非这样一帆风顺。南越王赵胡继承赵佗的王位后，他没有胡来，但他派去长安当人质的儿子赵婴齐却胡来了。
其实赵婴齐胡来也没有什么大不了的事，只不过是到了长安整天足不出户，就等于是"软禁"了。用他的话来说就是:寂寞，寂寞啊。于是，他在寂寞中偷偷地出了一次门，结果就遇到了改变他一生轨迹的女人。
