于是，有大臣就说：匈奴不吉，前两次来朝汉，每一次皇帝都在同年因病而亡，他们定是来"厌人"的。汉哀帝听了，就不得不多想一层。而此时，恰逢汉哀帝的身体状况不是特别好，干脆就以开销太大为由，拒绝了对方的请求。
不过此时，黄门侍郎扬雄却向皇帝提出了相反，他对汉朝和匈奴的关系一直深有研究。从开国到现在，汉匈之间的关系已经进入到了一个历史新时期，对方主动提出朝汉，那是表示愿意继续臣服，如果此时断然拒绝，打击了对方的情绪不说，没准还会回到原来的老时代，军事行动的费用可比招待费要高昂很多。
这时候，匈奴的使者已经在回程的路上了，汉哀帝赶紧召回，改了说法，同意对方单于晚一年再来。
其实，汉哀帝同意归同意，但等人家真的来了之后，他却安排对方住在了上林苑蒲陶宫。原来，汉哀帝还是担心匈奴会不会"厌"他，就给找了个"太岁厌胜之地"。在古代方士的眼中，"太岁"所在的方位是凶，把人家放在这里，分明是要克制住匈奴人。
然而，对方也不是糊涂人，住了一阵，再加上，身边还有通晓汉文化的翻译。没过多久，匈奴就知道了其中的深意，心中当然有意见。于是，汉哀帝在物资方面尽量给予弥补，"衣三百七十袭，锦绣缯帛三万匹，絮三万斤"，从而化解了这场尴尬。最后，在匈奴单于回去之时，汉哀帝还派中郎将韩况率兵护送。
