接下来的事态被谷吉不幸言中了，郅支单于见儿子归来，将因汉国这些年扶持呼韩邪单于而产生的怨气尽皆发泄在谷吉身上，悍然杀害了谷吉。
要知道就算在匈奴最鼎盛的时期都没擅杀过汉使，何况现在没落的匈奴，郅支单于在泄完愤之后就开始害怕汉庭的报复。此时呼韩邪单于在汉国的支持下逐渐恢复元气，郅支单于对于东归已经完全没有把握了，为了躲避汉国的报复，不得已之下只得再往西迁移。
正巧此时乌孙与西部的康居爆发战争，乌孙的实力颇强，打的康居几无还手之力。康居王困顿之下听从手下建议引匈奴人来助，此事正中郅支单于下怀，立即率军开往康居，然而在行军途中遭遇暴风雪，部队伤亡惨重，最后只有三千余人到达康居，不过匈奴人战力还是强横，很快的击败了乌孙人。并鸠占鹊巢在康居国实行殖民统治。（郅支单于在击败呼韩邪单于之后尚余五万人，中间战乌孙、灭坚昆、乌揭、丁零损失的部队数字找不到史料记载，只有到康居时的大概数字，结合陈汤灭郅支单于之役的战果，这3000多人应该是合理可信的）
公元前43年，郅支单于在稳定统治基础后，又派出使节逼迫周遭小国进贡。汉国方面因谷吉护送驹于利受回匈奴后音讯全无，先后三次遣使责问谷吉的生死下落，郅支单于此时力量比初西进之时更薄弱，自然不敢坦然告知真相，极力推诿掩盖之余，更表示愿意再次遣子入质以示臣服。话虽如此，郅支单于何曾有过臣服之心。
仗着远离汉国，汉军鞭长莫及。
