贞观十三年，侯君集率军灭亡高昌后，在未有请示皇帝的情况下，擅自把一些没有罪的人发配至边疆，私自将高昌国的宝物收入囊中。他手下的将士们知道后，纷纷效仿。侯君集害怕此事越闹越大，最终败露，故不敢治底下人的罪。但天下没有不透风的墙，班师回朝后，侯君集等人被捕入狱。
中书郎岑文本以为侯君集是唐朝的功臣，不能轻加屈辱，于是上书皇帝请求释放侯君集。没想到侯君集出狱后，自以为曾经立下大功，却因贪财被囚禁，对此非常不满，渐渐有了不一样的心思。
贞观十七年，侯君集企图拉拢被派往洛阳的都督张亮，说："你能造反吗？要是可以的话，我和你一起！"张亮将侯君集的话告诉给唐太宗，皇上说："你和侯君集都是功臣，这些话他只对你一个人说了，若是他死不认账，也拿他没办法。故唐太宗将此事暂时搁置，对待侯君集还是像以前一样。
