后来侯君集怂恿太子谋反，这让侯君集和太子走上了末路。可是侯君集的事与太子李承乾想要谋反，结果事情败露，结果可想而知，事情败露之后，侯君集和太子李承乾的好日子就到头了。不过李承乾毕竟是太子，李世民没有杀死他。
可是侯君集的命运就不同了，身为唐朝的开国功臣，侯君集就被赐死了。侯君集虽然死了，可是李世民是非常伤心的。不过到了之后，侯君集请求赦免自己的妻子和儿子，好为自己守丧。于是李世民同意了。同时李世民发现了两名美女。
不过这两人不是侯君集的妻妾，反而只是府上的侍女。李世民发现如此美人之后，决定将她们充入后宫。唐太宗李世民一时兴起，询问两位美人为何长得这么美，可是两位美人的答案让李世民差点气死，两位美人说进了侯君集的府上，大部分时间都是喝牛奶。
李世民对两位美人这样的说法根本不相信，不过两人这样的说法确实非常可气。从另一个角度来说，古代的时候喝牛奶可不如现代，侯君集的生活也是非常奢侈的。不过侯君集死后，李世民就再也没有进入过凌烟阁。从某种意义上来说，李世民对凌烟阁的功臣有了想法。
