但是刘伯温并不是这个集团的人，所以朱元璋也希望刘伯温能够制衡一下淮西集团。后来有一次有一个叫做李彬的官员因为贪污犯法，应该被斩死。而这个人正是被刘伯温给抓的。但是这个人是李善长的亲信，所以李善长就去找了刘伯温，希望能放过这个人。但是刘伯温并没有给他这个面子，还说你要是再来找我，我就告诉朱元璋，而从此以后，李善长对刘伯温是怀恨在心。
后来李善长就开始故意刁难刘伯温，他告诉刘伯温，现在已经很久没有下过雨了，按照五行八卦来说，现在是求雨时期，不应该杀人。刘伯温自然是非常的懂五行八卦，知道过几天会下雨，于是就立马杀了李彬。而李善长这时候直接向朱元璋告状，说刘伯温故意杀人，导致没有下雨，而那时候刘伯温也是没有料到，真的很多天没有下雨。
但是朱元璋并不糊涂，知道两人有矛盾，李善长只是借机来除掉刘伯温而已。而这个时候刘伯温的老婆正好去世，刘伯温向朱元璋请示要回乡办理丧事，而朱元璋正愁着如何处理好这件事的时候，一听刘伯温要回乡，立马批准，而刘伯温也是逃过了一截。
