不过，这种建立在侵凌别国的基础上建立起来的国家，肯定所带起来的仇恨是巨大的。这种仇恨埋葬在那些被征服的民族的心里，一旦找到机会，喷发出来，对西辽发动冲击。这就是没有文明成果熏陶下的丛林法则在起作用的表现。
当时异军突起强大起来的，是花剌子模。花剌子模强大起来后，理所当然地对西辽发起了强力的冲击。
而这时候的西辽，情况却刚好相反。耶律大石去世以后，他的后代没有了耶律大石那样的经历，生来就养尊处优，因此，就没有了继续战斗的雄心壮志。
于是，西辽就开始遭受了花剌子模的强力冲击。花剌子模不断蚕食西辽，西辽的地域变得越来越小。在这种情况下，另一部分人出现了。这一部分人，也就是乃蛮部。
乃蛮部本来是蒙古草原上一支非常重要的军事力量，其首领太阳汗也曾经称霸一时。可惜的是，他运气不好，与成吉思汗生在了同一个时代。成吉思汗在统一蒙古各部的时候，太阳汗与成吉思汗结仇，最终被成吉思汗打败并灭掉。太阳汗的儿子屈出律往西边逃窜，结果来到了西辽。
