取得一定战果的公孙瓒此后变得越来越消沉，公元195年(汉献帝兴平二年)，公孙瓒与刘虞残部鲜卑、乌丸等胡兵数万人交战，结果公孙瓒大败，后来又屡败屡战，只好逃回易京坚守，并命令士兵在易河边挖十余道战壕，又在战壕内堆筑高达五六丈的土丘，丘上又筑有营垒。堑壕中央的土丘最高，达十余丈，公孙瓒自居其中，以铁为门，斥去左右，令男人七岁以上不得进入，只与妻妾住在里面，又囤积粮谷三百万斛。公孙瓒又疏远宾客，致使身边没有一个亲信，谋臣猛将都渐渐疏远了。从此以后，很少出来打仗。
公元198年(汉献帝建安三年)，袁绍传书给公孙瓒，想跟他释和，公孙瓒没有答复，反而增强守备。于是，袁绍兴兵讨伐公孙瓒，袁绍部队攻打到公孙瓒部将的时候, 公孙瓒不肯相救，竟说："救一人，那以后众人都会只等救兵而不肯力战。"结果,公孙瓒的部将一个接一个失败,他却只是坚守不出,后来袁绍诱骗公孙瓒出战,结果败回老巢。袁绍于是掘地道到城楼下，毁坏其望楼，渐渐到达中央的土丘。公孙瓒自料必败无疑，先杀掉自己的妻子、儿女，然后引火自焚。
公孙瓒作为乱世豪强，曾经控制了中国东部地区的绝大部分，包括今天的辽宁、河北、山东、河南、江苏等地。与吕布等名将相比，他更多的是坚毅和勇敢，但是常年的厮杀使他后来变得性格残忍， 又没有政治信念，在战争劫掠中日益贪婪，残害百姓。在害死刘虞后，公孙瓒集团丧失人心土崩瓦解，晚年更是贪图享乐，丧失斗志，最终难免不走向失败。
