李严在蜀中也有足够的威望，在刘璋还是益州牧时，李严曾出任成都令，当时李严就获得过"复有能名"的评价，而在后来刘备自立汉中王，马超、诸葛亮等人的劝进表上，李严的名字也赫然在列，由此可见，李严在刘备集团的地位还是很高的。所以才能得到刘备的重用
但是诸葛亮230年第三次北伐时，诸葛亮下令要李严出兵协助守汉中，但是李严以各种理由搪塞而不出兵，后来诸葛亮第四次北伐事情更大条了，李严负责后勤运粮，但是因为连日雨天，运粮不继。李严为了推托责任，结果他就一方面传令要诸葛亮退兵，一方面又上表后主说诸葛亮是伪退兵要引敌军。
诸葛亮鞠躬尽瘁，坚持北伐，没有成为曹操那样的权臣。李严虽然确实成为一股阻碍的力量，但是诸葛亮很好地包容了他，最后万不得已，才弹劾他，最终李严被贬为一介庶民。而且据史料记载，诸葛亮去世的时候，李严还痛哭不已，觉得从此没有人再会用他了，最后激愤而死。
