当时就有人对诸葛亮说李严心术不正，可能会造出事端，要对李严多加小心，而诸葛亮却认为他和李严都是托孤大臣，现今大事未定，不能互相伤害，同时他也认为那时的李严还是可以和他一起为蜀汉效力做事的。
后来曹魏准备进攻蜀汉，诸葛亮为了汉中的安全，所以就让李严带领两万人马去汉中抵挡，李严不愿意去，心里很不满，就散布传言说司马懿已经给他准备好了官职来让他投降。李严的本意就是想在蜀汉加官进爵。
诸葛亮知道李严的心思，诸葛亮为了蜀汉大局，于是李严被封为骠骑将军，同时又让李严之子接替江州防务。诸葛亮这么做，李严才愿意去汉中。
之后诸葛亮伐魏，让李严负责粮草。当时因为经常下雨，粮草很难供应，所以李严就派人告诉诸葛亮，让他先退兵。诸葛亮因此退兵而回。
然而诸葛亮退兵后，李严为了推脱自己负责粮草办事不力的责任，反而说诸葛亮延误战机，当时他说粮草充足，诸葛亮怎么就退军。但之后李严又先刘禅上奏说诸葛亮退兵，是想引诱敌人，然后在开战。
李严的这两种说法，前后不一、相互矛盾，李严最后只能认罪。
这时诸葛亮对李严不能再忍，他弹劾李严心中不以托孤为重，心里只想着自己的家里，不考虑朝政国家大事，如今又颠倒是非，若在用李严，就会给朝政带来危害。
