很快，李邵、蒋琬便将廖立的话转告给了蜀国丞相诸葛亮，诸葛亮听完后，很不高兴，马上上奏刘禅，弹劾廖立三大罪状：
其一，信口开河贬低群臣，公然说国家不任用贤达而使用庸俗官吏，身居高位的都是卑鄙小人"。其二，诽谤先帝。其三，"将军队兵众简练，部伍分明"的训练成绩，斥之为不足一提。
最终，廖立被削职为民，流放到汶山郡务农。廖立被流放后，彻底淡出了蜀国的政坛，当他听说诸葛亮逝世后，他垂泣叹曰："吾终为左衽矣！"
意思就是蜀国失去了诸葛亮，早晚会亡国。
也就是说，廖立到最后都没有责怪诸葛亮，还说诸葛亮好话。其实，仔细想来，当年廖立的一番言论的确有牢骚的嫌疑，但并没有错的，说的句句在理。
首先，廖立批评诸葛亮任用一些平庸的人，是有事实依据的，向朗、郭攸之、文恭等的确很平庸。
