裴寂虽然功高，但其能力有限，武德二年，刘武周入侵太原，裴寂主动请缨，率军征讨刘武周。在介休之战中，裴寂全军覆没，丢盔弃甲奔逃一夜，才逃到晋州，导致晋州以东的州县全部沦陷。
裴寂回到长安后，群臣激愤，李渊为了给众人一个交代，立即将裴寂下狱问罪，但不久，裴寂就官复原职，重新回到李渊身边。
裴寂身为宰相，在朝政上碌碌无为，他处理事务时漏洞百出，屡屡引起同僚不满。例如户部尚书刘文静对裴寂就十分不满。当初李渊起兵，最早是李世民和刘文静谋划，后来才邀请裴寂一起设下圈套，诱导李渊造反。但李渊称帝后，裴寂的官职、待遇、赏赐都超过了刘文静，引起刘文静的不满。
一日，刘文静在家中喝的伶仃大醉，醉酒后拔起腰刀，对着柱子乱砍，声称要把裴寂碎尸万段。这件事被刘文静的一个失宠小妾告发，说刘文静要造反。李渊得知后，立即捉拿刘文静，并且派裴寂、李纲、萧瑀一起审讯刘文静。李纲、萧瑀都认为刘文静并无谋反的迹象，连李世民也出面保全刘文静。裴寂知道后，暗暗向李渊进谗言：
