李密虽然最终赦免了他，还封他左武候大将军，但是在《资治通鉴》中，却有一段房彦藻的记载，他当时力劝李密除去单雄信，因为他觉得单雄信这个人"轻于去就"，所以才"劝密除之"；只不过"密爱其才，不忍也"，这才保住一条命。
让部将徐世勣为乱兵所斫，中重疮，密遽止之，得免，单雄信等顿首求哀，密并释而慰谕之。
可见，单雄信其实远没有他父亲单禹的英雄气概，甚至连一条铁铮铮的汉子都称不上。反观李世民手下的其他瓦岗兄弟，基本都是好汉，绝不会干出跪地求饶这样的丑事。或许这才是李世民无论如何也不愿意留他的原因。
单雄信不利于团结
