很多人看在眼里，虽然没有说什么，可是对他却颇为不满。可是，奈何，当事人一直退让，从不正面和他冲突，再加上，别人说的话，狄仁杰也不在意。于是这一日，终是使得皇帝不得不亲自出面干预，告诉他，之所以自己当初提拔他，就是因为娄师德的几十封举荐信！这让狄仁杰顿时脸红不已，从此以后，他开始反省自己的言行，这才有了之后稳重的老油条。
而这二人的不合，也使得之后诞生了一个成语：唾面自干。意思就是，别人看你不顺眼，往你脸上吐唾沫，给你不痛快，而你不仅不还手，反而是擦都不擦，让唾沫自然风干！实际上娄师德就是这么做的，而且他也是这么教导自己在外为官的亲弟弟的。毕竟一家两人，都身居要职，必定会引起他人不满和嫉妒，这个时候，能够做的就是隐忍，只有让对方痛快了，才不会继续找麻烦！
但是，或许娄师德也是因为太能忍了，所以皇帝并没有像信任狄仁杰一样信任他，大概在皇帝看来，此人太过隐忍，他为了自保或许什么都做的出来。所以，到了皇帝晚年时期，最为信任和倚重的人就是他，不论什么事情，但凡是想不通的，都会询问他的意见。但是，相比于他的心机，皇帝实在是只能算是小白兔。他利用皇帝对自己的信任，举荐张柬之，最后借着他的手，夺回大唐江山；可是这一切，在外人看来，都与他毫不相干一般。
