那么为什么大司马、翰林院不被历史所唾弃，而宦官却成了千古罪人呢？其实很简单，我们的历史是由这些儒家士大夫所撰写的，因为儒家忠君的思想，不能去抹黑皇帝，那么矛头只能指向皇帝代理人宦官。
而且皇帝也把宦官当做自己人，比如唐太宗时期，有一次宰相房玄龄和高士廉遇到少监窦德素，然后就问："北门近何营缮？"北边正在搞什么工程？我们在《长安十二时辰》地图中看到，皇帝的宫殿是在长安城的北面，而那些办公衙门是在南边，所以时常所说的"北司"是指北边替皇帝服务的宦官机构，而"南衙"是指宰相的官衙，所以外朝大臣与宦官的斗争有时候被叫做南衙北司之争。
而当房玄龄问北司正在搞什么工程的时候，唐太宗非常生气，唐太宗对房玄龄和高士廉说，"君但知南衙政事，北门小营缮，何预君事？"，太宗这个开国皇帝对宦官没有任何依赖的皇帝，把宦官正在做的事情当做自己的家事，自己私人的事，宰相是无权过问的。我们从太宗的口气里就可以看出，他把宦官当做自己人，与朝廷相权对立的。
