尉迟宝琳看上了一个美女，就想纳她为妾。美女不肯为人作妾，尉迟宝琳就强抢美女。这件事情，引起了御史言官刘藏器弹劾。唐高宗偏袒尉迟宝琳，允许尉迟宝琳霸占这个美女。刘藏器他爹，是著名的刘知几。父子二人，都是出了名的硬骨头。
唐高宗影视形象，图片来自网络，感谢原作者。
刘藏器见唐高宗偏袒尉迟宝琳，直接怒怼唐高宗曰："今宝琳请，陛下从之。臣执奏，陛下亦从之。今日从之，明日又改之，欲令下人何以遵奉。夫人无信不立，匹夫匹妇尚不可失信，况为天子，安可戏言。今陛下二三其言。处分不定，臣恐四海之内，无所适从。"
唐高宗被刘藏器怼了，不敢再包庇尉迟宝琳。从那以后，尉迟家族就家道中落了。秦琼早就靠边站了，尉迟宝琳也靠边站了。朝堂之上，既没有秦家的人，也没有尉迟家族的人。秦利见朝中无人难做官，仕途不顺就在所难免了。
