杨坚天天对着独孤伽罗，就是再爱她也早已看腻了。终于有一天，杨坚忍不住了，宠幸了罪臣尉迟迥的孙女尉迟文姬。虽然杨坚事后也曾后悔，但却有几分窃喜。如果伽罗对此事睁一只眼，闭一只眼，那他以后就有机会尝试了。结果独孤伽罗杖毙了尉迟文姬，打了杨坚的脸，所以他才气得离家出走。
那为何后来的宣华夫人，独孤伽罗却不管呢？首先，宣华夫人虽也为宫女，但之前却是陈国公主，陈后主的妹妹。从身份上就比尉迟文姬高出好几个等级。其次，据史料记载宣华夫人“性聪慧，姿貌无双”。独孤伽罗喜欢聪明人，而宣华夫人也能按伽罗要求的去做。所以对伽罗构不成威胁。最后，独孤伽罗杖毙了文姬，宣华夫人算是她给杨坚的一点补偿。男人在外都是好脸面的，独孤伽罗已经打了杨坚一次脸，总不能一直让杨坚威严扫地。为了不让自己落下个善妒的名声，独孤伽罗便默许了宣华夫人的存在。
