贾充的妻子李氏美貌贤淑，有才有德。生了两个女儿，一个叫贾褒（一名贾荃），一个叫贾裕（一名濬）。李氏的父亲因罪被杀，李氏被牵连流放乐浪。后来，贾充又娶了城阳太守郭配的女儿郭槐，刚开始封为广城君，后来改封为宜城君。这个郭槐生性嫉妒，曾先后以为贾充与贾充两名儿子的乳娘有私情，将她们杀害，间接导致这两名孩子因思念自小信赖的乳娘而夭折。
晋武帝继位，李氏因大赦得以还乡，武帝特意下诏，允许贾充设置左右两位正室夫人，贾充的母亲也让贾充把李氏迎回来。郭槐生了气，挽起袖子，数落贾充道："你刊定律令、辅佐皇帝的功劳，我都有份，李氏有什么功劳，怎么能跟我相提并论呢？"贾充便上书叩谢武帝的特诏，说自己才德不够，当不起同时拥有两位夫人的优厚待遇。其实他是害怕郭槐。
贾褒当了齐王司马攸的王妃，想让父亲把郭槐送回娘家，接回自己的母亲李氏。当时，这种情况很多，询问礼官，也难以决断。那些当丈夫的一方面把后妻留下，一方面和前妻异居私通。贾充当时宰相，就借口说为天下作出榜样，替李氏在永年里盖了一所房屋，让她在其中居住而不相往来。贾褒、贾裕经常哭泣着请求贾充，他却始终不肯去看一看李氏。
后来，贾充被调出朝，镇守关右，公卿设帐饯别，贾褒、贾裕怕他一去不归，便掀开帐幔，来到酒席间，叩头流血，向贾充和诸位官员哭诉她们母亲应该迎还的道理。大家因贾荃是王妃，都惊慌地站起来走散了。贾充也感到很惭愧，让太监将她俩扶走。后来，郭槐的女儿贾南风当上了皇太子妃，皇帝便下诏做了决断：像李氏这类的情况，一律不许迎还，贾褒愤恨而死。
起初，郭槐想要去会一会李氏，贾充说："她有才气，你去不如不去。"等到贾南风当上了皇太子妃，郭槐觉得自己有大靠山，就大摆排场前往会见。进门后，李氏出来迎接，郭槐见到李氏，气度雍容，气质高雅，不知不觉腿就弯了，屈膝下拜了两次。从此，郭槐再也不敢去看李氏了。不过，贾充每次出门，她都派人跟踪，唯恐他去看望李氏。
如此看来，贾充为人倒还可以，不像人们想象中那样不堪，所以贾充死后，礼官议谥曰荒，司马炎不采纳，改谥为武。
