然而就是这样一个人物，却被许多人加上了"克妻"一说，那这是怎么一回事呢？那我们先来看看他的这几个夫人。原配夫人是贵州都匀知府石煦的女儿，在张之洞十八岁的时候，经过媒人的凑合，两人步入了婚姻的殿堂。这个石氏是一名温柔贤惠的女子，而且还拥有极高的琴艺，在陪张之洞是十一个年头就得病去世了。在原配去世五年之后，张之洞取了湖北按察使唐树义的女儿唐氏，这名女子与张生活了才两年多，也因病去世了。
在唐氏去世五年之后，张之洞又娶了第三位夫人王氏。这个王氏是张之洞好友王懿荣的妹妹，她温文贤淑知书达理，才华非常出众。其实这王氏在张之洞有了唐氏之时，这王氏和张之洞已经互相对上眼了。到了唐氏病逝五年之后，张之洞回到四川，一看王氏还没有嫁人，于是两人自然而然的走到了一起。但好景不长，两人婚姻才过了三年，王氏又不幸因难产而死。
三任妻子英年早逝，给了张之洞的身心巨大的打击。在幕友的聊天之中得知，太原城有个八十多岁的袁半仙，是袁天罡的后代，张之洞抱着试一试的想法，决定找这位半仙看一看！这袁半仙看过张之洞之后，说张的骨相太重，前三任夫人都是因为骨相太轻经受不起，被克死的。如果不想做个鳏夫，就找找一个骨相匹配的女子，以后就能飞黄腾达，半生无忧。于是在这位半仙的建议下，取了山西一名寡妇李佩玉为妾，结果这个女子真的陪伴了二十多年也相安无事，直到张之洞去世！
