正是因为这个原因，虽然家境贫寒，但海瑞仍然在迎娶了王氏之后，又先后纳了韩氏和邱氏两房妾室。韩氏进门较早但没有留下一男半女，反倒是海瑞73岁时纳的邱氏又为海瑞生下了一个儿子，但可惜的是，老来得子的海瑞还没有来得及高兴多久，一场大病又再次夺走了这个孩子的性命。
客观来说，海瑞并不是一般人眼中死板僵化、毫无灵活性的迂腐官员，他之所以能够为官一任，造福一地，凭借的正是他不和光同尘的道德自律。
但同时我们也必须认识到，海瑞说到底仍是一个古人，在他身上依旧能看到一些我们现代人所不能接受的观念，比如对于宗嗣近乎于执念的追求、对于孝道的律己律人。许多人猜测，他的妻妾们或是成为"下堂妇"，或是早早病逝，既与他求子心切有关，也与他母亲对他本人生活的过度干涉有关。
可以想象的是，无论是他的妻子还是妾室，在跟了他之后的生活都不会太好，一方面海瑞微薄的薪俸，使得他一家不得不节衣缩食；而另一方面，他对于母亲的孝顺让他不愿也不敢违背母亲的意志，他的妻妾也不得不生活在这位婆婆的阴影之下。
