妻子因为接连丧子，悲伤过度，两只眼睛也全都失明，耳朵也重听，疾病缠身。罗泽南自己也多有疾病，腰背酸痛不休，由于家贫，又不能买药给自己治病。
对于亲人的相继离世，他感到十分悲痛，于是在《殇侄殇子哀辞》一文中写下："恍恍惚惚，迷迷离离，是血是泪，终莫能辨。呜呼痛哉，呜呼痛哉！"这样的文字至今读来，依旧可以感受到当时他那无限凄怆和悲酸的心情。
可罗泽南并没有因为这些悲惨的遭遇而一蹶不振。他坚持一边教书谋生，一边夜以继日地苦读。尽管当时有很多人劝他"为工为商"，可他始终勉强支持家庭，不为世俗所动，还经常以"何妨年少历艰辛"自励。
罗泽南这种清苦自励的品格在很大程度上是来自其祖父的影响。祖父罗拱诗自幼家贫，靠替别人打理生意为生。他虽说没读过什么书，却深以没有读书学习为憾事，因此他千方百计供后人读书，不管日子再如何的艰难，他都不肯让孙子辍学去学习其他的谋生手艺。而罗泽南对于祖父的教诲也是十分的感激。
