没有办法的情况下，朱五四只能忍痛将自己的二儿子和三儿子出去做了上门女婿，又将自己的两个女儿也嫁了出去，可见有的时候控制人口增长是非常必要的，无序繁殖导致贫穷的情况确实是存在的。
大元至正四年，北方黄河又发大水，而朱五四面临的却是百年难见一遇的干旱和蝗灾。元朝政府又强令百姓不得上山打猎，下河摸鱼，朱五四一家的生计越来越成了问题。这时已经是64岁的朱五四再也没有能力带着家人们逃荒了，也许是灾荒之后的瘟疫感染了他，于是在这一年的四月初六，他结束了苦难的一生，撒手西去。
朱五四的死，只是老朱家灾难的开始。
四月初九，朱元璋的大哥也紧随父亲而去，紧接着大哥的儿子也因病死去，四月二十二日，朱元璋的老母亲陈氏也走完了生命之途。转眼间，人丁兴旺的老朱家就剩下了朱元璋这个能靠得住的男丁。
