据史书记载，清道光至咸丰年间，朱元璋家族地十一代晋王朱求桂后代的一个分支朱怀宗及儿子朱紫贵、朱振南、朱紫峰三兄弟靠盐业发达，时人称这里是“朱洼寨”。当时朱家虽然靠着盐业获得了巨额财，但是当时社会也动荡不安，怎么才能保卫这些财富呢?
朱家兄弟三人商议之后，决定修建更加建筑的家园，即推倒原来的土墙改为石寨，而当地坚硬的红色花岗岩石头随处可见。于是，在三兄弟的努力之一，一座寨墙坚硬的石寨就诞生了。据说当时为了公平起见，寨墙挖基础放线时为求得公正，由朱姓一位颇有资历的老人用黑布蒙住双眼，手提装满白灰面的篮子放线，于是就“走”出了如今人们看到的弯弯曲曲的寨墙。