最后就是最奇怪的一点，如此数量庞大的石像群，所雕刻的人物服饰特点有史前的，有战国的，有唐宋的，形象从文官到武将再到普通士兵无所不包，看起来还真像古代的军队，但史书上居然很少能找到关于它们的记载，专家只找到了清代光绪年间当地2名贡生写碑文、游记时对它们的描述：“有奇石自土中出，俱类人形......奇形万状......”
石像的来历至今都是悬案，有考古专家认为，石像所在地是延续了数千年的祭祀场所，最初雕刻石像可能和舜有关，因为石像群距离九嶷山舜帝陵也就35公里左右，它们的年代比秦始皇兵马俑更早，历史价值更高，但也有专家提出，石像与古代的战争相关，比如南方楚粤战争;更有人猜测，这是当地少数民族神秘的文化遗存。