出的理由是，百姓们聚集于一处，可以便于集中保护他们免遭敌对山寨的屠杀。
这里有个问题需要说明，当初高慕青带着手下来此投靠左宗道的时候，因为从各地赶来投奔高慕青的百姓越来越多，故而和左宗道产生了纠葛。左宗道其实并非不想收留百姓，但当他发现这些投奔而来的百姓们大多是老弱病残之人，而且这些本来都是龟山岛上出来的百姓，心里一门心思的只想着跟高慕青走，他便对他们再无兴趣了。再加上一下子多了一两千张嘴，山下的耕地吃紧，根本没法安顿这些既不能产出粮食，又不肯归心于己的百姓，左宗道才会拒绝为他们提供口粮。
石人山下，除了这些聚集的村落和田地之外，最让人留意的便是无处不在的塔楼和堡垒了。从踏入山下的谷地开始，周围起伏的坡地上便无处不见山匪的踪迹。他们在箭塔和塔楼顶端探头探脸，一脸戒备的看着这一队兵马从他们下方的山道上走过。每一道险要之处，密密麻麻的箭塔都遍布两侧山坡。通向山寨的山道两旁，更是工事箭塔林立，可谓是连一只苍蝇也难飞上去。
石人山大寨毕竟存在十日良久，从伏牛山中内部大分裂为各个小山头开始，莫氏便盘踞石人山中。至此已经有一百多年。这么多年，为了保证石人山山寨的存续，自然是开山劈石建造工事和箭塔做了很多事情。而这一切在左宗道攫取了山寨寨主之位后有变本加厉。左宗道自己知道自己夺得石人山大寨的位置是不光彩的，所以非常担心其余的山寨会来干涉攻打自己，故而又在原有的基础上增加了不少防御措施。可以说现在的石人山大寨主寨，称为固若金汤也不为过。