在秦家山寨的周围，共有十六个村子，每个村子有二、三百多户人家，总共就三万八千多人，秦家山寨的人袓袓辈辈就生活在这里。山民一向彪悍的很，就是平常打架也是悍不惧死，以种田为主，兼职抢劫。

从秦志的爷爷那辈起，秦家就在这里占山为王。由于山高路险，进山的人不多，出山的人更少，更没有什么过往客商，所以他们也干不了什么大案要案，只是在这伏牛山周边城镇抢劫。有几次闹得动静大了，惊动了官府，派兵进山围剿，结果被打了埋伏，悻悻地打道回府，也没伤到他们半分。