祠堂是男权社会施展自己权威的场所，只有男人才能进入祠堂，进行各种家族的活动。
女人出入祠堂，除非是是犯了宗族的禁忌，进祠堂接受家族人的惩罚，比如一些有了丈夫的女人，和其他男人发生了不好的关系，被人抓住，就得进祠堂接受家族长辈的惩罚，严重的绑在笼子里，和男人一起沉在水里淹死，也就是俗话说的“浸猪笼”。
命一人处守之，兼责以司香烛，时洒扫，供祀事役使焉。”
由此可见，按照家规，芝英祠堂大都有“守祠人”。例如，大宗祠堂、用大公祠等。江苏宜兴任氏大宗祠，“立宗子以主稞献，宗长以定名分，宗正以秉权衡，宗相以揆礼义，宗直以资风议，宗史以掌薄版，宗课以管钱名，宗干以充干办。还有一些职员以及‘守祠人等杂役，分掌族内事。”
宜兴任氏大宗祠提出“守祠人”这一名称，并将其明确归为杂役一类。
