书架堂从元朝始建，已有近七百年的历史，明朝开始修建寨墙，清朝形成如今之规模。书架堂背山而建，分上、中、下三寨，寨墙高5米有余，寨墙用本地所产青石筑起。石基牢固，缝细紧密，虽经风雨吹摇，时光流逝，依然如故。寨外以前皆是鱼塘，即可观赏，食用；又可保护村寨。村寨有三道城墙，东、西、北三道城门，寨后还有两个城堡，如今，除两个城堡被毁坏外，其余的今天尚可看到，从中可体会到当年的壮观。书架堂周围，皆有南长城兵营遗址，其中的王坡兵营遗址，更是凤凰南长城兵营遗址中。书架堂也因为周边的这几个兵营，所以才能在这山凹中，繁荣兴旺，安居乐业。正因为如此，所以本地才能文人、举子辈出”的地方。书架堂的人并不姓舒或苏，全都姓杨。村寨因文风昌盛，家藏万书，人才辈出，故名“书架堂”。