县内山峦重迭，岳岭绵亘，兵家多据险扼要实施防务。民国《石埭备志汇编》载：“皖南军务驻节徽州为浙省门户，而石埭又为徽州门户，守石埭不啻守徽州而并以浙省”。
关隘主要有琉璃岭、万觉岭、甲子岭、榉根岭、梓桐岭。清咸丰年间，曾国藩部于榉根岭口设置石堑关隘，高3.5米，东西长30米，南北宽5米。
溶洞县内溶洞纷列，其中金竹洞曾为吴应箕抗清义军和新四军驻所。其他如老虎洞、灵显洞、别一洞、稠岭洞、西山洞等可整修作为短期屯兵或屯集物资场所。
城墙宋元之际，广阳筑有土城墙，建城楼、设水关。明嘉靖四十五年（1566）改为砖墙，周长3里许。
碉堡民国期间，县城及乌石陇、夏村、七都、横渡、七里等集镇均构筑有碉堡1—2个。民国23年（1934）全县建碉堡33个，25年又增建新碉，致使碉堡遍布城乡。每个碉堡2—3层，四周均设置有枪眼。