县境地处山区，建材资源丰富，建筑业历史源远流长。建筑材料、形制、装饰等风格独特，既受传统工艺的影响，又随时代的嬗变而日趋完善。
建国前县内各类建筑均为砖木石结构，民间居宅多为粉墙黛瓦的三间式建筑结构。宗教、宗族建筑遍及城乡。城镇、乡村多依山傍水而建，村有水口园林，环境幽丽，体现了天人合一的徽派建筑特征。
建国后随着经济发展、观念更新，城乡建设事业日趋繁荣。70年代建材业迅速发展，产品种类增加，城乡建设加快。1976至1987年县城公用建筑竣工面积为建国后的前26年的8.16倍，面积比建国初扩大了3.9倍。各类建筑的风格出现时代性变化。