徽派建筑的构成过程，遭到了徽州共同的历史天文环境和人文观念的影响。

　　这里原来是古越人的聚居地，其寓居方式为顺应山区生活的”干栏式”建筑。中原士族的大范围迁入，不只改动了徽州的人口数量和构造，也带来了先进的中原文化。中原文化与古越文化的交流交融，直接表现在建筑方式上。早期徽派建筑中典型的”楼上厅”方式，楼上厅室特别轩敞，是人们日常活动休憩之处。这是由于山区湿润，为了避免瘴疠之气，而保存了越人”干栏式”建筑的格局。同时，由于大量移民的涌人，人稠地狭，构建楼房也成为最佳选择，但多依山就势，局促一方，为处理通风光照问题，中原的”四合院”方式又演化成为顺应险峻的山区环境，既封锁又通畅的徽州”天井”。而山区木构造的房屋又易于遭受火灾，为了防止火势的蔓延，便又产生了马头墙。早期的徽派建筑方式，正是外来移民与原住民文化融合的产物。

　　明朝中叶以后，徽商崛起，雄据中国商界。致富后的徽州商人，将大量资本返回家乡，其中重要的一项就是对建筑的投入。他们修祠堂，建宅第，造园林，竖牌坊，架桥梁，盖路亭，给徽州乡村相貌带来了宏大变化。由于”贾而好儒”的特性，具有很高文化素质的徽商们在建筑中注入了本人对住宅规划、构造、内部装饰、厅堂布置的见地，促使徽派建筑逐步构成作风共同的建筑体系，使徽派建筑不只具有适用性，还包含有丰厚的文化内涵。