高迁古村落和仙居现存的其他传统古村落一样，选择建在山水环绕、地势平坦开阔、生态完整的自然地理环境之中，将整个建筑群与自然环境巧妙的结合在一起。从现存的许多古村落选址布局来看，主要考虑山势方位与水体走向，使村落或随坡就势，或依山傍水，让村落与自然山水融为一体。这种村落布局，巧妙利用自然环境的特点，综合考虑风向、风力、光照、温度、湿度的作用，从而营造宜人舒适的栖居环境。
风水思想：“左青龙、右白虎、前朱雀、后玄武”之地
传统的风水思想对古村落的选址起着决定性的作用。人们普遍认为，风水好坏不仅关系到生产生活好坏，而且直接关系到村落及宗族的兴衰。《黄帝宅经》说“夫宅者，乃阴阳之枢纽，人伦之轨模……故宅者，人之本，人以宅为家居。若安则家代昌吉，若不安则门族衰微。”关于阳宅的选择，《阳宅集成》中口诀云“阳宅须教择地形，背山面水称人心，山有来龙昂秀发，水须围抱作环形。明堂宽大斯为福，水口收藏积万金。关煞二方无障碍，光明正大旺门庭。”风水学中把一个具有“左青龙、右白虎、前朱雀、后玄武”的地方作为最佳居住之地。
高迁村东有龙山，西有高迁溪，南有神仙居景区，北有永安溪，西北有大盘山。青山环抱，绿水长流。古人云：“凡宅左有流水，谓之青龙宅右有长道，谓之白虎前有宅地，谓之朱雀后有屏峰，谓之玄武。最为贵也。”高迁古村具备了这种条件，可谓风水宝地。正如钟乔吴老太公宗祠记里记载所描述的“前有景星叠立万仞，旁有瀑布波云罗列，后有笔架卧旗拥护，而蓼溪湖溪二水环绕其间……”
相传吴氏二十三世孙吴时坦分居上屋、吴时正分居下屋。吴时正生有四子，名白岩、苍岩、应岩、建岩四兄弟。据说白岩、应岩两兄弟有一夜同做一梦，梦见有一白胡子仙人指点，说他们所居住的下屋村南面，天上七星环月，地下龙脉健旺，是五谷丰登、人才辈出的风水宝地。第二天兄弟俩都说做的梦相同，于是深信不疑。兄弟俩就在此地择基垒石，经过他们的子孙们不断扩建，直至民国年间建成了规模宏大的四开檐民居27座。特别是下屋村13座古民居，除2座民国时期毁于大火，其余11座保存基本完好。如此规模宏大的古建筑群，能够完好保存，在国内也属罕见。
风水格局：“北斗七星”布局方式
高迁古村由南引白水溪水入村，以东西流向月鹿河为界，分上屋和下屋两大建筑群。根据《吴氏宗谱》记载，高迁吴氏族人吴本辉，梦里有仙人指点说村南“天上七星环月，地下龙脉旺健，是个风水宝地。”于是迁此定居，逐渐形成村落，当初村名为“高阡”，意为阡陌纵横，良田沃野，后改名为“高迁”，有“水往低处流，人往高处走”之意。
但是，高迁村落的先祖择地建村并没有完全达到风水思想所描绘的那种的理想宅居地，具体表现为一是高迁古村落坐南朝北，而总地势是南高而北低，近处没有高大案山可倚靠和面水，而且村落所面对的笔架山在南面，象征官帽的纱帽岩又在北面，为了弥补这一地势风水格局不足，先祖们听从风水师的指点，挖塘积水、堆土成墩、种植树木以弥补案山不足，造法根据星象北斗七星图系而营建七星墩，在月鹿河以南上屋旗杆里、八份头前面挖了七口池塘以北斗七星排列，谓“七星塘”。在月鹿河以北下屋村种树并筑土成堆，筑了七堆土，以北斗七星形状排列，谓“七星墩”，而月鹿河如一轮弯月湖泊，故曰"七星伴月"。“七星墩”和“七星塘”分布于民居之中，与河道及引排水系统贯通，集防涝、抗旱、排灌、生活效用为一体。吴氏祖先们通过引水、挖塘、堆土、种树等手段精心设计，营造了"山为丁水为财"风水格局，造就了高迁村聚落民居选址的最佳方案。
为何要以北斗七星排列，或许与古人对星相崇拜有关，在中国传统文化中，对包括北斗七星在内的星辰的崇拜信仰由来已久。老君曰北辰垂象，而众星拱之，为造化之枢机。作神人之主宰，宣威三界，统御万灵。从古代风水学角度来看，常以星象变化预测人事吉凶，《史记·天官书》说“北斗七星，所谓旋、玑、玉衡、以齐七政。……斗为帝车，运于中央，临制四乡。分阴阳，建四时，均五行，移节度，定诸纪，皆系于斗。”所谓“七政”是指春、秋、冬、夏、天文、地理、人道。也就是说，北斗七星决定了自然界天地的运转、四时、五行的变化，以及人间世事否泰。《河图帝览嬉》曰“斗七星，富贵之官也其旁二星，主爵禄其中一星，主寿夭。斗主岁时丰歉。”
北斗七星的第一至第四合称为魁，第五至第七合称为标，合而七星合在一起称为斗。”魁星，道教尊其为主宰文运的神，作为文昌帝君的侍神。魁星信仰盛于宋代，从此经久不衰，成为古代读书人崇信最甚的神。
另外，古人认为北斗七星具有辟邪功效，北斗七星这种形式能够“聚气”，有了生气，就有了万物，预示着子孙万代繁衍旺盛。
实际上，高迁吴氏祖先们把山川形势与人的功利性需求和审美情趣结合在一起，把建筑、树木、水体、山势等自然环境要素都转化为理想的居住要素，通过合理规划改造赋予环境的象征功能来表达村民所追求的“天人合一”审美理想。