贡觉群培的意思是应该在红山建造一个政教合一的行政中心，作为西藏的最高象征，以长久地治理稳定西藏。在达赖五世看来，林迈夏”仲贡觉群培大师从宗教方面与文殊菩萨无别，从世俗方面论，其智慧又可与大梵天相媲美”，其言正合达赖喇嘛之意。于是，在1645年，（藏历第十一饶迥之木鸡年）四月初一，布达拉官白宫部份开工奠基，“在此以前的日子里，狂风不时大作，从当天起，晴空碧霄，连一丝微风都不曾吹起，虹光四射，白云萦绕，美不胜收，贵贱人等都亲眼目睹花雨飘落，出现了奇异的瑞兆。……开始挖出的都是油质土，后来出现的都是白土。”《五世达赖喇嘛自传》三年后，白宫建成，就是达赖喇嘛的西藏地方政权甘丹颇章的首府和达赖喇嘛的生活起居之处。建筑布达拉的总指挥是第悉"桑结嘉措，当时甘丹颇章政权的格局是达赖喇嘛主管宗教事物，第悉主管政务。第悉"桑结嘉措是第五任第悉。１６８２年，达赖五世圆寂，为了安放达赖五世的灵塔，第悉又主持修建了红宫及其主体建筑“世界——庄严”金塔。红宫于（１６９０年）（藏历第十一饶迥铁马年）二月二十二日奠基。当时西藏最杰出的匠人参加了红宫的修建。历史记载，这些民间工艺领袖包括石匠大头领甲门塔杰、木匠大头领奈萨瓦"江央旺布、木雕大头领白朗"贡布、铜匠大头领罗巴"莱甘巴、金匠大大头领旺秋、金属雕花大头领欧珠、铸造大头领交热"顿株、画匠大头领门汤画派的洛扎巴"丹珍诺布和钦仁画派的桑阿卡巴"曾培、泥塑大头领群培、铁匠大头领仓巴、泥匠大头领甲日赞丹、缝纫大头领拉萨热孜夏"索南、颜料制作大头领江夹顿珠……等。还有康熙大帝从北京派来的汉族工匠一百一十四人，尼泊尔工匠一百九十一人，每年召集５７７０名差役，可以想象这个工程在当日是一个多么伟大的场面，大师云集，能工巧匠如千军万马。１６９４年藏历水鸡年4月２０日，红宫竣工，共修建了三年零两个月。后来又经过历代的小规模扩建、维修，布达拉宫形成了今日的格局。它已经不是某个独一无二的设计师或工匠的作品，作者已经匿名，它是神的建筑。红山海拔３７６３.５米布达拉宫主楼高１１５.７米。红宫顶上有七个金顶，作为宗教建筑，比作为行政中心白宫略高。红宫从外面看上去十三层，里面其实有九层。除了红白二宫，其他建筑还有：扎仓、扎厦、僧官学校、藏军司令部、印经院、监狱、骡马圈、供水院等、建筑的秩序格局暗示着宗教和政治等在西藏的不同地位。在藏传佛教信徒心目中，布达拉宫就是普佗山，因为他们相信达赖就是观音转世，它从一开始就是一个圣殿。布达拉宫复活，“世界——庄严”金塔，屹立于世界之最高原。

这伟大的宫殿看起来不像是建筑物，而是一座红白相间的山峰。它是从大地上生长出来的，依顺着山的形势生长，与世界上大多数宫殿的傲慢设计不同，就是今天，历尽沧桑，布达拉已经成为西藏世界最复杂的象征，其立足点也没有脱离大地。这宫殿一开始就起源于把大地作为神灵的寓所加以敬畏的思想，是依附于它，而不是居高临下的解放它。传说历史上有人曾经见过布达拉宫的图纸，但今天没有下落。我宁愿相信这个伟城的诞生依据的是内心的指引和经验，它已经存在于建造者的心中。也可以说布达拉宫的图纸就是红山，它是依顺着大地和信仰而生，它不是趾高气扬地改造、重新设计大地，大地是它开始的图纸，而信仰指引它抵达。“依山而建”，说起来好像很平常，其实里面隐藏着深刻的建筑思想。20世纪以来世界最时髦的后现代建筑理论认为，建筑是一种可交流的语言，建筑应当尊重现有环境，历史和传统，并强调建筑的精神性、形而上的隐喻和象征力量。布达拉宫正是依顺环境，顺其自然，尊重历史，而又具有巨大的独创力量和象征体系的伟大建筑。