Говорят, это одно из самых больших зданий в мире. Даже если ты живёшь там в течение многих лет, все секреты этого здания узнать невозможно. Оно полностью покрывает верхнюю часть холма. Это целый город.
Строительство его было начато царём Тибета 1300 лет назад, когда это был просто домик для медитации. Этот домик был существенно расширен Пятым Далай-ламой в ХVII веке. Центральная часть современного здания, имеющего высоту тринадцать этажей, была построена по его указаниям, но он умер, когда здание достигло лишь второго этажа. Поняв, что он вскоре умрёт, он велел премьер-министру хранить свою смерть в тайне, поскольку опасался, что, если бы народ узнал, что он умер, строительство остановили бы.
Премьер-министр разыскал монаха, который внешне напоминал Далай-ламу, и преуспел в сокрытии его смерти на протяжении тринадцати лет, пока работа не была завершена. Но втайне он сделал камень, покрытый молитвами о скорейшем перевоплощении Далай-ламы, и камень этот был вмонтирован в стену. Его и сейчас можно видеть на втором этаже дворца. Эта центральная часть здания имеет большие залы для церемоний, около 35 часовен, богато украшенных и расписанных, четыре кельи для медитации и мавзолеи семи Далай-лам. Некоторые из них достигают высоты 30 футов и покрыты золотом и драгоценными камнями.
Западное крыло здания, которое было пристроено позже, являлось жилищем для 175 монахов, а в восточном крыле находились правительственные офисы, школа для монахов, выполнявших официальные функции, и залы Национальной ассамблеи, то есть тибетского парламента.