遺址位于日土縣日土村，距日土縣城20公里。據傳，城堡前身是’門人’，在形似大象俯臥的土山上所建的門卡。7世紀前，“嶺”國大將賢巴敏如澤在此山以東建立賢巴卡爾城堡，賢巴去世后葬于此。10世紀末，當地頭人昂巴在山頂西面建新密派卡噶佛殿，主供佛為密宗事部三枯主，殿內有精美的壁畫和《般若經》。元初，竹巴噶舉派依山而建日布丹佛殿，殿內有竹巴噶舉派大師塑像，墻壁偶靜猛天眾神的壁畫。15世紀(元末明初)，薩迦派在山以東建夏巴殿。17世紀，格魯派在山的中央部位修建倫珠曲典寺，在西坡建立分廟—果奴殿（尼姑廟）。17世紀初期，日土宗本在山坡最西邊建立宗政府城堡。18世紀，又修建主持堪布的拉讓宮殿，共有兩層。山下有朵蓋齊本的諸多建筑。此后統(tǒng)稱為瓊宗噶莫城堡，又因城堡的山體形狀與建筑布局與布達拉宮相似，故稱“小 ”。文革時期，當地群眾在墓葬中挖出賢巴尸骨及衣物、陶罐等陪葬品。