现在还有2000多居民在里面居住，这一点与印度其他给改成斋沙默尔堡博物馆的古堡很不同。因为有居民和游客，古堡结构受到极大的威胁，难怪世界文化遗产基金会曾经3次将斋沙默尔堡列入全球100个濒危古迹之中。斋沙默尔是印度最西部的大城市，再往西100多公里就是巴基斯坦，地处沙漠地区，整个城市的建筑多以黄色的砂岩修建，于是有"金色之城"的称号。中世纪是丝绸之路上重要的都市，1156年由斋沙默尔王开始在山丘上修建城郭，经过800年的累积与善用沙漠地利之便，建成易守难攻的斋沙默尔堡，以黄色砂岩建造的城堡耸立在城内山上。