都灵在远古时期建立矮人深洞，更在太阳和月亮出现之前。在精灵苏醒之后不久，都灵也在刚达巴山苏醒，在矮人祖先中是最年长及被誉为最优秀的。作为凯萨督姆的领主，其子民继承摩瑞亚领主之职。
都灵族矮人自刚达巴山“向安都因南方迁移”，经常遭受半兽人的袭击。根据传说，都灵最终找到“两座大山间的峡谷，谷上有三座巍峨的白色山峰”。在这个浓密多木的山谷，大量河流会聚于一个椭圆形的湖，出现了不可思义的景观：“这里的景色如宝石沉在闪闪星光里，即使艳阳高照时亦是如此”。这些星星作为他王冠上的图腾，都灵将它作为吉祥图象，并将该湖命名为镜之湖。
都灵选择在镜之湖之上的地方挖掘洞穴，作为他的府第：凯萨督姆，“矮人深谷”。在都灵在生的时期，这里发展非常迅速，直至成为中土大陆矮人最大的居所。该地的名声以提高并非因为神圣的都灵，也并非矮人深洞的庞大，而是因为这里的财富，这里蕴藏着昂贵的秘银，在中土大陆只在这里找到秘银。
第一纪元末
矮人深洞并没有参与贝兰多战役，因此凯萨督姆得以从第一纪元末半兽人肆虐中休养生息。凯萨督姆的矮人依然与其他六个矮人部落保持联系。当人类抵达罗马尼安，凯萨督姆的矮人迅速与他们进行贸易，以矮人的冶金石工产品换取粮食，互惠互利。
第二纪元
在贝兰多摧毁后四十年，大量失去家园的诺格罗德和贝磊勾斯特的矮人来到凯萨督姆，使凯萨督姆的力量大为增加，而半兽人亦有更优良的武装及人数庞大、攻势更残暴、凶猛及不顾一切。
虽然矮人是人族中最可怕的战士，但矮人们也很高兴和人类缔结同盟”。凯萨督姆矮人的重装步兵和人类的马骑弓兵结合起来，能更有效地抵抗半兽人，使凯萨督姆矮人在顾虑铁丘陵、伊瑞德米斯林等领地的情况下仍能在迷雾山脉中部、北部及以东的土地占有优势。人类为了巩固他们的土地，愿意协助凯萨督姆矮人。
第二纪元约700年，凯萨督姆以西的伊瑞詹被建立，凯萨督姆矮人和精灵的友谊开始建立，这促使凯萨督姆的建设向西扩展，矮人的居住地位于东部，西部通道被打通。诺多族精灵凯勒布理鹏以秘银代表那维刻字，于碑文上书：“我那维建造了摩瑞亚西门，凯勒布理鹏以此为记。”
精灵也介入了凯萨督姆的建设，使凯萨督姆“变得更美丽”，一些因惧怕矮人而从安都因河西部撤离的精灵也在凯兰崔尔在凯萨督姆东面建立罗斯洛立安后返回。
除了一些位置较高的坑道内装有窗户，整个凯萨督姆都被水晶灯照亮。每一层都有大量的拱形通道，屋室和殿堂，多为“黑色的墙壁，光亮平滑如玻璃”。低层多为矿洞、宝库和牢狱。更低的地方是原始的黑暗坑道，有一些不知名的生物生存。极少人见到这些生物，也没有有关生物的描述。
凯萨督姆其中一个特点是它的防御建筑，如都灵之桥，“细长的石桥，没有栏杆”，桥下是五十步阔的深渊。传说有无尽之阶，由凯萨督姆深渊通往山峰。
凯萨督姆的出口已知有两个，一是那维所造的西门，二是东面已有的闸门，这使凯萨督姆在第二纪元中的精灵与索伦之战争免遭入侵。黑暗魔君索伦攻陷精灵领地伊瑞詹，却遭凯萨督姆矮人突袭，矮人随即撤回牢固的西门内。此后，索伦相当讨厌凯萨督姆，命令半兽人侵扰凯萨督姆矮人，“凯萨督姆的殿堂太深，并有大量勇敢的矮人守备，索伦难以攻占”。尽管如此，凯萨督姆的矮人因缺乏人类的粮食提供而逐渐减少。
第三纪元
索伦失败，凯萨督姆稍微恢复过来，但在1300年后再受到半兽人的袭击。虽然凯萨督姆矮人未受致命性打击，在这时，秘银的蕴藏量已显贫乏。第三纪元1980年，矿坑的开采过于深入，触发了一股强大的邪恶力量。这一年，魔王的炎魔击杀都灵六世，并于次年击杀他的儿子耐恩。矮人无法击败甚至赶走炎魔，被迫撤出凯萨督姆，重回孤山，凯萨督姆被遗弃，凯萨督姆始被精灵称为摩瑞亚，自此，迷雾山脉的半兽人以摩瑞亚为家，并受索伦支配。
第三纪元2790年，受到恶龙史矛革的唆使，都灵后裔、孤山国王索尔不理会劝谏，尝试进入古老的家园。他被半兽人首领阿索格杀害，这次谋杀促使矮人与半兽人之战争的爆发，摩瑞亚东部的南都西理安之战更持续了九年。矮人取得胜利，丹恩二世•铁足砍杀阿索格。
然而，矮人亦遭受重大损失，也不愿意对抗炎魔。伤亡之多使矮人没有土窖埋葬尸体，只得火化。为了支撑战争虚耗，阿萨努比萨峡谷的树林遭砍伐。战胜后，索尔的儿子索恩二世尝试重新进入摩瑞亚，但丹恩‧铁足阻止了他，并预言已有矮人以外的力量进入摩瑞亚。
接近第三纪元末，矮人巴林率领同伴，打算重建摩瑞亚。开始时颇为顺利，但约五年后遭半兽人攻击。魔多使者曾两度会见丹恩国王，要求协助寻找神戒，如果答应，索伦会归还其中三只矮人七戒及摩瑞亚领地。国王最终拒绝了这个建议。