瑟羅爾將地圖傳給了兒子瑟萊因。第三紀元2845年，瑟萊因帶著地圖和密門的鑰匙啟程、打算重返孤山，結果卻在半路上被索隆俘獲，落進了多古爾都的地牢裡。他在牢獄中受盡折磨，最後除了地圖和鑰匙之外，甚至連自己的名字都忘記了。第三紀元2850年，甘道夫闖入多古爾都、發現了已經被關押五年的瑟萊因，並從他手中獲得了地圖與鑰匙。瑟萊因囑託甘道夫把這兩件物品交給自己的兒子，隨後便與世長辭。
但是，因為瑟萊因早就神志不清，所以甘道夫根本不知道他的身份，更不可能知道他的兒子是誰：地圖因此在甘道夫的手中保管了近百年。直到第三紀元2941年，當甘道夫偶遇瑟萊因之子梭林時，他才意識到自己當初遇到的囚徒無疑就是瑟萊因。於是，甘道夫把地圖和鑰匙都交還給了梭林；而憑藉著地圖和鑰匙的幫助，梭林最終成功地收復了孤山。
這個問題的關鍵是甘道夫是如何得到地圖的？比較有趣的是甘道夫找到地圖的時候，這份地圖一直在瑟萊茵的手中，沒有被索倫和他的爪牙發現。為何索倫允許他在地牢中保存著這張地圖，有人會認為這是一個嚴重的失誤。按照常理來說瑟萊因應該被搜身，所有的物品應該被帶走了。
我想告訴你的是，這並非是劇情中的漏洞，實際上索倫帶走了他最想要的東西矮人之戒，所以甘道夫救瑟萊因的時候只有地圖與鑰匙，自從索倫得到了矮人力量之戒以後，他就認為這個矮人王沒有什麼價值了，所有的東西都不能和這枚戒指相比。也許索倫已經發現了地圖和鑰匙，並看到了孤山的地圖，他的計劃與地圖毫無關聯，他會認為是次要的事情。所以他沒有必要花那麼多精力去研究這張地圖。
瑟萊因一直被索倫關押在多爾多戈要塞中，他已經失去了自由，反正地圖也一直在索倫的掌控之中，無人可以拿走。一張地圖和鑰匙，也不是神兵利器，對索倫沒有什麼吸引力。
《中洲歷史》中有一段描寫甘道夫與佛羅多的交談，甘道夫說：瑟萊因不記得自己的身份了，就連我也不知道，他不知道矮人王經歷了怎樣的堅強意志將地圖和鑰匙一直保存著。因為這些東西對於索倫來說都是無關緊要的事情。