接下来的两百年里，此地的邪恶不断增长，要塞中邪物的力量也愈发壮大。奥克在迷雾山脉等地渐成规模；那兹古尔之首安格玛巫王在北方荒原建起卡恩督姆要塞，对阿尔诺发动旷日持久的战争；墨瑞亚和米那斯伊希尔相继陷落。在战乱、瘟疫和天灾轮番上演时，甘道夫于第三纪元2063年来到多古尔都，试图解开此地之谜。盘踞此地的所谓死灵法师迅速逃离，甘道夫没能查清他的身份。此后这股邪恶许久未现，使中洲在数个世纪的和平时光中得以喘息。
这段持续近四百年的和平时光被称作警戒和平，自由万物得以休养生息，但那兹古尔也利用这段时间为索隆的回归作好了准备。第三纪元2460年，邪物重回多古尔都，因故智者于三年后建立了白道会。加拉德瑞尔希望甘道夫出任白道会的领袖，但最终这个位置被萨茹曼谋得——虽然萨茹曼的确知识更渊博，但其主要原因还是甘道夫拒绝出任。甘道夫不想为要职所累，更毫无扎根某地的打算。
在埃里阿多漫游期间，甘道夫在夏尔发现了与世无争的霍比特人，并开始和他们相熟。在第三纪元2758年的漫长冬季，甘道夫曾来帮助他们。也就是在那时他发现了此后为他长久称道的，霍比特人们骨子里的坚韧。
孤山矮人之王瑟莱因二世前往他失去的王国时，却在路途中离奇消失。此后甘道夫不断寻找他的去向，并在第三纪元2845年之后的某个时候进入了卡扎督姆，最终一无所获地自都林之门离开，因此，虽然他穿越过都林之门，但并不清楚进入此门的方法。
直到第三纪元2850年甘道夫第二次来到多古尔都，矮人王失踪的谜团才水落石出。甘道夫秘密潜入要塞，在地牢里找到了奄奄一息的瑟莱因二世。瑟莱因将孤山秘门的钥匙和地图托付给他。同时，甘道夫就此查明，盘踞多古尔都的所谓死灵法师并非那兹古尔之一，而是索隆本人。很明显，索隆正在搜寻众戒，可能还包括他失去的至尊戒；而从瑟莱因身上，他已经夺得了矮人七戒中的最后一枚。
甘道夫从多古尔都脱身，并将他的发现报告白道会。他敦促白道会，应趁索隆羽翼未丰，而至尊戒又未寻获之时进攻多古尔都的暗影，但萨茹曼却提出白道会最好静观其变，而至尊戒也早已被安都因河带入大海。萨茹曼的发言最终获得了多数同意，但半精灵埃尔隆德随后私下对甘道夫说，他预见到至尊戒将被寻获，而这个纪元将在大战则即将来临。埃尔隆德还说，他担忧这个纪元的终结将陷于黑暗和绝望。甘道夫宽慰他道，世间仍有许多机缘，而“当智者兀自犹疑不决，援助往往来自弱者之手”。甘道夫此时并不清楚，萨茹曼的真正意图乃是要将至尊戒据为己有；实际上，他已在安都因河沿岸展开搜寻。