[Гильбарад]

при уничтожении Нуменора или в конце Второй Эпохи, остаётся неясным

Думаю, после войны Последнего Союза. После Акаллабет Саурон в Мордор на крыльях черного ветра вернулся. А Мордор вроде как не тайное убежище.