Я так думаю, что возле Изенгарда это не совсем через Изенгард. Т.е. достаточно близео, чтоб Саруман смог заметить отряд, но достаточно далеко, чтоб могли незаметно прошмыгнуть два хоббита.
Хотя, всё это за уши притянуто.