код ответа 200.
Уже включила игнор роботса, добавила сайт через authentication - form based. Результата ноль)
Что нужно сделать?
Что-то с сервером, видать... А вот что...))
Поставила рендеринг через джаву, вроде помогло)
Юзер агента поменять иногда помогает, на что-то немного более экзотичное, типа Байдубота.
Обсуждают сегодня