8 утра до сейчас - из них 239949 это
"Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)" что за ниф-ниф-наф-наф как лечить и кто сталкивался?
Может кто-то прикинулся по user-agent?
Я бы посмотрел ip и поискал бы яндексовский диапазон чтобы выяснить яша это или нет. Можно так ip глянуть, будет либо один ip, либо сильный разброс из-за прокси У ящи все в диапазоне
чекнул пару ip - верифицированные яндекс(
вот тоже думаю...... но пару чекнули - яша...(((
Тогда остается писать платонам, чтобы получить в ответ ссылку на какой-нибудь crawl-delay
логично..... хотя уже и руками поставил в вебмастере на минималку краулинг... там 0,2 запроса в секунду.
Обсуждают сегодня