То есть, краулеры шарахаются по несуществующим страницам, проверяя, не начали ли они существовать. Эти страницы отсутствуют на сайте, на них нет ссылок, их нет в сайтмепе. Где ещё можно искать источники таких ссылок?
внешние ссылки я бы проверила
Ахрефс ничего не находит. Яндекс с гуглом тоже. Что может найти?
нинаю. Может, это страницы какой-то древней структуры?
Ну да, они были года два назад. Потом их удалили. Сначала ссылки на них, потом и их
Че за CMS? Мб где-то в черновиках остались? Или в архиве страниц?
переждать наш выбор)
А обход по счётчикам может к такому приводить?
нет, я думаю что ещё тогда эти страницы закинуло в условную очередь, а сейчас руки у бота дошли, могу ошибаться но видел подобные ситуации много раз
о, интересная гипотеза. 2 года в очереди
мы тут вчера решили схожий гемор, хоть и не как у тебя. Несколько лет боты переобходили товары со ссылками без / на конце и выливали тысячи редиректов, что логично. Перешерстил все, куда фанатзия завести могла. Утомил прогера, владельца и всех вокруг. А вчера при переписывании одного плагина обнаружили, что это все ссылки из оптового ексель файла, которые так генерились😁
а по товему вопросу у нас было такое. Яндекс вкидывал пачки страниц из структуры, которую сменили 2 итерации назад, году в 12-13. Просто пачками залетало, переобходилось, залетало в ошибки и через несколько месяцев вылетало
Оптовые эксель файлы наша тема. У нас больше 200 человек заливает оптовые эксель файлы Т_Т
попериписывался с платонами и забил
Само отвалилось?
Обсуждают сегодня