в чем проблема? забанили по айпи за дудос? как всегда: прокси, паузы между запросами.
Не, они отдают страницу: "защищено Cloudflare через 5 секунды вас перенаправят"
Некоторые сайты отслеживают поведение. Некоторые отдают js, который считает какую-то херню, и только потом перенаправляет на сайт
кто мешает парсить селениумом / пупитером?
Некоторые сайты отслеживают их использование с помощью web-driver флага. Или как называется эта херня уже забыл. Короч если захотят защититься, они защитятся
https://stackoverflow.com/questions/53039551/selenium-webdriver-modifying-navigator-webdriver-flag-to-prevent-selenium-detec
Обсуждают сегодня