requests в python? Чтобы работал везде
Дефолтный обычно работает
Я тут кино глядел, там тоже сперва вежливо просили, а потом голову коня в кровать подбросили. Аккуратнее там.
Обычно да, но вдруг сайт решит обновиться, поэтому хотел уточнить есть ли смысл сразу указывать в параметрах или нет (в этом случае можно не указывать)
Смотрят стату, там кто-то шлет со стандартного для питона user_agent (спасибо @MrSmitix) и решают, что теперь для парсинга будут доступны только определенные, т.е. браузерные, например. Так, думаю, понятно объяснил актуальность вопроса
User agent нужен чтобы идентифицировать с какого ПО происходит запрос. Сайт вполне может отдавать разный контент для разных браузеров, это лично его желание и рассказать об этом может только владелец/разработчик сайта
Тогда получается, что универсального нет. Тем более нет смысла его добавлять, если работает))
Ага там для css немного разное, есть специфические под мозиллу
Ну иногда по этому принципу тебя могут не пустить. Просто иногда бывает...
Ну банально для мобильных браузеров могут выдавать урезанную страницу, так как все равно экран мелкий
Ой да там, совсем по другому зачастую стоит
Да, понял. Если что тогда укажу какой-нибудь стандартный кроссплатформенный набор браузеров
Обсуждают сегодня