Используя библиотеку requests не получится ведь асинхронно парсить сайт?

https://ru.stackoverflow.com/questions/445768/%D0%9C%D0%BD%D0%BE%D0%B3%D0%BE%D0%BF%D0%BE%D1%82%D0%BE%D1%87%D0%BD%D0%BE%D0%B5-vs-%D0%B0%D1%81%D0%B8%D0%BD%D1%85%D1%80%D0%BE%D0%BD%D0%BD%D0%BE%D0%B5-%D0%BF%D1%80%D0%BE%D0%B3%D1%80%D0%B0%D0%BC%D0%BC%D0%B8%D1%80%D0%BE%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5

0

26.04.2022

🇺🇦 | osumico | 🇺🇦

NR
Действительно, зачем быстрее получать данные

Парсинг разный бывает, и если ты скрапишь просто небольшую информацию с небольших страниц, и делаешь это много. Тогда да, асинк имеет место быть. Хреначить асинк код везде где только можно это плохой звоночек. Стоит это обговорить просто заранее для понимания что ты знаешь что такое асинк, синк, поток и многопоток. Асинхронность кстати может стать твоим самым крутым ночным кошмаром при отсутствии понимания как с ней работать, и правильной организации асинк софта. Это так, к слову.

0

26.04.2022

NR Автор вопроса

🇺🇦 | osumico | 🇺🇦
Парсинг разный бывает, и если ты скрапишь просто н...

По ссылкам на сайте нужно было переходить, потом с них получать информацию, тут явно в асинхронности есть смысл, как по мне, т.к. более 15 раз нужно отправлять запросы на разные страницы(в дальнейшем больше будет🥲). Базовые понятия многопоточности и асинхронности есть уж.

0

26.04.2022

🇺🇦 | osumico | 🇺🇦 · Accepted Answer

🇺🇦 | osumico | 🇺🇦

А зачем тебе асинк парсинг сайта? Ну ты можешь использовать стэк aiohtpp, asyncio и bs4, если прямо асинк парсинг нужен

0

26.04.2022

170 похожих чатов

Используя библиотеку requests не получится ведь асинхронно парсить сайт?

8 ответов

Похожие вопросы