Короче, кто занимается веб-парсингом? Это не совсем парсинг, но, вот в чем дело. Мне нужно получить весь материал с сайта. Сайт с автодогрузкой по скролу вниз. Варианты, которые пробовал - Сделать автоскрол (не работает) - Пытался отловить код, который отвечает за подгрузку (не вышло). Динамический веб. Если есть решение задачи, какие они могут быть? Возможно такое, чтобы скачивать html и от туда парсить инфу, но, я не пробовал и что-то подсказывает, что так тоже не выйдет. Мне нужно догрузить сайт с материалом до конца, после селениумом соскрести весь материал (не важно какой)
получи html какой есть потом сделай запрос на сервер для получения всех данных запихни данные в html по шаблону
А есть, где об этом можно почитать
Обсуждают сегодня