170 похожих чатов

Касательно скрапинга на puppeteer , а если данные в реальном

времени меняются, как тогда реализовать? То есть запускать скрипт в фоновом режиме?

13 ответов

18 просмотров
Reqms
Текст внутри div

я имею ввиду как часто меняется и что за данные конкретно (число, картинка, текст)?

Reqms
Число и текст внутри div , вот это не знаю как час...

1. точно ли нужен пупитер? нельзя ли через cheerio скрапить? Или напрямую апи дергать? 2. Если раз в 5-10 минут, и сайт один, то можно. Запуск пупитра дорогая операция как никак

А пррьовал просто использовать api сайта?

Reqms- Автор вопроса

нет доступа к api

Reqms
нет доступа к api

а как они тогда в риал тайм обновляются?

Reqms
нет доступа к api

я не имею ввиду публичное api. Но браузер пользуется же каким-то api чтобы получить данные

Reqms
а как это узнать

открой network в девтулзах

Reqms- Автор вопроса
John Doe
открой network в девтулзах

открыл обновил wss вебсокет так приходят данные

Reqms
открыл обновил wss вебсокет так приходят данные

ну вот подключайся к вебсокету и получай данные

Похожие вопросы

Обсуждают сегодня

А чем вам питонисты не угодили?😂
.
79
Есть какой-нибудь для Delphi/FPC T*Compression(Decompression)Stream на базе LZ4/Zstd/любой другой быстрый(и хорошо сжимающий) алгоритм А ещё лучше в pure pascal А ещё лучше од...
notme
48
type TObj = object procedure Init; virtual; end; TObj1 = object(TObj) procedure Init; override; end; procedure TObj1.Init; begin inherited; end; procedur...
Alexander 👋
29
Такой вопросец - есть функция function MySuperDuperConcat(const a: array of AnsiString): AnsiString; Как мне в её теле сделать вот так? Result:=Concat(a); А не грустный вариан...
notme
15
Всем привет, написал код ниже, но он выдает сегфолт, в чем причина? #include <stdio.h> #include <stdlib.h> #include <string.h> struct product { char *name; float price; };...
buzz базз
86
Нужен пулл реквест с хаммингберд + асинкхттпклиент или хаммингберд + юрлсессия?
Karl {🌪️}{🐊} Shinobi
7
Всем привет. Поделитесь, пожалуйста, опытом. Есть форма, на которой имеется dbgrid и кнопки: добавить, редактировать, удалить. Если нет записей в dbgrid, то кнопки редактирова...
Евгений
5
может там как раз сжатие?
Дмитрий
7
Как структуру (из MSVC) в которой описаны битовые поля описать для fasm? Вот например это (fBinary...fDummy2 - это физически 1 DWORD): typedef struct _DCB { DWORD DCBlength;...
Евгений
3
type TExtensions<GExtender>=class function GetExtension<GEntityExtenderType>:GEntityExtenderType; end; function TExtensions<GExtender>.GetExtension<GEntityExtenderType...
zamtmn
9
Карта сайта