170 похожих чатов

Ребят, привет есть тут те кто парсил тысячи страниц за раз? как

вы справлялись с блокировкой парсера?

8 ответов

9 просмотров

почему не используешь api? как именно твой "парсер" блокируют?

rasput
почему не используешь api? как именно твой "парсер...

потому что хауди хо эту тему еще не прошел бдм тсс

Витя- Автор вопроса
rasput
почему не используешь api? как именно твой "парсер...

парсю около 100 сайтов с ценами, апишки у них нет

Витя- Автор вопроса
rasput
с какой целью?

с целью сравнения цен

Витя
парсю около 100 сайтов с ценами, апишки у них нет

Парсю.. Ахаха > Софт Парсит, парсит Вот тебе замена

Статью где-то видел с fake user agent. Кажется, на Хабре: "Парсим мемы без блокировок" (или как-то так)

Похожие вопросы

Обсуждают сегодня

Типа вызывать GetParent и проверять на соответствие GetModuleHandle?
The Bird of Hermes
67
Do any of you guys have interesting projects one could join? I'm a Middle Full-Stack developer (JS/TS, React & Node)
Lev Shapiro
40
$res = json_decode($наша строка из респонса); $res1 = array_map(fn($o) => $o->name, $res->breadcrumbs[0]->entities); Как такое будет на Хаскеле?.. В начале весь джейсон, в ко...
Хаскель Моисеевич Гопник
27
В чем сила брат, в NASM или FASM?
Isaac Kleiner
18
Вопрос по диагностике ошибок (я знаю в чем, в данном конкретном примере, я знаю, как исправить, пример модельный, понятно, что в реальности бывает намного запутаннее). module...
ⰄⰎⰋⰐⰐⰑⰛⰤⰧⰧⰩⰄ ⰊⰑⰁⰓⰡⰛⰦⰕⰫ
11
Хтось використовував Vapor на Windows?
Jaroshevskii
15
Тут кста кто-нибудь NeoVim использует?
Simple Sorcerer
13
А чем вам питонисты не угодили?😂
.
79
Есть какой-нибудь для Delphi/FPC T*Compression(Decompression)Stream на базе LZ4/Zstd/любой другой быстрый(и хорошо сжимающий) алгоритм А ещё лучше в pure pascal А ещё лучше од...
notme
52
у меня вопрос на счет .global <name> для чего это нужно если я пишу на ассемблере? только для того что бы сделать это видимым для линкера? вот что написано в докумментации GA...
Simple Sorcerer
1
Карта сайта