Именно запросами к API парсят?

Question

Про парсинг

parser.market

Именно запросами к API парсят?

0

30.08.2023

11 ответов

17 просмотров

Андрей Чебунин

Но те же стоки, там помоему только запросом к api можно получить

0

30.08.2023

parser.market Автор вопроса

Андрей Чебунин
я вот этого не знаю..

Может, Вы в давно закрытую дверь стучитесь?

0

30.08.2023

Андрей Чебунин

Может быть) Но не бросаю, так как с моего IP работает.. Я изначально и предполагал, что дело в прокси, но перепробовав разные от индивидуальных, до резидентских - результат не получил

0

30.08.2023

Михаил Ножков

Андрей Чебунин
Может быть) Но не бросаю, так как с моего IP работ...

Самокат - он "хитрый", там проверка на соответствие токена и deviceId (они его сами генерял) - что-то в headers, что-то в куках. + частая смена в сеансе. Месяц назад делал , всё актуально. + будет отдавать неверные дынные, если нет опыта работы с именно этой веб оберткой (по факту - это приложение)

0

30.08.2023

555

Михаил Ножков
Самокат - он "хитрый", там проверка на соответстви...

какие палки в колеса для парсеров только не придумают. а на западных сайтах такое есть? например на ебей есть какие то защиты?

0

30.08.2023

Андрей Чебунин

Михаил Ножков
Самокат - он "хитрый", там проверка на соответстви...

Да, я уже понял, что это веб приложение.) Про токен и девайс ид тоже знаю. Я же говорю, что всю логику уже написал) Получение токена и остальных нужных параметров. Все работает запросами (установка адреса, получение инфы по товарам, остатки). Единственное, ID товаров я через селениум выдергиваю, так как не нашел запрос такой, который подгружает товары. То есть, у тебя сейчас нормально собирается запросами?

0

30.08.2023

Михаил Ножков

555
какие палки в колеса для парсеров только не придум...

Не думаю, что это именно защите "от парсинга", скорее так работает само приложение, оно ведь для мобилы, а не для веб изначально.

0

30.08.2023

Михаил Ножков

Да, всё работает.

0

30.08.2023

Андрей Чебунин