Похожие чаты

Всем привет! Подскажите, пожалуйста, сколько примерно уникальных товаров листится на

WB?

17 ответов

33 просмотра

я чуть больше 38 млн собираю с учетом размеров

Maxim-Borisov Автор вопроса
Андрей Чебунин
я чуть больше 38 млн собираю с учетом размеров

Спасибо за ответ! Мне казалось, что там побольше товаров (порядка 70 млн) А за какое время собираешь такой объем?

Maxim Borisov
Спасибо за ответ! Мне казалось, что там побольше т...

Мне тоже кажется, что там больше. Но нужно тестировать подходы с разных сторон, что бы обходить лимиты на выдачу товаров. Хз, может быть за часов 15

Андрей Чебунин
Мне тоже кажется, что там больше. Но нужно тестиро...

Офигеть. Не банят? Сколько прокси или задержка?

Erdeni
Офигеть. Не банят? Сколько прокси или задержка?

ВБ не сложный в плане парсинга, но свои нюансы есть)

Maxim Borisov
Спасибо за ответ! Мне казалось, что там побольше т...

Кстати там один товар может быть в разных категориях, поэтому общее количество всех товаро-размеров больше 92млн у меня выходит.

Maxim-Borisov Автор вопроса
Андрей Чебунин
Кстати там один товар может быть в разных категори...

Да, есть такое. Я имел ввиду уникальные товары Есть ли какой-то способ сразу парсить уникальные товары? Не проверяя дубли из хранилища

Михаил Синегубов
нельзя, в смысле - парсить без дублей.

Согласен, просишь всё. И уникальные только в базе данных уже группируешь.

Maxim Borisov
Да, есть такое. Я имел ввиду уникальные товары Ест...

В ссылке же nm_id, есть, разве нет? Проверили - если nm_id уже есть в базе, не нужно парсить, только отметить что в этой категории есть

Иван Батурин
В ссылке же nm_id, есть, разве нет? Проверили - ес...

ну, это то что бы "Есть ли какой-то способ сразу парсить уникальные товары? Не проверяя дубли из хранилища". Это как раз с проверкой на дубли 🙃

Maxim-Borisov Автор вопроса
parser.market
Перебором id? )

Это тип задать допустимый пулл/границы id и их парсить?

Похожие вопросы

Обсуждают сегодня

А как старый хаскел с новым стыковать ? потому как тут работает https://play.haskell.org/saved/C3xpMzcd, а вот тут https://stepik.org/lesson/7602/step/9?unit=1473 нет ошибка C...
Fedor
131
что насчет пагинга? на осдеве непонятно(
Vi Chapmann 🪙
26
Guys what is ur real (no jokes) expectation of link price during this cycle?
Hobbyist
28
hey everyone I'm not able to input come characters in my flatpak apps, they get ignored by the application. all other non-flatpak apps are fine with these characters. I search...
elo
20
>>> Failed to install app-alternatives/awk-4, Log file: >>> '/var/tmp/portage/app-alternatives/awk-4/temp/build.log' * Messages for package app-alternatives/awk-4: * Pa...
[cocoa] wizzy hell
1
Вопрос я правильно понимаю что в коде newtype ArrowMap k v = ArrowMap { getArrowMap :: k -> Maybe v } getArrowMap есть функция типа k -> Maybe v, если да, то не понимаю задач...
Fedor
64
Hey everyone! How's your weekend going so far?
Noah Noure
17
Hey, it seems like a solid project for the gaming industry. What are your initial thoughts?
Josh
26
Ребят, что лучше для реверса: гидра или ида?
En Vind Av Sorg
26
Делаю велосипед логгер. К сообщению хочу прикрутить некоторую информацию, типа, кем отправлено, какой уровень, и всякое такое. И тут подумалось мне, почему бы не хранить весь...
Serjone
24
Карта сайта