208 похожих чатов

Всем привет. Прошу сразу не пинать, вопрос наверное необычный для

группы.
Надо парсить сайт на битриксе. Парсинг белый, это поставщик, есть доступ в личный кабинет. Надо забрать цены и наличие из карточки товара. Фида или прайса нет.
Парсинг через headless браузер, но загрузка карточки по ссылке очень медленная. Пока разбираюсь, что так тормозит на сайте. Пробовал отключать загрузку изображений и скриптов , нет дает эффекта.
Вопрос.
Как после аутентификации на сайте, получить данные товара с запросом к бэкэнду, не загружая всю страницу? И возможно ли это вообще. Спасибо.

7 ответов

9 просмотров

Если есть доступ к сайту поставщика, то сделайте на нем специальный скрипт выгрузки данных в нужном вам формате (JSON,XML...) и не оперируйте гланды через Ж.

Антон Piletskiy
Если есть доступ к сайту поставщика, то сделайте н...

Мне кажется у него доступ только в лк, судя по описанию

Рыков Иван
Мне кажется у него доступ только в лк, судя по опи...

Ну тогда связаться с управлением этого поставщика и договориться сделать фид.

Alexⁿ- Автор вопроса
Антон Piletskiy
Если есть доступ к сайту поставщика, то сделайте н...

Если бы я имел доступ к админке, и тем более участвовал в разработке, то первым что было бы у оптовых клиентов это возможность забирать данные, через фид (* -форматы), API, рассылки и т.д. но имеем то, что имеем. Вопрос чисто технический, а не об организации бизнес-процессов в eCommerce

Alexⁿ
Если бы я имел доступ к админке, и тем более участ...

Через менеджеров\управление этого поставщика нельзя решить вопрос создания фида?

Alexⁿ
В процессе.

У них сайт висит скорее всего потому, что все клиенты ПАРСЯТ сайт и тем самым тупо его ддосят. В интересах самого поставщика оперативно сделать API\фид товаров, чтобы снять нагрузку с сервера. Это можно использовать как аргумент в переговорах.

Похожие вопросы

Обсуждают сегодня

А как старый хаскел с новым стыковать ? потому как тут работает https://play.haskell.org/saved/C3xpMzcd, а вот тут https://stepik.org/lesson/7602/step/9?unit=1473 нет ошибка C...
Fedor
131
Вопрос я правильно понимаю что в коде newtype ArrowMap k v = ArrowMap { getArrowMap :: k -> Maybe v } getArrowMap есть функция типа k -> Maybe v, если да, то не понимаю задач...
Fedor
64
Народ всем привет Подскажите, как включить самописные dll библиотеки в итоговую сборку Сейчас при запуске dev сервера локально формируется папка build, из которой запускается...
Андрей
4
Делаю велосипед логгер. К сообщению хочу прикрутить некоторую информацию, типа, кем отправлено, какой уровень, и всякое такое. И тут подумалось мне, почему бы не хранить весь...
Serjone
8
Как Вы считаете нормально ли в двадцатых годах 21 века в ВУЗах Российской Федерации обучать студентов работе с TASM? Не слишком ли это "архаично"? (Если оффтоп или флейм для э...
Spiker01
52
Доброе утро! Не совсем понятно как установить счетчик яндекс метрики на сайт. И потом ещё цели проставить?
Евгения
18
Продолжая диалог про свифт в проде – сейчас возник вопрос в активном наборе бекендеров. В основном в нашей компании мы фанаты Java Spring и полностью ей довольны. Однако найм ...
Guseyn
27
Я конечно собираюсь вдумчиво прочитать про условные переходы и так далее, но сейчас мне так лень Как сравнить 2 строки в ассемблере?
Alexey
10
Комрады, хотел уточнить. Проперть в OnDestroy юнита-хозяина по-прежнему доступна? И еще уточнение: finalization юнита наступает раньше или позже OnDestroy?
Ed Doc
48
Читаю сейчас [нет, уже больше не читаю!] курсовую о Булгакове, написанную, похоже, с помощью ChatGPT. Это удивительный психоделический опыт. Текст в основном написан в стиле б...
✨ Uni [🌊 В отпуске]
1
Карта сайта