170 похожих чатов

Привет, нужно спарсить Стим и его торговую площадку, правда вот

обновляется дата там очень быстро, быстрее секунды, как вы думаете, питон потянет?

25 ответов

36 просмотров
Pasha-Manokhin Автор вопроса

Либо сортировать объявления, ибо я сомневаюсь что бот сможет спарсить так много инфы и + отправить через бота

Да, в чем проблема

Pasha-Manokhin Автор вопроса
denis
Да, в чем проблема

Типо, более 10 объявлений в секунду будет, и 10 коллов на отправку через бота, просто я тут муваюсь с крестов, и слыхал что путон прямо ооочень медленный

denis
Миф

Processing...

Pasha-Manokhin Автор вопроса
denis
Миф

Про медленный питон? Ну не сказал бы что миф, по сравнению с крестами

Pasha Manokhin
Про медленный питон? Ну не сказал бы что миф, по с...

По отношению к парсингу и складыванию в базу это миф

agama
Processing...

У тебя прикольная первая ава

Pasha Manokhin
Типо, более 10 объявлений в секунду будет, и 10 ко...

Питон очень медленный, но ты скорее всего этого не заметишь как и 90% разработчиков. И ещё 9% разработчиков это замечают, но знают, что это не та проблема, которую надо решать

Pasha Manokhin
Про медленный питон? Ну не сказал бы что миф, по с...

Об этом уже миллион раз говорили: 1 правильно подобранные алгоритмы и структуры данных дают больший прирост производительности, чем просто использование компилируемых языков. 2 Условный код на питоне медленее аналогичного на c. Но там где нужна скорость ты будешь использовать что-то типа numpy у которого внутренности на C написанном очень опытными разработчиками

Pasha-Manokhin Автор вопроса
Alex
Об этом уже миллион раз говорили: 1 правильно подо...

Да понял уже. Просто было уже такое что челикс путон для игр юзал, тоесть беда с башкой

Конечно потянет. Допустим каждую секунду шлешь запрос, смотришь какой ид трейда был последним (например 105) и кидаешь их куда-то во временное хранилище Отправляешь еще один запроси и видишь - последний трейд с ид 120, значит за секунду прошло 15 трейдов Ну и ничего сложного чтобы из словаря вытащить эти 15 обменов между новым и старым словарем

Pasha Manokhin
Быстрее секунды)

А пользовательское соглашение стима это разрешает?

Pasha-Manokhin Автор вопроса
Alex
А пользовательское соглашение стима это разрешает?

Так я просто беру инфу с торговой площадки скинов, обычный парсер

Pasha-Manokhin Автор вопроса
Vadim
Конечно потянет. Допустим каждую секунду шлешь за...

ОЗУ думаю как временное хранилище пойдет

Pasha Manokhin
Так я просто беру инфу с торговой площадки скинов,...

You may not use Cheats, automation software (bots), mods, hacks, or any other unauthorized third-party software, to modify or automate any Subscription Marketplace process or the process of Steam account creation. @Tishka17

Alex
А пользовательское соглашение стима это разрешает?

Там апи есть, если он без апи это будет строить, сделает велосипед

Vadim
Там апи есть, если он без апи это будет строить, с...

вот пусть и использует официальное API.

Pasha-Manokhin Автор вопроса
Alex
You may not use Cheats, automation software (bots)...

Так ало ало я с сайта инфу беру

Pasha Manokhin
Так ало ало я с сайта инфу беру

разница между тем, что ты в браузере что-то сам делаешь и тем, что делает автоматизированный скрипт все таки есть

Pasha-Manokhin Автор вопроса
Nero
разница между тем, что ты в браузере что-то сам де...

Хм, ну да, но я буду апи юзать, так шо всё ок

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта