170 похожих чатов

А в принципе 22 минуты на 100тыс записей из csv

это нормальное время, никого не удивит?

11 ответов

10 просмотров

a time.sleep(5) обязателен ? Нельзя просто время прибавить?

Монохром
a time.sleep(5) обязателен ? Нельзя просто время п...

Если нет, выглядит как нечто, где может несколько помочь асихнронное программирование

Сергей- Автор вопроса
Монохром
a time.sleep(5) обязателен ? Нельзя просто время п...

возможно, но это тоже не больше минуты ограничений по времени как таковых нет, просто подумал в принципе время около 20 минут покажется диким, но сейчас кажется на питоне сильно лучше и не сделать..

Сергей- Автор вопроса
Dmitrii Demenev
Если нет, выглядит как нечто, где может несколько ...

обрабатывать части файла параллельно и потом собирать?

Сергей
обрабатывать части файла параллельно и потом собир...

Ну хотя бы не блокировать на 5 секунд в цикле

Сергей- Автор вопроса
Dmitrii Demenev
Ну хотя бы не блокировать на 5 секунд в цикле

если одновременно обрабатывается только один файл это несущественное улучшение, думал речь о параллельной обработке (но не уверен что корректно смогу ее написать)

Сергей- Автор вопроса
Konstantin Peskov
А что обрабатываешь ?

Какие-то данные, большинство нужно захешировать но часть нет (что нужно указано в order)

Сергей
Какие-то данные, большинство нужно захешировать но...

Что у тебя за алгоритм хеширования такой

Сергей- Автор вопроса
Konstantin Peskov
Что у тебя за алгоритм хеширования такой

Думаешь дело в нем? Надо замерить и правда, сколько будет писаться если его заменить на тождественный (return s)

Похожие вопросы

Обсуждают сегодня

@MrMiscipitlick А можешь макрос написать, который будет вычислять смещение относительно переданных меток? Просто .label1-.label2, и вернуть значение.
КТ315
35
я не магистр хаскеля, но разве не может лейзи тип конвертнуться в не-лейзи запросив вычисление содержимого прям при инициализации?
deadgnom32 λ madao
100
А еще в перле можно уже @arr1 + @arr2?
Sergei Zhmylove
53
Заметил в ghci 9.4.8: > :t (<*>) @((->)_) (<*>) @((->)_) :: (w -> (a -> b)) -> (w -> a) -> w -> b Разве не должно (w -> (a -> b)) быть записано как (w -> a -> b)? Это баг, ил...
Михаил
13
Привет всем. появился вопрос. Разрабатываю сайт, в данный момент он запущен. Хостинг beget. Добавляю на сайт яндекс метрику с помощью полей client-settings (взято отсюда http...
Andrew
2
Подобного рода ;Следующие три строки это директивы ассемблера, ;которые можно не задавать, т.к.работаем в Visual Studio. ;Символ ";" - это начало однострочного комментария ...
Егор Анелькин
3
Any electron dev here?
Sayanth Tezro
12
Подскажите, где смотреть результат выполнения программы? Код: ;.686 ;Система команд процессора 686 ;.MODEL FLAT,stdcall ;Модель памяти плоская, станда...
Егор Анелькин
5
так это может кто что знает или использует что-то как макбук только не макбук? на 13…14 дюймов
Michael
9
;.686 ;Система команд процессора 686 ;.MODEL FLAT,stdcall ;Модель памяти плоская, стандартный ;вызов процедуры ;option casemap:no...
Егор Анелькин
1
Карта сайта