214 похожих чатов

Господа профессиональные программисты, на сколько стоит заморачиваться при обработке огромного

объёма данных оптимизацией размера пачки, которая приходит на обработку?(происходит запись в файл)

3 ответов

7 просмотров

Если есть оценка того, насколько быстро должна происходить обработка объёма, то стоит

Егор-Пантюхов Автор вопроса
Andrew Alpashko
Если есть оценка того, насколько быстро должна про...

Конкретно при записи в файл, если у нас например 50-80млн строк, +- сколько выиграется времени, если я буду писать сразу пачкой, а не вызывать на каждую строку функцию записи?

Егор Пантюхов
Конкретно при записи в файл, если у нас например 5...

Могу сказать, что на своём практическом примере такое кеширование даже небольших пакетов бинарных данных дало выигрыш в десятки раз относительно некешированной. Но во многих современных языках, в том числе .Net языках, например, есть уже много средств для этого. В целом сейчас в наше время факторов, влияющих на скорость записи, очень много,и тут нужно уже конкретное ТЗ

Похожие вопросы

Обсуждают сегодня

Всем привет, написал код ниже, но он выдает сегфолт, в чем причина? #include <stdio.h> #include <stdlib.h> #include <string.h> struct product { char *name; float price; };...
buzz базз
75
Коллеги, доброе утро. Запустил на удаленном хосте приложение (ручками зашел туда по ssh и запустил, не командой удаленно). Создал потом ssh-туннель, и с моей машины приложение...
Δημήτηρ
9
Всем привет, подскажите/посоветуйте пожалуйста. Фаердак компоненты, имею одно место где бизнес хочет видеть при открытии формы список всех клиентов, это порядка 30к. Мои дово...
Sasha Sch
14
Ребят, если кто в курсе - скажите, а в загранке такое же засилье маркетплейсов? или там простые сермяжные интернет-магазины живут попроще?
Андрей [aharito] Харитонов
11
Хотел бы спросить у знающих, правильную ли я выбрал книгу для начала изучения ассемблера Юрова В.И ? Или есть более лучшие книги для начала обучения?
Botsman
31
Добрый день, не подскажите, если в OC-V3 поменять страндартную директорию /storage/ на /storage2/ - не будет сильно много проблем ?
Max Dubovsky
32
А как лучше конвертировать физический адрес в виртуальный при маппинге? В случае ядра у меня, например, direct mapping, первые 768МБ я как есть мапплю в higher half, а остальн...
Evg Resh
10
$params = [ 'formid' => 'feedbackForm', 'formTpl' => '@CODE: <form class="form-validate" data-id="ajax_form"> <fieldset class="margin-bottom-md"> ...
Pathologic
1
'frakturBold' => ['𝖆', '𝖇', '𝖈', '𝖉', '𝖊', '𝖋', '𝖌', '𝖍', '𝖎', '𝖏', '𝖐', '𝖑', '𝖒', '𝖓', '𝖔', '𝖕', '𝖖', '𝖗', '𝖘', '𝖙', '𝖚', '𝖛', '𝖜', '𝖝', '𝖞', '𝖟', '𝕬', '𝕭', '𝕮', '𝕯'...
Roma
4
Книга Юрова В.И пойдёт для обучения?
Botsman
24
Карта сайта