170 похожих чатов

Что бы быстро прочитать файл можно использовать memory mapped file

в память. Мне нужно максимально быстро задампить unordered map состоящий из структур в csv файл. Можно использовать ofstream но может есть более производительный метод ? На вооружении имеется c++ 20, Ubuntu 22.04

4 ответов

12 просмотров

так прочитать или задампить) пока ничего не понятно

Вместо ostream << на каждый член структуры использовать fmt/std format/format_to. И не забыть, что для вывода строк в csv нужен кастомный форматтер, чтобы искейпил двойные кавычки и спецсимволы внутри строк.

У тебя всё упрется в скорость записи на диск. Теоретически все варианты, если явно не пессимизируешь, отработают одинаково. Кстати, примение какого алгоритма сжатия может всё ускорить, потому как собственно на диск нужно будет писать меньше. Мемори маппинг обычно юзают, когда файл не помещается в память весь и хотят по нему бегать окном и отдают это либе, что этот маппинг делает.

Alexey Petrunyaka
Вместо ostream << на каждый член структуры использ...

Зачем так? Пробежаться по объекту, сложить его в область памяти, вызвать какой упаковщик и получившееся слить на диск - если правильно сделать, то для больших объемов может оказаться быстрее. на csv не обратил внимания, так что мой совет не подойдет, вероятнее всего. Тут два затыка - форматирование собственно строк и скорость записи их в файл на диск.

Похожие вопросы

Обсуждают сегодня

Мужики и девушки, привет) в Вelphi xe7 в настройках во вкладке "Editor Options" далее " Color" есть список: "Elements", открыв который мы можем настраивать отображение разных...
Kraszx
14
Добрый вечер. Есть вопрос, а может и предложение. Был у меня диалог в другой группе о делфи и я задался вопросом: "А нельзя ли в делфи цвет //коментария и {комментария} сде...
Kraszx
24
Я вот подумал. SSE выполняет операции максимум с 64-битной точностью. А FPU - всегда с 80-битной. Разве не должно быть FPU точнее тогда?
The Bird of Hermes
13
как быть с принтером? такой подход прокатит?
zamtmn
12
Мдя, прикол, боевая сборка запускается (именно под отладчиком) после F9 примерно полторы минуты (97 секунд если быть точным). Начал копать - проблема детектится сразу - зависа...
Александр (Rouse_) Багель
38
Всем привет! Подскажи, пожалуйста, как передать в TComboBox сразу значение и id записи. На Delphi я делал так: ComboBox1.Items.AddObject('Какое-то значение', Pointer(id запис...
Евгений
13
Здравствуйте, вопрос по структурам данных. Были у вас случаи, когда пришлось писать деревья или двунаправленные списки?
/ /
50
Я не понимаю, это троллинг или что? Швабрика поддерживают, который буквально пишет на ассемблере взаимодействия с винапи. Я это ещё написал загрузчик и хоть что-то изучаю в о...
Shadow Akira
6
А вот это что за конструкция? Вернее, она тут нафига?
Serjone
10
Привет. Подскажите, как правильно сматчить лист фиксированного размера, чтобы компилятор не говорил мне о неполном паттерне? Допустим что-то такое [x', y'] = sort [x, y]?
Arseny
8
Карта сайта