Всем привет. есть задачка, на ооооочень тормозное оборудование (4 ядра

Question

Всем привет. есть задачка, на ооооочень тормозное оборудование (4 ядра

8 гб памяти) выгрузить 3 таблички, в колоночном виде это примерно 3гб.
попробовал выгрузить первую (256 мб), сконвертировал в tsv, получился файл 1.5 гб, целиком он не лезет поэтому разложил его в файлики по 1000 строк. Но это самая маленькая таблица, а ведь есть еще на 1,2 гб и 1,5 гб в колоночном виде.
если я попробую загрузить это через нативный формат кликхаус не будет пытаться прожевать файл целиком и будет читать кусками или нет?
какой альтернативный способ перетащить данные? через freeze?

#backend #clickhouse #database #devops #programming #russian

0

03.10.2018