через файл, т.е. задампил таблицу в файл и пытаюсь выполнить
cat file.txt | clickhouse-client --query="insert into table format tabseparatedwithnames"...
спустя 10 минут от старта, импорт прошел примерно на 400млн записей, падаю с ошибкой "Too many parts (300). Merges are processing significantly slower than inserts". Логика понятна, но как бы ее обойти? Есть ли альтернативные пути загрузки данных из файла?
pv --rate-limit=1M file.txt | clickhouse-client --query="insert into table format tabseparatedwithnames" ограничить скорость чтения файла (1MB/s)
Обсуждают сегодня