184 похожих чатов

Спасибо, так и оказалось. Одно ядро сортирует и на новых

серверах ядер больше, но они чуть медленнее старых. Если дробить на 40 потоков (файлов) вставляемые данные, то вставляет веселее (до 30 ядер грузит), но ошибка потом выскакивает to many parts... пока решили подробить данные на число нод кластера.
Ждать стабилизации 20 версии с многопоточной вставкой или есть идеи получше?
Кстати, нам такая большая вставка потребовалась для миграции с одного кластера на другой с минимизацией простоя, в прод условиях объем меньше вставляется (инкрементально), но clickhouse-copier не умеет реплицировать со стедалон в реплейктед таблицы. Может быть есть утилиты для лайф миграции со стендалон на кластер?

1 ответов

9 просмотров

>to many parts... ну так временно можно сделать не 300 а например 3000 партов. >Ждать стабилизации 20 версии с многопоточной вставкой Да не вставка там многопоточная, а парсинг входного файла. >но clickhouse-copier не умеет реплицировать со стедалон в реплейктед таблицы ????????? ему вообще-то пофиг Зачем вам инсерты вообще? Не проще готовые парты переложить? Январь со стенделона на первый шард, февраль на второй шард и т.д.

Похожие вопросы

Обсуждают сегодня

Всем привет, написал код ниже, но он выдает сегфолт, в чем причина? #include <stdio.h> #include <stdlib.h> #include <string.h> struct product { char *name; float price; };...
buzz базз
70
Здравствуйте. Задача состоит в том, чтобы сделать real-time чат в мобильном приложении. После передачи сообщения пользователем через веб-сокеты, для основного и долговременног...
🐾
5
Всем доброго дня, ребят подскажите пожалуйста, если в курсе по ассемблеру используется MASM32, могу ли я использовать FASM? В чем явная разница и будет ли у меня все работать?
Botsman
17
падает джоба хотя уже была собрана на соседнем namespace, куда капать? │ │ Copying blob sha256:2fa066caddb8f09a71082b03aa43046f79346a01d9c89e06a1f508bb1207dba5 427 │ │ Copyin...
Andrei St
2
Хотел бы спросить у знающих, правильную ли я выбрал книгу для начала изучения ассемблера Юрова В.И ? Или есть более лучшие книги для начала обучения?
Botsman
25
Книга Юрова В.И пойдёт для обучения?
Botsman
24
$params = [ 'formid' => 'feedbackForm', 'formTpl' => '@CODE: <form class="form-validate" data-id="ajax_form"> <fieldset class="margin-bottom-md"> ...
Pathologic
1
Люди добрые, помогите с идеями, потому что свои закончились. У клиента падает софтина в момент инициализации модуля OtlEventMonitor на RegisterWindowMessage('Gp/OtlTaskEvents/...
Михаил Усков
7
Тут просто дело в том, что я не могу сейчас дать такие подробности из за того что рассчитать это всё нереально. Этого проекта который я хочу сделать ещё даже не существует) И ...
🐾
8
> Примечательно, что новый владелец удаляет из GitHub любые жалобы, указывающие на подозрительную активность или смену владельца, и, видимо, рассчитывает на то, что пользовате...
Alex Sherbakov
2
Карта сайта