Подскажите, в статье https://altinity.com/blog/tips-for-high-performance-clickhouse-clusters-with-s3-object-storage говорится что для s3Cluster можно использовать кастомный

Question

Подскажите, в статье https://altinity.com/blog/tips-for-high-performance-clickhouse-clusters-with-s3-object-storage говорится что для s3Cluster можно использовать кастомный

конфиг файл чтобы прокинуть правильные настройки по потокам на шарды. Но не совсем понятно как именно он применяется? почему он не приментися ко всем запросам, а только для s3?

users.d/defaults_for_s3.xml:

<yandex>
<profiles>
<default>
<max_threads>8</max_threads>
<max_insert_threads>8</max_insert_threads> <input_format_parallel_parsing>0</input_format_parallel_parsing>
</default>
</profiles>
</yandex>

#backend #clickhouse #database #devops #programming #russian

0

14.10.2021

4 ответов

28 просмотров

Konstantin Ilchenko Автор вопроса

Dmitry [Altinity] Titov
Ко всем будет применяться

хм, тогда это не очень вариант, я не хочу менять max_insert_threads для всех запросов)

0

14.10.2021

Dmitry [Altinity] Titov

Konstantin Ilchenko
хм, тогда это не очень вариант, я не хочу менять m...

Вы часто делаете insert select?

0

14.10.2021

Konstantin Ilchenko Автор вопроса

Dmitry [Altinity] Titov
Вы часто делаете insert select?

наверное в районе пары тысяч в день, но там скорее вопрос в том что они отжирают объём памяти близкий к максимуму, а увеличение max_insert_threads может ещё больше поднять потребление памяти

0

14.10.2021

Dmitry [Altinity] Titov · Accepted Answer

Dmitry [Altinity] Titov

Ко всем будет применяться

0

14.10.2021

184 похожих чатов

Подскажите, в статье https://altinity.com/blog/tips-for-high-performance-clickhouse-clusters-with-s3-object-storage говорится что для s3Cluster можно использовать кастомный

4 ответов

Похожие вопросы