Подскажите по distributed, пожалуйста В доке советуют писать в одну реплику,

Question

Подскажите по distributed, пожалуйста В доке советуют писать в одну реплику,

чтобы дальше replicated раскидывала по остальным внутри шарда.
Но если я делаю replicated, то у меня на обоих шардах одинаковое содержимое, потому что репликация внутри кластера.
Что я делаю не так?

#backend #clickhouse #database #devops #programming #russian

0

25.08.2023

7 ответов

17 просмотров

Чилийский Бизон Автор вопроса

Я так и делаю. У меня не получается раскидать данные по шардам, потому что replicated сливает всё в одну таблицу на всём кластере

0

25.08.2023

Nikolay Didenko

Чилийский Бизон
Я так и делаю. У меня не получается раскидать данн...

как-то так надо сосздавать таблички: CREATE TABLE sandbox.test_acl_local ON CLUSTER sharding_3shard_2repl ( `id` UInt64, ) ENGINE = ReplicatedMergeTree('/clickhouse/tables/{shard}/sandbox/test_acl_local', '{replica}') ORDER BY (id); CREATE TABLE sandbox.test_acl ON CLUSTER sharding_6shard_1repl ( `id` UInt64, ) ENGINE = Distributed('sharding_3shard_2repl', 'sandbox', 'test_acl_local', intHash64(id));

0

25.08.2023

Чилийский Бизон Автор вопроса

Nikolay Didenko
за распределение по шардам отвечает четвертый пара...

Нет, по ключу шардирования всё верно попадает, это replicated потом сливает всё вместе

0

25.08.2023

Nikolay Didenko

Чилийский Бизон
Нет, по ключу шардирования всё верно попадает, это...

надо смотреть ваши DDL + конфиг кластера

0

25.08.2023

Чилийский Бизон Автор вопроса

Nikolay Didenko
надо смотреть ваши DDL + конфиг кластера

ENGINE = Distributed('{cluster}', 'db', 'table', if(toUInt8(substring(toString(id), -1)) >3, 5555, 8888)) по последней цифре id раскидывает на разные шарды, если nonReplicated table, то раскидывается корректно, но тогда пишется только в одну реплику на каждом шарде и не реплицируется. А какая настройка может отвечать за репликацию внутри кластера целиком. а не внутри шарда?

0

25.08.2023

Nikolay Didenko

Чилийский Бизон
ENGINE = Distributed('{cluster}', 'db', 'table', i...

* как называется таблица, у которой прописан этот engine? * как сконфигурирован используемый cluster?

0

25.08.2023

Nikolay Didenko · Accepted Answer

Nikolay Didenko

Чилийский Бизон
Я так и делаю. У меня не получается раскидать данн...

за распределение по шардам отвечает четвертый параметр Distributed Engine. Вероятно он у вас выбран так, что всё попадает на один шард ?

0

25.08.2023

184 похожих чатов

Подскажите по distributed, пожалуйста В доке советуют писать в одну реплику,

7 ответов

Похожие вопросы