Ребят, такая проблема. Кластер на 2 шарда, 2 реплики (4 ноды

Question

Ребят, такая проблема. Кластер на 2 шарда, 2 реплики (4 ноды

всего)
Есть Кафка табличка, в которой подключено около 20 топиков.
Каждый топик через свою матвью пишется в соответвующую табличку.
Сегодня в эти таблички перестали пиисаться данные. В кафке растет лаг.
Ошибок не сыпет вообще. Но если рестартовать кликхаус — получаю по каждой таблице, в которые идет запись из кафка-таблички такую вот ошибку:

Couldn't start replication: Replica appears to be already /clickhouse/tables/0/s_usergeo_state_id/replicas/srv2704 active

If you're sure it's not, try again in a minute or remove znode /clickhouse/tables/0/s_usergeo_state_id/replicas/srv2704 manually

Пробовал для одной из таблиц удалять is_active из зукипера - результатов не дало.
Подскажите, куда дальше можно копать?

#backend #clickhouse #database #devops #programming #russian

0

22.02.2021

7 ответов

7 просмотров

Volodymyr Bunchuk Автор вопроса

Dmitry [Altinity] Titov
If you're sure it's not, try again in a minute or ...

часа 2 уже

0

22.02.2021

Volodymyr Bunchuk Автор вопроса

Dmitry [Altinity] Titov
If you're sure it's not, try again in a minute or ...

Еще такую ошибку только что увидел 2021.02.22 12:22:26.044182 [ 22496 ] {} <Warning> s_usergeo_state_id_shard (ReplicatedMergeTreeRestartingThread): ZooKeeper session has expired. Switching to a new session.

0

22.02.2021

Denny [Altinity]

Логирование в кх trace?

0

22.02.2021

Volodymyr Bunchuk Автор вопроса

Denny [Altinity]
Логирование в кх trace?

да

0

22.02.2021

Denny [Altinity]

Так а вообще про кафку что-нибудь есть в логах?

0

22.02.2021

Volodymyr Bunchuk Автор вопроса

Denny [Altinity]
Так а вообще про кафку что-нибудь есть в логах?

Не было но я разобрался Блин, это конечно как иголку в стоге сена искать. Сейчас опишу

0

22.02.2021

Dmitry [Altinity] Titov · Accepted Answer

Dmitry [Altinity] Titov

If you're sure it's not, try again in a minute or remove znode /clickhouse/tables/0/s_usergeo_state_id/replicas/srv2704 manually Должно само пофиксится же, вы пробовали ждать?

0

22.02.2021

184 похожих чатов

Ребят, такая проблема. Кластер на 2 шарда, 2 реплики (4 ноды

7 ответов

Похожие вопросы