Добрый день! Задеплоили в кубер маленький кластер (на основе оператора).

Question

Добрый день! Задеплоили в кубер маленький кластер (на основе оператора).

4 ноуда: 0-0, 0-1, 1-0, 1-1 (и в подах они и в `system.clusters`)
Создаю бд CREATE database if not EXISTS test1 on CLUSTER 'stg-us';
таймаут в логах вижу днс ошибки

DDLWorker: Unexpected error, will try to restart main thread: Code: 198. DB::Exception: Not found address of host: chi-clickhouse-cluster-stg-us-2-0. (DNS_ERROR)

Как понять откуда появился этот ноуд 2-0 ?

#backend #clickhouse #database #devops #programming #russian

0

09.11.2023

6 ответов

12 просмотров

Slach [altinity]

покажите kubectl get chi clickhouse-cluster -n <your-namespace> -o yaml на pastila.nl

0

09.11.2023

A D 👾 Автор вопроса

Slach [altinity]
покажите kubectl get chi clickhouse-cluster -n <y...

https://pastila.nl/?001ecca5/92be60cd56d2129a4ad3083653c2c518#sm3NLWJu1j3h80LGBxG2mw==

0

09.11.2023

Slach [altinity]

A D 👾
https://pastila.nl/?001ecca5/92be60cd56d2129a4ad30...

судя по всему вы какой то scale down делали... с 4 шардов на два шарда... в процессе scaledown не сработала SYSTEM DROP REPLICA , потому что по каким то причинам не резолвилось DNS имя сервиса которые генерируются на каждую реплику... в целом не смертельно, но возможно у вас там в zookeeper мусор остался... попробуйте ручками SYSTEM DROP REPLICA 'chi-clickhouse-cluster-stg-us-2-0'; SYSTEM DROP REPLICA 'chi-clickhouse-cluster-stg-us-2-1'; SYSTEM DROP REPLICA 'chi-clickhouse-cluster-stg-us-3-0'; SYSTEM DROP REPLICA 'chi-clickhouse-cluster-stg-us-3-1';

0

09.11.2023

A D 👾 Автор вопроса

Slach [altinity]
судя по всему вы какой то scale down делали... с 4...

ща попробую

0

09.11.2023

A D 👾 Автор вопроса

Slach [altinity]
судя по всему вы какой то scale down делали... с 4...

Работает!! Благодарен

0

09.11.2023