Всем привет! На версии CH 20.6.7.4 в сетапе кластера (3 шарда,

Question

Всем привет! На версии CH 20.6.7.4 в сетапе кластера (3 шарда,

реплик нету, и отдельный сервер как "прокси" с шардами в servers.xml) _периодически_ случается магия: запрос вида SELECT x, count(*) FROM table GROUP BY x возвращает повторяющиеся значение колонки x (будто не доагреггировал или что-то такое). В логах сходу ничего интересного, проблема приходит и уходит в рандомное время.

Сталкивался кто-нибудь?

UPDATE: да, судя по значениями, он буквально недосуммировал

#backend #clickhouse #database #devops #programming #russian

0

12.11.2020

5 ответов

13 просмотров

Anton Автор вопроса

Slach [altinity]
из какой таблицы выбираете ? Distributed? Distribu...

таблица Distributed, без ключа, используется строго как рид онли. Distributed поверх SummingMergeTree отсыпает почаще, поверх MergeTree пореже (но аналогичная проблема вылазит).

0

12.11.2020

Anton Автор вопроса

Slach [altinity]
из какой таблицы выбираете ? Distributed? Distribu...

делали дифы по логам сейчас, нашли нано разницу: - когда все хорошо, видим сообщение <Trace> Aggregator: Merging partially aggregated single-level data. - когда все плохо, видимо два сообщния <Trace> Aggregator: Merging partially aggregated two-level data. + <Trace> Aggregator: Merging partially aggregated single-level data.

0

12.11.2020

Slach [altinity]

Anton
делали дифы по логам сейчас, нашли нано разницу: ...

попробуйте FINAL добавить в SELECT запрос

0

12.11.2020

Anton Автор вопроса

Slach [altinity]
попробуйте FINAL добавить в SELECT запрос

FINAL решает проблему, но перфоманс деградиует на порядок 🙁

0

12.11.2020