184 похожих чатов

Подскажите, делаем вставку в Distributed таблицу с рандомным ключом шардирования,

настройка insert_distributed_sync включена, но при этом данные появляются не сразу, приходится делать sleep минуту. Надо что-то ещё подкрутить чтобы не надеяться на sleep? Увеличение insert_distributed_timeout может помочь?

7 ответов

26 просмотров

А зачем вам ждать?

Konstantin Ilchenko- Автор вопроса
Dmitry [Altinity] Titov
А зачем вам ждать?

перед тем как начать читать, данные появляются только частично, если подождать немного то данные полностью появляются

Konstantin Ilchenko
перед тем как начать читать, данные появляются тол...

Вам нужно прочитать только что вставленные данные зачем? 1. Убедиться, что они вставились. 2. Вернуть какую то посчитанную метрику

Konstantin Ilchenko- Автор вопроса
Dmitry [Altinity] Titov
Вам нужно прочитать только что вставленные данные ...

проверяем что данные валидные чтобы дальше перелить в следующую таблицу.

Konstantin Ilchenko
проверяем что данные валидные чтобы дальше перелит...

Репликация асинхронная, вполне возможно что ваши данные до второй реплики не доехали. а Distributed запрос пришел на вторую реплику. https://clickhouse.tech/docs/en/sql-reference/statements/system/#query_language-system-sync-replica https://clickhouse.tech/docs/en/operations/settings/settings/#settings-max_replica_delay_for_distributed_queries

Konstantin Ilchenko- Автор вопроса
Dmitry [Altinity] Titov
Репликация асинхронная, вполне возможно что ваши д...

а если усложнить кейс, пишем напрямую в шарды в tmp таблицы и по завершению записи делаем replace partition on cluster. Может ли реплейс пройти без синхронизации репликации? Раньше никаких проблем не было, но сейчас раз в неделю бывает что не хватает части данных

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта