Всем, привет! А кто как решает проблему с ошибками при

Question

Всем, привет! А кто как решает проблему с ошибками при

отправке данных в виде партов в ClickHouse при больших нагрузках. Никак не могу победить эту проблему. Примерно 30% - это 500-ые ошибки со стороны ClickHouse.
Какие параметры подкручивать?

<Error> DynamicQueryHandler: Code: 252. DB::Exception: Too many parts (3505 with average size of 523.12 KiB) in table 'sentry.transactions_local (baa990c9-2fbb-41c5-89ee-a0e4b4500b96)'. Merges are processing significantly slower than inserts: Insertion status

#programming #russian #sentry

0

27.09.2024

10 ответов

15 просмотров

Dmitriy S. Автор вопроса

Юрий Тарабуткин
ПРивет! Попробуй крутить размер батча при вставке ...

А у какого сервиса? У снуба или сентри? Для всех сервисов снубы я выставил этот батч для инсерта в 10 мегабай и вроде получил результат по логам, но радовался не долго))

0

2 месяца назад

Юрий Тарабуткин

Dmitriy S.
А у какого сервиса? У снуба или сентри? Для всех с...

snuba крутите сударь) крутите

0

2 месяца назад

Dmitriy S. Автор вопроса

Юрий Тарабуткин
snuba крутите сударь) крутите

Благодарю! Направление есть!

0

2 месяца назад