нормальный паттерн, использовать Buffer для накопления данных с последующим выгребанием в MergeTree?
Вопрос в вакууме, раз такое сделали, логично что для буффера свои кейсы
Вопрос скорее в том, есть ли там скрытые подводные камни. Понятно что оно должно умещаться в памяти, что-то ещё? Лимит по конкаренси - 10К рпс тянет, а 50-100, например?
Если мы говорим про 1 машину, потянет столько, сколько хватит скорости оперативки. Явный минус это потеря данных, при краше
100k tcp запросов ? 100k http ? это проблема для tcp, оверхед на tcp/http
Как понимаю, в вопросе уже решена проблема с сетью
Да, наверное 100к рпс я хватанул:) столько наверное суммарно во все шарды будет
Обсуждают сегодня