в реальном времени. Подскажите куда смотреть, что используете?
вам прямо логи надо? или ошибки?
прямо действия пользователя
надежно надо передавать? или что-то потеряться может?
не жалко если 3-5% пропустим
это прямо текстовые логи или event's какие то для аналитики ? потом данные для полнотекстового поиска будут использоваться или аггрегироваться?
http://appmetrica.yandex.com + выгрузка в clickhouse https://bitbucket.org/clickhouse_pro/metrika2clickhouse
События, это get запрос, в пейлоаде строка которую и нужно сложить + тех информацию типа клиента и т.п. полнотекстового поиска не будет, будет агрегация
тогда пишите свою прокладку которая принимает HTTP GET и вставляет куда нибудь в clickhouse-bulk
может logstash http input или vector.dev подойдет?
Обсуждают сегодня