хост можно данные gzip или как то сжать до передачи, чтобы удаленный сервер их поймал в сжатом виде и добавил JSON ?
clickhouse-client --help | grep compression
ага спасибо.. не очевидно как то куда его сувать в доках на сайте и преведенном выше конфиге про компрессию ни слова
самая полная дока по клиенту это --help в смысле совать? cat your.json | clickhouse-client --compression 1 -q "INSERT INTO db.table FORMAT JSONEachRow" примерно так
client включает сжатие сам если сервер не локалхост
client включает сжатие сам если сервер не локалхост
включает он LZ4, но иногда ZSDT ускоряет запросы в разы, у меня есть запросы которые возвращают 1GB если не жать за 16 сек, 130мб если жать LZ4 за 4 сек, и 30МБ если жать ZSDT за 2 сек (сеть 1Gbit)
Обсуждают сегодня