184 похожих чатов

Всем привет. У нас возник определенный юз-кейс и мы думаем,

подходит ли Кликхаус для такого (вроде бы да). Надо хранить 100 млрд строк (ок), делать большие сканы (ок), и выгружать большие результаты сканов, допустим сотни миллионов записей. Есть ли какие-нибудь подводные камни с последним?

9 ответов

8 просмотров

а чем не подходит S3 ? КХ про аггрегацию, а не про хранение / вытаскивание

sdev-E Автор вопроса
Denny [Altinity]
а чем не подходит S3 ? КХ про аггрегацию, а не пр...

Речь идет о сканах (фильтрации), которая порождает большие результаты.

sdev-E Автор вопроса
Denny [Altinity]
hdfs / hadoop ?

Да, это один из вариантов. Но наверное эффективней это будет хранить в КХ.

sdev-E Автор вопроса
sdev E
Да, это один из вариантов. Но наверное эффективней...

Тут много нюансов, почему так или не этак, долго рассказывать. Просто интересно, может ли хранить КХ промежуточные результаты допустим в сотни мегабайт и отдавать их по сети. Может тут есть какой-нибудь подводный камень.

sdev E
Да, это один из вариантов. Но наверное эффективней...

это сложный вопрос. КХ мержит. И все время насилует диск и cpu мержами, не имеет встроенного решардинга .... т.е. я плюсов КХ не вижу, хотя самый фанбой из всех фанбоев

sdev E
Тут много нюансов, почему так или не этак, долго р...

может, просто еще можно гвозди забивать телескопом

Denny [Altinity]
это сложный вопрос. КХ мержит. И все время насилуе...

Можно подумать хадуп никого не насилует... ;)

Похожие вопросы

Обсуждают сегодня

Всем привет, написал код ниже, но он выдает сегфолт, в чем причина? #include <stdio.h> #include <stdlib.h> #include <string.h> struct product { char *name; float price; };...
buzz базз
75
База данных не поможет. Шифрование не поможет. Какие там ещё варианты? Накидывайте.
КТ315
20
А как лучше конвертировать физический адрес в виртуальный при маппинге? В случае ядра у меня, например, direct mapping, первые 768МБ я как есть мапплю в higher half, а остальн...
Evg Resh
26
Всем привет, подскажите/посоветуйте пожалуйста. Фаердак компоненты, имею одно место где бизнес хочет видеть при открытии формы список всех клиентов, это порядка 30к. Мои дово...
Sasha Sch
14
Ребят, если кто в курсе - скажите, а в загранке такое же засилье маркетплейсов? или там простые сермяжные интернет-магазины живут попроще?
Андрей [aharito] Харитонов
14
Коллеги, доброе утро. Запустил на удаленном хосте приложение (ручками зашел туда по ssh и запустил, не командой удаленно). Создал потом ssh-туннель, и с моей машины приложение...
Δημήτηρ
9
Привет, делаю self-hosted github actions runner'ы на k8s для автоскейлинга, они распостраняются в виде helm chart'а. Так же мне нужно будет собрать свой образ, залить его в CR...
florius0
6
Господа всем привет. Для того чтобы страница индексировалась с запросом под каждый город. Это нужно делать отдельные страницы для каждого города, или есть варианты по лучше?
Владимир
8
Хотел бы спросить у знающих, правильную ли я выбрал книгу для начала изучения ассемблера Юрова В.И ? Или есть более лучшие книги для начала обучения?
Botsman
31
Да блин, на тестах всё отлично было, теперь застрял на запуске. Как только не закавычивал, уже даже догуглился до того, чтобы string.format добавить, и на выводе получил строк...
Заха́р
2
Карта сайта