быть известна заранее или новые колонки могут добавляться в рантайме?
Идея в том, чтобы при добавлении новых событий с новой структурой не выполнять скрипт миграции c alter table.
Для типа JSON в рантайме можно новое добавлять, а так нет, нужно заранее структуру определить. Но стоит отметить, что добавление новой колонки в ClickHouse это очень дешевая операция, обычно не больше пары секунд занимает
вы базы данных с чем то путаете
ну в смысле, в mongodb например можно писать данные в коллекцию любой структуры которая определена на уровне приложения думал в CH так же можно
можно только если поле определено как мапа и с ней можно условно как с json отработать. Правда там с произвольной вложенностью проблемы
вложенности нет, структура плоская
а есть линк на доку?
Есть тип данных JSON, в который можно вставлять любой JSON (но тип конкретных полей меняться не должен). Правда не использовал его на практике, поэтому не подскажу, насколько оно хорошо работает.
https://clickhouse.com/docs/en/sql-reference/data-types/map
у ch с json почему-то плохо на практике, вроде мне в этом чате разработчик отвечал, что планируют в следующем году допилить, пока это экспериментальная фича
и есть такое https://clickhouse.com/docs/en/integrations/data-formats/json
угумс, для моей задачи наверное не совсем то, уже пробовал
а чем не подошло?
В таком случае нет, ClickHouse так не умеет. Но в качестве альтернативы можно вставлять в String поле исходный JSON и потом постфактум создавать материализованные колонки вида fieldName Int64 MATERIALIZED extractJsonInt64(json_column), Чтобы поиск по этим полям был быстрее
контекст немного ушел, но примерно из-за этого: - сыроватый функционал с багами - не во всех view поддержана колонка с типом json - в целом нет такой необходимости, подойдёт просто широкая плоская таблица на N столбцов
В общем это тоже ответ, спасибо 🙂 Думаю можно от-но элегантно обойти
Обсуждают сегодня