через clickhouse.com а можно через яндексклауд? что выгодней?
clickhouse.com там больше фичей и активно разрабатывается, но для рф недоступен
фичей в плане что удобная панель управления прям с сайта и всякое такое? да, я его и использую, просто 16гб стало не хватать и удивился с цен на расширение
панель в том числе, фичей в плане интеграций с кафкой например, масштабирования
а подскажите тогда пожалуйста про интеграцию с аирфлоу или чем-то подобным. некоторые запросы очень трудозатратные и памяти не хватает, хочу частями или еще как-то вынимать из базы, обрабатывать в питоне и грузить обратно по расписанию например. Интересует тоже самый простой и легкий вариант, без лишних установок обслуживания и тд и тп
в общем выгрузка и обработка в сторонних инструментах это на крайний случай, лучше хорошо продумать запросы?
Памяти airflow не хватает? Выше уже написали Немного подкину ещё вариант, если без питона совсем никак. Можно сложить предобработанные данные в s3 и оттуда дёргать куски, потом обработанное обратно И если всё тянете в pandas - не надо
памяти не хватает выполнить сложные запросы к базе кликхаус
Обсуждают сегодня