Simon Osipov

Еще одна интересная статья, которую хотелось бы обсудить с вами: The future history of Data Engineering https://groupby1.substack.com/p/data-engineering Вот несколько интер...

Ребят, привет, а что еще на рынке есть сейчас среди контроля миграций? LiquidBase, Flyway и все?

Господа, а можно вас попросить заполнить формочку на 5 вопросов про вашу работу DE? https://forms.gle/cY6VTUU8zJX74zvq5 Нужны циферки для дискуссии про DE)

Ребят, привет, есть вопросик по pytest Есть легаси код Есть функция, которая внутри себя использует import_module() Хочу ее протестировать Создал fixture, которая во временно...

Ребят, привет! А поделитесь, плиз, мнением, куда движется индустрия работы с данными (в целом) по вашему мнению? Например, три пункта: - Приватность и секьюрность. Все больше ...

Привет! Новичек в CH, вопросик есть Есть таблица ``` ENGINE = ReplacingMergeTree PARTITION BY month PRIMARY KEY (col_1, month, col_2) ORDER BY (col_1, month, col_2) SETTINGS ...

Ребята, привет! Тут понял, что хочется написать большой, качественный материал в виде обзора и гайда на какой-нибудь фреймворк / тулзу из мира инженерии данных. 👷 Ибо качеств...

Привет! Подскажите по ситуации Есть Airflow Kubernetes Executor, Airflow Kubernetes Operator, все работает успешно в GKE Но заметили такую вещь: в шаблонах подов везде специа...

Привет, есть col1, col2, col3 и computed column concat(col1, col2, col3) А также col1_proposed, col2_proposed, col3_proposed. Судя по документации сотворить computed column c...

Привет. Есть int колонка. Есть к ней требование, сортировка должна работать как у чисел, а вот поиск должен быть по вхождению. То есть на поиск like '%111%' должны прилетать и...

Что-то оч сложное какое-то RBAC у нас на DWH натянут, а по GDRP данные надо “удалить” безвозвратно, какой смысл в авторизации на “реальные данные”, если ты их безвовзратно уда...

Есть две таблицы, две колонки, обе numeric(10, 2). Пытаясь скопировать значения из одной в другую, получаю Detail: A field with precision 10, scale 2 must round to an absolute...

Привет! Есть вопрос: Есть набор записей, их можно сгруппировать по определённому ключу. В сгруппированной таблице необходимо выводить поля по следующей логике: Если в col1 у в...

Привет, вопрос: есть два интовых значения, нужно находить все записи, которые попадают в промежуток между этими двумя значениями. Between и две колонки выглядит как оптимально...

Привет, Postgres, SQLAlchemy, создаю таблицу через класс. Нужено сделать колонку, в которой будет выбор из предложенных вариантов. Скажите, есть ли более красивое решение, чем...

Вопрос: Есть табличка, в ней колонки. Мне нужно создать такую, значение в которой будет складываться из трех других и при изменении любой из этих трех значение в новой должно...

Не, ты чего, мои адекватные. Просто он в каждый чат врывается, с элементарным вопросом, ему говорят "а гугл открыть не?", он всех поливает какахами, мол "неадекватные, меркант...

Привет! Есть поле, в нем FK (int) Пользователь хочет искать по этому полю, причем поиск 342 должен выдать как 342, так 111342, так и 342081. Если использовать like '%342%' ин...

Привет. У нас крутится под в кубере, мы мониторим его в графане. Если зайти в графики, то там есть три 3 линии: current, requested, limit Что есть requested? сколько мы указа...

Привет. Я ведь верно понимаю, docker run -v /sql:/flyway/sql смонтирует это таким образом, что внутри контейнера в папке flyway/slq будет содержимое из папки sql. При этом эту...