Всем привет! Хочу с помощью Airflow настроить передачу данных с Google

Question

Всем привет! Хочу с помощью Airflow настроить передачу данных с Google

Ads и Google Analytics на мой DWH на Redshift.

В гугле и от самого Airflow видел примеры передачи с GA на GCP или BigQuery.

А chatGPT дал решение чтобы на BiqQuery или GCP сначала а потом оттуда на Redshift (один из вариантов ещё включал S3 между GCP и Redshift).

Хотел спросить, может ли кто-то посоветовать что-то для задачи передачи данных с GA на Redshift?

#hadoop #russian #software

0

11.05.2023

2 ответов

34 просмотра

Barys M

1. GA -> S3. Надо смотреть какие есть способы выгрузки, вероятнее всего тянуть из API 2. S3 -> Redshift - вариантов много. Рабочий и довольно простой способ это использовать external table w/ Spectrum - https://docs.aws.amazon.com/redshift/latest/dg/c-spectrum-external-tables.html.

0

11.05.2023

K S · Accepted Answer

K S

Это задача интеграции данных, эйрфлоу здесь скорее для координации и визуализации.

0

11.05.2023

52 похожих чатов

Всем привет! Хочу с помощью Airflow настроить передачу данных с Google

2 ответов

Похожие вопросы