снапшоту базы собирала первичный набор данных?
https://debezium.io/documentation/reference/1.5/connectors/mysql.html Debezium (Kafka Connect) такое умеет, но нужно где-то кафку поднимать (либо AWS MSK, либо Confluent Cloud, либо в EKS через какой-нибудь кубернетес оператор)
наверно не по снапшоту а через CDC ? Либо можно через GLUE (он умеет через JDBC подтягивать только измененные данные при определенных условиях)
да вот хотелось как раз из бэкапа базы собрать первичные данные и потом уже догнать индекс из актуальных данных или как вариант сделать дамп в какой-нибудь json и разобрать его потом тем же GLUE?
Aws Dms может делать full load + cdc
Обсуждают сегодня