сутки столько накапливаете? Сливайте раз в час дельту, а обработку запускайте по факту окончания суток после сравнивания количества записей в источнике и записанного приемник.
из 80кк обновляется за день 10кк гдето. запросы с условием на выборку по полю updated_at к примеру так же оч долго идут.
Обсуждают сегодня