169 похожих чатов

Была таблица в одной базе(хадуп), мигрировала в другую(сноуфлейк). задача: убедиться, что

таблица перенеслась правильно

некоторые таблицы весят терабайты, сравнить 1 к 1 не представляется возможным.
может кто-то уже придумал какую-то приблуду, которая упрощает сравнение таблиц между базами? сейчас пишу код на питоне, который это делает, но вдруг уже всё давно придумано и я зря изобретаю велосипед

1 ответов

5 просмотров

Посчитать хэш по датасету на клиенте, очевидно Так или иначе придётся всё прочитать хотя бы один раз Каунт можно для начала сделать, чтобы понять, имеет ли смысл возиться Если это что-то с временем, можно решать задачу для отдельных временных диапазонов PS. В целом, разработка теста должна быть частью разработки миграции

Похожие вопросы

Обсуждают сегодня

Если у меня есть такой класс: Object = {} function Object:new(a_name, a_transform, a_color, a_mesh, a_material, a_shader, a_textures) local private = {} private.n...
Cuarno Vile
4
я не магистр хаскеля, но разве не может лейзи тип конвертнуться в не-лейзи запросив вычисление содержимого прям при инициализации?
deadgnom32 λ madao
100
зачем же переименовывать ? чтобы кол-во участников возросло или вдруг IBM от этого снова на свифте начнет кодить ? Я не понимаю что страшного в том что свифт гавно, если это т...
Oleh Nerzh
10
здравствуйте. совершаю вот такую вещь: strcpy(line, (char)current_number); где current number — неподписанный шорт, line — массив чаров. ругань следующая: main.c:29:30: error...
Roberto's Ширгозиев
13
@MrMiscipitlick А можешь макрос написать, который будет вычислять смещение относительно переданных меток? Просто .label1-.label2, и вернуть значение.
КТ315
35
А еще в перле можно уже @arr1 + @arr2?
Sergei Zhmylove
53
@NikaBelurgHR Бот? Ассемблер?
КТ315
11
юзеры Jetpack Compose тут?
Qtless Qtless
7
Добрый день! Подскажите, пожалуйста: какими компетенциями нужно обладать, чтобы претендовать на работу эрланг (отдельная благодарность, если про элексир тоже подскажете) разр...
via ☸️ led
20
Привет всем. появился вопрос. Разрабатываю сайт, в данный момент он запущен. Хостинг beget. Добавляю на сайт яндекс метрику с помощью полей client-settings (взято отсюда http...
Andrew
2
Карта сайта