День добрый, подскажите, насколько время обновления с 9.4 до

Question

День добрый, подскажите, насколько время обновления с 9.4 до

13 зависит от объема данных в базе? Мне казалось что там используются hard links и время обновления не должно сильно зависеть от объема данных

#backend #devops #pgsql #programming #russian

0

26.01.2021

10 ответов

11 просмотров

b s

У pg_upgrade есть --link, да. Только что толку, если все равно прочитать все надо.

0

26.01.2021

Виктор Егоров

b s
У pg_upgrade есть --link, да. Только что толку, ес...

хм, что прочитать? только системный каталог, всё остальное линкуется. у меня еженедльные тесты на 10TB базе с 2-мя табличными областями — 31 минута в среднем на апгрейд со сбором полной статы.

0

26.01.2021

b s

Виктор Егоров
хм, что прочитать? только системный каталог, всё о...

Интересно. Тогда я вообще плохо понимаю, зачем pg_upgrade нужен.

0

26.01.2021

Виктор Егоров

b s
Интересно. Тогда я вообще плохо понимаю, зачем pg_...

в смысле? это он и делает всё. без него имеем либо pg_dump+pg_restore с непонятным, но где-то в районе суток даунтаймом. либо через логическую репликацию, с плясками по переносу схему и синхронизации всего, кроме таблиц.

0

26.01.2021

b s

Виктор Егоров
в смысле? это он и делает всё. без него имеем либо...

А что он такого делает, чего нельзя воткнуть в код постгреса, чтобы он, обнаружив старую версию под собой, молча жевал свой системный каталог? Recovery же мы тоже не вручную запускаем, и никто не умирает от этого.

0

26.01.2021

Виктор Егоров

b s
А что он такого делает, чего нельзя воткнуть в код...

pg_upgrade — системная утилита, которая: - делает проверку совместимости инсталляций - переносит системный каталог - линкует файлы - правит контольные файлы. в код постгреса это не втыкают чтобы не сложнять его, т.к. пришлось бы слишком много ветвлений для разных версий иметь. т.к. перезапуск всё равно нужен, делаем всю работу через утилиту

0

26.01.2021

b s

Виктор Егоров
pg_upgrade — системная утилита, которая: - делает ...

Ну хорошо. Не в код. Но пусть он этот pg_upgrade сам вызывает и сам себя перезапускает. Какого черта я, средняя скриптомакака, которая ничего сложнее инстанса за $10 на AWS в жизни не видела, должна пользоваться отдельной утилитой, у которой 10 опций командной строки, позволяющих по-разному отстрелить себе ноги?

0

26.01.2021

Radist

b s
А что он такого делает, чего нельзя воткнуть в код...

Ради того, что происходит раз в год, делать нетривиальный анализ каждый раз при... старте/первом обращении к таблице? А если что-то пойдёт не так? Апгрейд - всё-таки планируемая операция, а тут нежданчик може прилететь после каждого рестарта СУБД. Например, флипнулся бит где-нибудь в заголовке таблицы - просто она не будет читаться. А если встроить апгрейд, то можно вообще попортить все данные из-за ложного детекта.

0

26.01.2021

b s

Radist
Ради того, что происходит раз в год, делать нетрив...

xlog мы переименуем в wal, чтобы неподготовленные пользовали перестали удалять «какие-то логи», а у остальных все скрипты сломались.

0

26.01.2021

Виктор Егоров · Accepted Answer

Виктор Егоров

через pg_upgrade если, то да, hard links. время зависит от сложности схемы (pg_dump+pg_restore schema-only) + время сбора статистики (но это уже на запущенной базе). обычно в 10-20 минут можно уложиться

0

26.01.2021

172 похожих чатов

День добрый, подскажите, насколько время обновления с 9.4 до

10 ответов

Похожие вопросы