Разбираюсь с репликацией. На слейве в логе повторяются записи 2022-06-24 07:45:52.959

Question

Разбираюсь с репликацией. На слейве в логе повторяются записи 2022-06-24 07:45:52.959

GMT [17625] LOG: started streaming WAL from primary at 77/79000000 on timeline 1
2022-06-24 07:45:52.959 GMT [17625] FATAL: could not receive data from WAL stream: ERROR: requested WAL segment 000000010000007700000079 has already been removed
Насколько это проблематично?

#backend #devops #pgsql #programming #russian

0

24.06.2022

16 ответов

24 просмотра

Stas Kozhevnikov

мастер уже удалил журнал, или восстанавливать сегменты из бэкапа или переналивать реплику

0

24.06.2022

Николай

можно pg_rewind попробовать, если бд большая, но там есть ряд требований

0

24.06.2022

Dmitry Автор вопроса

Stas Kozhevnikov
мастер уже удалил журнал, или восстанавливать сегм...

Так это как раз после свежей перезаливки с мастера.

0

24.06.2022

Михаил Шурутов

Dmitry
Так это как раз после свежей перезаливки с мастера...

Значит вы не успели запустить реплику до того, момента, как мастер удалил нужные журналы транзакций.

0

24.06.2022

Dmitry Автор вопроса

Михаил Шурутов
Значит вы не успели запустить реплику до того, мом...

И что теперь можно сделать?

0

24.06.2022

Михаил Шурутов

Dmitry
Так это как раз после свежей перезаливки с мастера...

pg_basebackup надо запускать с ключиком -X stream

0

24.06.2022

Роман Жарков

Dmitry
И что теперь можно сделать?

Перезаливать, озадачившись созданием слота репликации (сам не умею, но друг рассказывал). pg_probackup catchup

0

24.06.2022

Dmitry Автор вопроса

Михаил Шурутов
pg_basebackup надо запускать с ключиком -X stream

Примерно так делал pg_basebackup -P -R -X stream -c fast -h 192.168.1.31 -U postgres -D ./main

0

24.06.2022

Dmitry Автор вопроса

Роман Жарков
Перезаливать, озадачившись созданием слота реплика...

Спасиб! Поищу как это...

0

24.06.2022

Михаил Шурутов

Dmitry
И что теперь можно сделать?

https://t.me/pgsql/390340 Слотам репликации и прочим wal_keep_segments лично я предпочитаю сохранение журналов транзакций в каком-либо виде, например, настройкой archive_mode, archive_command на мастере и restore_command на реплике (restore_command в любом случае настраивать придётся).

0

24.06.2022

Dmitry Автор вопроса

Михаил Шурутов
https://t.me/pgsql/390340 Слотам репликации и проч...

т.е. настроить эти параметры в конфигах. Снова прибить и перекачать заново main ?

0

24.06.2022

Ilya Serbin

Dmitry
Так это как раз после свежей перезаливки с мастера...

Примерно так можете лить pg_basebackup -h <hostname> -D </path/to/datadir> -P -U <user_for_replication> -R --wal-method=stream -C -S <slotname> Сразу создается и слот и репликация стартует. Слот держит все нужные валы для реплики и не дает им удаляться пока они нужны реплике. Это и плюс, и минус сразу. Альтернатива - использования параметра wal_keep_segments (другие плюсы и минусы), и создание теплой реплики (когда валы передаются не по каналу репликации, а опосредованно, через restore_command какой-нибудь)

0

24.06.2022

Михаил Шурутов

Dmitry
т.е. настроить эти параметры в конфигах. Снова при...

Да, прибить и скачивать заново.

0

24.06.2022

Ilya Anfimov

Репликацыя не идёт, а так никаких проблем. И да, при заливке реплики надо следить, чтобы все сегменты с начала pg_basebackup были доступны до старта реплики. Можно -- заставить pg_basebackup оставить слот, который он использует для внутренних цэлей. Можно -- настроить архив WAL, реплика можэт брать из него. Можно -- настроить wal_keep_size побольшэ, чтобы сегменты точно не удалились.

0

24.06.2022

Ilya Anfimov

Михаил Шурутов
pg_basebackup надо запускать с ключиком -X stream

Который не имеет никакого смысла, поскольк и так является дефолтом.

0

24.06.2022

Михаил Шурутов · Accepted Answer

Михаил Шурутов

Перезаливайте реплику заново. У вас необходимый WAL-файл удалён, его физически нет на мастере.

0

24.06.2022

172 похожих чатов

Разбираюсь с репликацией. На слейве в логе повторяются записи 2022-06-24 07:45:52.959

16 ответов

Похожие вопросы