Всем привет. а подскажите, пожалуйста, насколько вообще распространена полная автоматизация

Question

Всем привет. а подскажите, пожалуйста, насколько вообще распространена полная автоматизация

canary выкатки (с постепенным ресайзом трафика на поды), дальнейшем свитчем канари в стейбл и автоматическим откатом в случае, если мониторинг начинает орать, что чего-то там не то ?

есть ли примеры success кейсов с такой полной автоматизацией или это больше проблем добавит ?

речь, конечно же, о k8s

#devops #programming #russian

0

29.07.2023

9 ответов

23 просмотра

Nick Kritsky 🇺🇦

Ну, мне интересно как оно в мире. У нас всё своё же

0

30.07.2023

PLAYER #666

Покури argo rollouts, может подойдёт

0

30.07.2023

Arthur Irgashev Автор вопроса

Nick Kritsky 🇺🇦
Если найдёшь где - расскажи

ну из того, что я находил, все примерно сводилось к одному: запустили пайплайн, дальше 1) накатили канарейку, пустили 10% трафика 2) ждем 5 мин, поллим мониторинги для получения базовых slo 3) если все ок, растим трафик с 10 до 25 4) опять поллим мониторинг 5) опять растим трафик .... если все хорошо, то убиваем канарейку и апдейтим стейбл если все плохо (по ответам мониторинга), откат канарейки + алерт в какой-то канал

0

30.07.2023

Arthur Irgashev Автор вопроса

не оч понял, честно говоря мы сейчас итак фичефлаги используем )

0

30.07.2023

Arthur Irgashev Автор вопроса

ну, там постепенный рост трафика происходит. это занимает основное время

0

30.07.2023

Arthur Irgashev Автор вопроса

ну долгие выкатки именно после переключения трафика типа, апнули с 10 до 25, подождали 5 - 7 мин, посмотрели, всё ли ок на мониторинге потом с 25 до 50, опять подождали и посмотрели на метрики с другой стороны, возможно, смысла раскатывать постепенно так трафик до 100% на канари версию и нет, после 50 условно стейбл переключить и убить канари

0

30.07.2023

Максим Муртазаев

Arthur Irgashev
ну долгие выкатки именно после переключения трафик...

Раскатывайте сразу с 0 до 100, быстрее получите фидбек. А если что-то пойдет не так - ролбекайтесь UPD: 🤡

0

30.07.2023

Arthur Irgashev Автор вопроса

Максим Муртазаев
Раскатывайте сразу с 0 до 100, быстрее получите фи...

ага, и через recreate )

0

30.07.2023