Товарищи, у кого спарк-кубернетес-оператор в проде, у вас было такое

что приложение не стартует несмотря на задеплоенный CRD? Нашел пару открытых issues с похожими проблемами - воркэраунд везде рестарт самого оператора, но хотелось бы все-таки разобраться в чём-дело

Апиратор нинужен

Какая версия куба?

Мое ресерч показал что webhook не проставляет нужные флаги, мы грешили на версию куба, у нас 19beta

у нас мистика какая-то - единственный стейт контроллера - очередь и кеш. Проктологией кеша куберовского го-клиента желания нет никакого. crd деплоится при смене айдишника без проблем - возвращаем старый - снова колом стоит, несмотря на то что его удаляли руками прямо через kubectl. Видимо придется костылить и встраивать рестарты оператора в наш флоу :(

Ну хз, рестарты вообще базовый механизм при работе с любым компонентом. Через Airflow вообще в три символа

проблема в том, что и супервайзер в арфлоу для таких кейсов написать не очень очевидно. Есть один вариант на метриках очереди, но возможны фолс позитивы

Оператор перезагружали?

Так вроде если статус не меняется с a на б больше чем на N, то это ретрай

На пике пара сотен была - сейчас все пусто, но что-то поломалось. Оператор пока не перезагружали, хотели состояние поизучать - но уверен на 99 процентов что после рестарта деплой пройдет. Пара ишьюс открытых у людей с такой же проблемой и там рестарт лечил всё

Нам рестарт помогал