Всем привет. Ceph поднят в кубере. В какой-то момент все

osd погибли. По ресурсам нод всё ок. Можно ли как-то восстановить их работу? Одна из osd почему-то не может получить конфиг монитора
failed to fetch mon config (--no-mon-config to skip)
А две другие зафэйлились на контейнере expand-bluefs логи такие:
1: /lib64/libpthread.so.0(+0x12cf0) [0x7f0c8f237cf0]
2: gsignal()
3: abort()
4: (ceph::__ceph_assert_fail(char const*, char const*, int, char const*)+0x18f) [0x7f0c8fdea499]
5: /usr/lib64/ceph/libceph-common.so.2(+0x269605) [0x7f0c8fdea605]
6: ceph-bluestore-tool(+0x4b903b) [0x564197d2003b]
7: (AvlAllocator::_try_remove_from_tree(unsigned long, unsigned long, std::function<void (unsigned long, unsigned long, bool)>)+0x1d3) [0x564197d105a3]
8: (HybridAllocator::init_rm_free(unsigned long, unsigned long)+0xcc) [0x564197d2081c]
9: (BlueFS::mount()+0x22f) [0x564197b12fff]

2 ответов

15 просмотров

Ну просто так osd как правило не гибнут, логи на предмет того что предшествовало гибели ceph изучали?

Дмитрий- Автор вопроса
Dmitry Semenov
Ну просто так osd как правило не гибнут, логи на п...

Изучал, ничего не нашел. Потом передеплоил osd, соотвественно старые логи уже не глянуть

Похожие вопросы

Обсуждают сегодня

Не совсем в тему возможно, но может кто то пробовал поднять цеф на нодах вмвари и с последующим подключением через айскази в саму вмварю?
Alexander Zaitsev
34
Привет. Изучаю возможности iscsi gateway и у меня проблема. Я сделал по ману из оф. доки, но спустя какое-то время кластер начал ругаться след.ошибкой: user@ceph-node1:~$ sudo...
Vladimir Ivanov
3
Всем добра. продолжаю знакомится с ceph, возник вопрос на который я с ходу найти ответ не могу. Мысль следующая. Возможен ли кластер цеф, когда основная часть нод в одном дат...
mendisobal
28
Подскажите пожалуйста, а вот много вижу что фактор репликации надо ставить 3 и выше, мониторов по больше. Неужели цеф настолько нестабильный? Или просто используется в мощных ...
Тау Фокс
28
Всем здарова. После нештатного отключения электричества не запускаются два из трех OSD кластера Ceph, резвернутого через rook в кубере. Логи expand-bluefs 2023-10-09T09:15:23...
Vlad Trefilov
4
Всем привет, подскажите, пожалуйста, куда копать? *Warning по Ceph* Версия Ceph: ceph -v ceph version 15.2.17 (8a82819d84cf884bd39c17e3236e0632ac146dc4) octopus (stable) На...
Nesterov Ivan
7
Добрый день! Коллеги, подскажите пожалуйста, насколько целесообразно использовать CEPH, в качестве SDS для системы фото видео фиксации в проекте "Безопасный город"? Планируе...
Victor
23
Вот запихали диски в полки. Дальше что? Интерконнект сетевой между серверами какой нужен? Ну чтобы и публичка и бэк CEPH-а за ресурсы сетевые не передрались. А еще по публичк...
Andrey Nemysskiy
7
Есть ли какой-то штатный или известный механизм ограничения количества одновременного запуска осд при старте ноды в container-based кластере с cephadm? Или вариант с кастомиза...
Qntm
17
как понять какие физические диски используются в кластере ?
DimaE
17
Карта сайта