3 х сервера (AMD EPYC 7502P 32 core + 128ram). Через kubespray + ceph(каждый сервер 1хNvme 1TB). Имеется небольшой опыт эксплуатации на baremetal + gke. С ceph никогда не работал, из отго, что понял - следует выделить отдельную физическую сеть на отдельном физическом интерфейсе чисто под ceph. Какие еще рекомендации по оборудованию или возможные подводные камни?
Да, все правильно, но ты ещё хапнешь боли с кубом на нодах с двумя сетками
Ух)) Тут прям комбо)
только тебе надо будет специально договориться для отдельной физ сети. И сервера должны быть в одной стойке. Поэтому в hetzner такой сетап не масштабируется. Сервера из двух разных стояк отдельной физ сетью тебе не соеденят насколько я помню.
у hetzner есть virtual switch
угу, и он поверх текущего публичного сетевого интерфейса на 1GBit. Вот весело будет ceph поверх этого гонять, в перемешку с трафиком приложений
там можно заказать 10гбит uplink
можно заменить текущий 1Gbit, на 10Gbit. Но это все равно будет одна сетевка. Отдельных физ сетей под ceph ты не получишь, ну только в одной стойке можно, насколько я знаю
да это в 8 евро\ месяц обходится за 1Gbit свитч, доп порт уже есть.
зато ты не привязан к стойке как в случае с отдельной сетевухой
ну в этом и минус. Я про это и говорю. Нельзя получить отдельную физ сеть под ceph, если у тебя сетап растягивается больше чем на одну стойку. И ты привязан получается, если хочешь отдельную физ сетку для ceph.
А qos на свичах у хецнера есть?
там черный ящик
можно попросить хетцнер место в стойке зарезервировать. у них есть такая услуга.
да. Это понятно. Я писал о том что минус такой схемы: масштабирование ограничено одной стойкой
Обсуждают сегодня