Добрый день! Коллеги, подскажите пожалуйста, насколько целесообразно использовать CEPH, в

качестве SDS для системы фото видео фиксации в проекте "Безопасный город"?
Планируемый полезный объём фото dидео архива 9,7 Пбайт в месяц.
Данный запрос, как альтернатива классической инфраструктуре Сервер+СХД.
Перечитал множество статей, нигде нет опыта эксплуатации CEPH в продакте.

М-м-м... На таких объёмах (что там с глубиной хранения, кстати?), SDS и «классика», как мне кажется, будут требовать совершенно разный набор железа.

как это нет, церн выпустил несколько статей.

Глубина, в зависимости от требований Заказчика. В данном случае (не могу назвать город), это 31 день, потом идет перезапись. Конечно, SDS и классика потребуют отличные друг от друга конфигурации. До сегодняшнего дня, мы использовали классических схемы. Серверы и схд. Сейчас, в рамках оптимизации инвестиций, рассматриваем решения на основе свободно распространяемого ПО, По этому поводу и вопрос в данном канале.

Могли бы Вы приложить ссылки на эти публикации? Именно бесплатные решения. SDS на платной основе множество.

Немного не понимаю проблематику. Вы не верите, что Ceph используют в продуктивах или вам нужен юзкейс с описанием параметров под большую нагрузку?

У церна там супер-бомжатские кластера насколько помню их пейпкеры, типа 100 мег памяти на осд

Проблематики нет. Вопрос в целесообразности использования ЦЕФ, в подобных проектах. т.к. запись 27/7 с камер на перекрестках, в публичных местах, вокзалы, аэропорты и т.д. Видоаналитика и в случае инцидентов, запрос видое для судебных разбирательств, поиска преступников и т.д.

нет, так не храню. Но там было про настройки для производительности, тесты, страдания с с3 (индексом) при хранении миллипрдов объектов и всё в таком духе. Все живы и, насколько известно, пользуются до сих пор. Сверху добавлю публичную дашборду от цефа , где есть кластера аналогичного размера https://telemetry-public.ceph.com/d/ZFYuv1qWz/telemetry?orgId=1

Целесообразность есть (но конечно экономику надо считать в зависимости от конфигурации и костов на класику и сервра). Ищите инженеров которые готовы вам сварить правильный коастер. Не пытайтесь экономить. 🤗

не похоже, хотя тут данных толком нет по железу https://indico.gsi.de/event/14500/attachments/39136/52951/2022.03.23%20-%20Ceph%20%26%20HPC%20GSI%20Talk.pdf

Я более древние смотрел несколько лет назад

Если не пытаться экономить, то можно продолжить реализовывать на классических СХД или например^ на Dell PowerScale

Так импортозамес же, делл нельзя

Нельзя, бр кии и требует имортозамещения :)

если только rados сам

Да ладно уж «нигде». История CEPH'а «в продакте» ещё со времён cloudmouse (или как их там)…

А вы архитектор этого проекта?

Я архитектор проекта на классических решениях. Серверы + СХД. Повторюсь, в рамках оптимизации бюджета инвестиций, поставлена задача рассмотреть возможность реализации, с использованием свободно распространяемого ПО. Например: СЕРН

Ну так прекрасная идея. Оптимизирует бюджет. Изучайте сами.

Для изучения, потребуются серьёзные инвестиции в организацию стенда. От сюда и вопрос в данном сообществе. Возможно. у кого-то есть опыт реализации систем видеонаблюдения на 5-10 Пбайт с использованием СЕРН.

Есть и больше. Петабайт.

есть, на 14ПБ кластер, и под видео и под не особо горячие данные да, там только s3

Не совсем про SDS, СХД от Pure у вас доступны? Они выпустили свежую линейку Pure FlashBlade E. Стоимость за терабайт практически равна HDD. Во всяком случае в нашем предложении. Попробуйте пообщаться, посмотреть.