Коллеги, привет. Наверное не совсем по теме, но может кто-то

сталкивался.
Пытаюсь тестировать ceph iscsi. У клиента такая потребность - подключать разделы по iSCSI на Windows Server 2019. Очень долго сидели на PetaSAN и всю дорогу жаловались на скорость. Скорость действительно не ахти.
Реально Symantec NetBackup больше 15MiB/s в ceph по iscsi не грузит (смотрю при помощи rbd perf image iotop).
И если руками запускать загрузку файла в цеф по iscsi, то те же 15MiB/s.
Есть утилита https://www.petasan.org/petasan-copy/, которая копирует в 16 потоков и в пике выдает ~90MiB/s на Винде. Тоже не ахти, но значительно лучше. Это бы всех +/- устроило. Если "эмулировать" загрузку в несколько потоков (несколько окон терминала cmd, в каждом копирование запущено), то каждый поток добавляет в общую загрузку канала примерно 15MiB/s, пока не упрется в те самые 90MiB/s

Решили для теста поднять чистый цеф (17.2.6) с iscsi https://docs.ceph.com/en/quincy/rbd/iscsi-target-cli/ и на Windows Server уперлись в те же 15MiB/s в один поток. А утилитой petasan-copy те же 90MiB/s
Поставили Linux. Он в iSCSI LUN пишет 90MiB/s в один поток.
(к слову - в RBD запись идет около 900Mib/s, у меня 3 хоста по 36 дисков по 6Тб 7200, R3, сеть 10G, mtu 9000)

Ну и вопрос:
Кто-нибудь знает как Windows Server iSCSI разогнать скорость загрузки в один поток больше 15MiB/s? Немного гуглил, безуспешно.
(я не уверен, что это возможно возможно, ибо нафига разработчики PetaSAN специальную утилиту под Винду написали, которая в несколько потоков пишет? Но вдруг...)

4 ответов

33 просмотра
Alexey Tselitan UTC+7- Автор вопроса

Если вдруг кому-то интересно. Поставил обновления на Windows Server и обновил драйвера сетевых карт. Скорость загрузки с 15MiB/s возрасла до 170-180MiB/s. 🥳 Сразу отвечу на вопрос, почему изначально этого не сделал - потому что изолированный сегмент сети, пришлось клиента уговаривать, чтоб сетевые доступы куда надо сделали. 🤷‍♂️ (Ну и работали они в таком режиме годами. Я и не предполагал, что они ОС совсем не обновляют)

Alexey Tselitan UTC+7
Если вдруг кому-то интересно. Поставил обновления ...

Ты бы сильно удивился на чем порой приходится людям работать

Похожие вопросы

Обсуждают сегодня

Не совсем в тему возможно, но может кто то пробовал поднять цеф на нодах вмвари и с последующим подключением через айскази в саму вмварю?
Alexander Zaitsev
34
Привет. Изучаю возможности iscsi gateway и у меня проблема. Я сделал по ману из оф. доки, но спустя какое-то время кластер начал ругаться след.ошибкой: user@ceph-node1:~$ sudo...
Vladimir Ivanov
3
Всем добра. продолжаю знакомится с ceph, возник вопрос на который я с ходу найти ответ не могу. Мысль следующая. Возможен ли кластер цеф, когда основная часть нод в одном дат...
mendisobal
28
Подскажите пожалуйста, а вот много вижу что фактор репликации надо ставить 3 и выше, мониторов по больше. Неужели цеф настолько нестабильный? Или просто используется в мощных ...
Тау Фокс
28
Всем здарова. После нештатного отключения электричества не запускаются два из трех OSD кластера Ceph, резвернутого через rook в кубере. Логи expand-bluefs 2023-10-09T09:15:23...
Vlad Trefilov
4
Всем привет, подскажите, пожалуйста, куда копать? *Warning по Ceph* Версия Ceph: ceph -v ceph version 15.2.17 (8a82819d84cf884bd39c17e3236e0632ac146dc4) octopus (stable) На...
Nesterov Ivan
7
Добрый день! Коллеги, подскажите пожалуйста, насколько целесообразно использовать CEPH, в качестве SDS для системы фото видео фиксации в проекте "Безопасный город"? Планируе...
Victor
23
Вот запихали диски в полки. Дальше что? Интерконнект сетевой между серверами какой нужен? Ну чтобы и публичка и бэк CEPH-а за ресурсы сетевые не передрались. А еще по публичк...
Andrey Nemysskiy
7
Есть ли какой-то штатный или известный механизм ограничения количества одновременного запуска осд при старте ноды в container-based кластере с cephadm? Или вариант с кастомиза...
Qntm
17
как понять какие физические диски используются в кластере ?
DimaE
17
Карта сайта