Коллеги, привет. Наверное не совсем по теме, но может кто-то

сталкивался.
Пытаюсь тестировать ceph iscsi. У клиента такая потребность - подключать разделы по iSCSI на Windows Server 2019. Очень долго сидели на PetaSAN и всю дорогу жаловались на скорость. Скорость действительно не ахти.
Реально Symantec NetBackup больше 15MiB/s в ceph по iscsi не грузит (смотрю при помощи rbd perf image iotop).
И если руками запускать загрузку файла в цеф по iscsi, то те же 15MiB/s.
Есть утилита https://www.petasan.org/petasan-copy/, которая копирует в 16 потоков и в пике выдает ~90MiB/s на Винде. Тоже не ахти, но значительно лучше. Это бы всех +/- устроило. Если "эмулировать" загрузку в несколько потоков (несколько окон терминала cmd, в каждом копирование запущено), то каждый поток добавляет в общую загрузку канала примерно 15MiB/s, пока не упрется в те самые 90MiB/s

Решили для теста поднять чистый цеф (17.2.6) с iscsi https://docs.ceph.com/en/quincy/rbd/iscsi-target-cli/ и на Windows Server уперлись в те же 15MiB/s в один поток. А утилитой petasan-copy те же 90MiB/s
Поставили Linux. Он в iSCSI LUN пишет 90MiB/s в один поток.
(к слову - в RBD запись идет около 900Mib/s, у меня 3 хоста по 36 дисков по 6Тб 7200, R3, сеть 10G, mtu 9000)

Ну и вопрос:
Кто-нибудь знает как Windows Server iSCSI разогнать скорость загрузки в один поток больше 15MiB/s? Немного гуглил, безуспешно.
(я не уверен, что это возможно возможно, ибо нафига разработчики PetaSAN специальную утилиту под Винду написали, которая в несколько потоков пишет? Но вдруг...)

4 ответов

11 просмотров
Alexey Tselitan UTC+7- Автор вопроса

Если вдруг кому-то интересно. Поставил обновления на Windows Server и обновил драйвера сетевых карт. Скорость загрузки с 15MiB/s возрасла до 170-180MiB/s. 🥳 Сразу отвечу на вопрос, почему изначально этого не сделал - потому что изолированный сегмент сети, пришлось клиента уговаривать, чтоб сетевые доступы куда надо сделали. 🤷‍♂️ (Ну и работали они в таком режиме годами. Я и не предполагал, что они ОС совсем не обновляют)

Alexey Tselitan UTC+7
Если вдруг кому-то интересно. Поставил обновления ...

Ты бы сильно удивился на чем порой приходится людям работать

Похожие вопросы

Обсуждают сегодня

Не совсем в тему возможно, но может кто то пробовал поднять цеф на нодах вмвари и с последующим подключением через айскази в саму вмварю?
Alexander Zaitsev
34
Привет. Изучаю возможности iscsi gateway и у меня проблема. Я сделал по ману из оф. доки, но спустя какое-то время кластер начал ругаться след.ошибкой: user@ceph-node1:~$ sudo...
Vladimir Ivanov
3
Всем здарова. После нештатного отключения электричества не запускаются два из трех OSD кластера Ceph, резвернутого через rook в кубере. Логи expand-bluefs 2023-10-09T09:15:23...
Vlad Trefilov
4
Подскажите пожалуйста, а вот много вижу что фактор репликации надо ставить 3 и выше, мониторов по больше. Неужели цеф настолько нестабильный? Или просто используется в мощных ...
Тау Фокс
28
Всем добра. продолжаю знакомится с ceph, возник вопрос на который я с ходу найти ответ не могу. Мысль следующая. Возможен ли кластер цеф, когда основная часть нод в одном дат...
mendisobal
28
Всем привет, подскажите, пожалуйста, куда копать? *Warning по Ceph* Версия Ceph: ceph -v ceph version 15.2.17 (8a82819d84cf884bd39c17e3236e0632ac146dc4) octopus (stable) На...
Nesterov Ivan
7
Добрый день! Коллеги, подскажите пожалуйста, насколько целесообразно использовать CEPH, в качестве SDS для системы фото видео фиксации в проекте "Безопасный город"? Планируе...
Victor
23
Есть ли какой-то штатный или известный механизм ограничения количества одновременного запуска осд при старте ноды в container-based кластере с cephadm? Или вариант с кастомиза...
Qntm
17
#Вопрос Доброе утро. Есть 3 ноды Proxmox на каждой ноде LAN 10g 8Nmve u2 ssd на текущий момент zfs, СХД нет есть жирный NAS на 180tb. На сколько велика вероятность катастрофы...
f1gar0 tyt
14
Вот запихали диски в полки. Дальше что? Интерконнект сетевой между серверами какой нужен? Ну чтобы и публичка и бэк CEPH-а за ресурсы сетевые не передрались. А еще по публичк...
Andrey Nemysskiy
7
Карта сайта