5 одинаковых машинах - накопители hdd (20) и ssd (4), процы E5-2630 v3 (2 штуки), сеть 2x10 + 2x10. аппаратный конфиг одинаковый, в /proc/cpuinfo все flags между машинами тоже одинаковые, но на одной машине приребалансе или рекавери LA поднимается до 48, ЦП нагружены почти в потолок в user и system, iowait небольшой, утилизируют ЦП сильно процессы ceph-osd, по выводу perf top первая строчка - crc32_iscsi_00, красная. на остальных нодах эта функция никогда в первую пятёрку не вылазит
А оперативки хватает?
да, вполне. стоит [osd] osd memory target = 8589934592 всего 256ГБ ОЗУ на хосте
https://github.com/intel/isa-l/blob/master/crc/crc32_iscsi_00.asm ; Function to compute iscsi CRC32 with table-based recombination ; crc done "by 3" with block sizes 1920, 960, 480, 240
Обсуждают сегодня