была рекомендация про размер bucket в 5Мб, чтобы скорость переезда была адекватной. Ожидаемый размер кластера 5Тб+. Выходит, что надо порядка 900 тыс. bucket, что кажется многовато, или нет? И есть ли смысл задавать число в степени 2 (тоже где-то натыкался на SO) или в целом разницы нет?
1) При 900к бакетов у вас при рестартах discovery бакетов будет очень долгий 2) Не обязательно степень двойки Про скорость переезда и размер бакета сложно сказать - всё относительно Если я правильно помню, то при переезде до полной передачи bucket переходит в RO, насколько большой промежуток вы можете себе позволить и как часто уже зависит от ваших целей
Для кластеров такого размера это адекватное количество. Но, как уже упомянули, протестируйте время дискавери. (возможно подтюнить таймауты)
Попробуйте разбить на несколько независимых кластеров.
Обсуждают сегодня