А кто-то разворачивал кластер в кубере с помощь оператора от

percona?
Вроде как добавил опцию шардинга, но вижу, что на всех репликах копии данных в полном объеме 🥲

14 ответов

15 просмотров

а коллекцию как создавали? там надо явно настраивать шардирование

Yevhenii- Автор вопроса
Nick
а коллекцию как создавали? там надо явно настраива...

Думал достатно подключиться через mongos

Yevhenii
Думал достатно подключиться через mongos

и еще, пока данных мало они могут оставаться на одном из шардов, пока не будет производиться перебалансировка. В новых версиях 6+ меняли и она вроде поотзывчевее, в старых данных над много набрать чтоб они начали разъезжаться

Yevhenii- Автор вопроса

Проверьте что вы включили шардирование у коллекции (see https://www.mongodb.com/docs/manual/core/sharding-shard-a-collection/#std-label-sharding-shard-key-creation). Если точно шардировали, то посмотрите в статус шарда: sh.status(). Там будет информация о количестве чанков на шардах, статистика балансировщика и если были ошибки, то сообщения об ошибках https://www.mongodb.com/docs/manual/reference/method/sh.status/

Yevhenii- Автор вопроса

А уже на существующей коллекции с данными можно включить шардирование? И разнесет ли после этого информацию по нодам?

Yevhenii
А уже на существующей коллекции с данными можно вк...

Да, вы можете шардировать существующую коллекцию и балансировщик её постепенно разнесет по всему кластеру. Сразу отмечу что балансировка занимает кучу времени, плюс балансируется не по размеру, а по количеству чанков

Yevhenii- Автор вопроса

а как увидеть что балансировщик начал разносить чанки по шардам? в sh.status() виже следующее: { 'Currently enabled': 'yes', 'Failed balancer rounds in last 5 attempts': 0, 'Migration Results for the last 24 hours': 'No recent migrations', 'Currently running': 'no' } но вероятно не туда смотрю)

Yevhenii
а как увидеть что балансировщик начал разносить ча...

А у вас ниже есть информация о расшарженых базах и коллекциях?

Yevhenii- Автор вопроса
yopp 💉💉
А у вас ниже есть информация о расшарженых базах и...

[ { database: { _id: 'config', ... ... ... { database: { _id: 'crawler', primary: 'rs0', partitioned: true, version: { uuid: UUID("7c82efd0-3744-4480-9e0b-4b891ab2a01e"), timestamp: Timestamp({ t: 1691434708, i: 4 }), lastMod: 1 } }, collections: { 'crawler.pages33': { shardKey: { url: 1, hash: 1 }, unique: false, balancing: true, chunkMetadata: [ { shard: 'rs0', nChunks: 7136 } ], chunks: [ 'too many chunks to print, use verbose if you want to force print' ], tags: [] } } } ]

Yevhenii
[ { database: { _id: 'config', ... ......

А у вас добавлены остальные шарады в конфигурацию? https://www.mongodb.com/docs/manual/reference/method/sh.addShard/

Yevhenii- Автор вопроса
yopp 💉💉
А у вас добавлены остальные шарады в конфигурацию?...

shards [ { _id: 'rs0', host: 'rs0/mongodb-rs0-0.mongodb-rs0.infra.svc.k8s.us:27017,mongodb-rs0-1.mongodb-rs0.infra.svc.k8s.us:27017,mongodb-rs0-2.mongodb-rs0.infra.svc.k8s.us:27017', state: 1, topologyTime: Timestamp({ t: 1691434502, i: 3 }) } ] оператор сам добавил, но могу ошибаться)

Yevhenii
shards [ { _id: 'rs0', host: 'rs0/mongod...

У вас тут только один шард rs0. Вам нужно добавить все остальные

Похожие вопросы

Обсуждают сегодня

Кто знает как подружить Gstreamer с OpenCV? Вот такой пайплайн я шлю с гстримера но OpenCV + python у меня никак не получается его воспроизвести "gst-launch-1.0 nvarguscameras...
Artem
3
Приветствую. Есть N видео объектов (фильмы). Часть полной длины просмотра а часть короткие ( обрезаны титры). Задача найти идентичные фильмы. Я не в курсе, есть ли аналог шаз...
Nikolay Chudinov
7
Я колись ставив гуглу антиспам 3.0, може і норм, але мені не дуже зайшло. Теж думав тиждень, що його і куди. Зупинився на трех варіантах відразу всі три і включив 1. Перевір...
𝓔𝓾𝓰𝓮𝓷𝓮𝓥 J
2
Это везде так работает, или еще колдовать нужно?)
Квадрат Гипотенузы
6
Портфолио: Зовут меня Александр, мне 36 лет. Город Пушкино. Общий рабочий стаж: ~14 лет Уровень квалификации: Senior Full-stack developer Где прочесть мой код? https://github....
Magic
10
Портфолио: Зовут меня Александр, мне 41 год. Город Киров. Общий рабочий стаж: ~14 лет Уровень квалификации: Senior Full-stack developer Где прочесть мой код? https://github.co...
Magic
11
где собака, админ группы? нычкуется и боится проявить волю, в толерантность еще не наигрался? @yelizariev
Ognezar
61
Приветствую всех, возникла проблема, до этого писал бота в простом формате где при выполнении условий приходило через send_message информация, сейчас решил добавить хендлер на...
Andrew
4
Приветствую всех, есть вопросик. Передали проект на OctoberCms, без инсталяшки в полуразвернутом виде, нужно было залить бекап бд, после залития бд, оказалось, что части строк...
Лео
14
Всем привет! Есть камеры для наблюдения с встроенной видеоаналитикой (детектор лиц, например). Как я понял, все вычисления и анализ происходят на самом железе камеры, и пр...
Артур 🌞 Сапрыкин
1
Карта сайта