Есть идеи почему так много места занято метадатой? ceph tell

osd compact не помог, пересоздание osd.12 не помогло (хотя почему-то теперь он говорит 49G omap, а не метадата). На этих 100G nvme лежат только индексы от бакетов.

root@s101:~# ceph osd df | egrep "META|ssd" | sort -nk1
ID CLASS WEIGHT REWEIGHT SIZE RAW USE DATA OMAP META AVAIL %USE VAR PGS STATUS
7 ssd 0.09099 1.00000 93 GiB 43 GiB 124 MiB 1.9 GiB 41 GiB 50 GiB 46.01 0.70 46 up
8 ssd 0.09099 1.00000 93 GiB 45 GiB 124 MiB 1.8 GiB 43 GiB 48 GiB 48.48 0.74 42 up
9 ssd 0.09099 1.00000 93 GiB 57 GiB 124 MiB 2.2 GiB 55 GiB 36 GiB 61.63 0.94 52 up
10 ssd 0.09099 1.00000 93 GiB 54 GiB 124 MiB 2.0 GiB 52 GiB 39 GiB 57.61 0.87 46 up
11 ssd 0.09099 1.00000 93 GiB 48 GiB 124 MiB 1.8 GiB 46 GiB 45 GiB 51.63 0.78 45 up
12 ssd 0.09099 1.00000 93 GiB 50 GiB 124 MiB 49 GiB 757 MiB 43 GiB 53.38 0.81 45 up
13 ssd 0.09099 1.00000 93 GiB 44 GiB 124 MiB 1.5 GiB 43 GiB 49 GiB 47.46 0.72 45 up
root@s101:~#

rgw?

rgw

а что касается изначального вопроса, то надо бы пожалуй и остальные OSD compact, там тогда не только один будет с увесистым omap — rgw именно там данные индексов и хранит

Остальные нвме? Я им всем сделал компакт уже. Osd.12 получил 49G omap после пересоздания, а не после компакта. Я не понимаю трех вещей: 1. Как вообще получается 50g метадаты на 124мб даты (ведь дата на нвме это и есть индексы бакетов у меня) 2. Почему не помогает компакт? 3. Почему после пересоздания osd.12 49G метадаты перешло в омап?