стека). Захотелось ее почистить немного, да, понимаю, что данные надо чистить партициями, но нам какие-то метрики надо оставить, а какие-то можно совсем удалить. Сlickhouse позволяет удалять данные построчно (это будет долго и делаться где-то в фоне) - вот на таком объеме это в какое-то адекватное время сделается? или с таким вопросом лучше в канал ch?
Скорость чтения и записи на диск знаешь?
на ноду, на которую пишется данные - ~30 IO/sec на read и 30/sec IO на write на каждый из дисков —> репликация —> нода с которой читаем - там около 10/sec IO
30iops это что вообще за черепаха?
на сервере 10 SATA дисков, на каждый приходится по 30 IO/sec для r и w
при удалении КХ придется пересобрать заново все затронутые вашим запросом партиции. Так что все зависит от скорости ваших дисков и свободных ресурсов. Приготовьтесь к тому, что это будет медленно. Не хотите рисковать продом - мигрируйте одну партицию на тестовый инстанс и попробуйте удалить данные там. Потом экстраполируйте результат для прода.
тут не иопсы важны, а линейная скорость чтения/записи
Обсуждают сегодня