Уважаемые чатовцы, подскажите как быть: если сделать большой дисковый кэш

Question

Уважаемые чатовцы, подскажите как быть: если сделать большой дисковый кэш

- медленно выполняются инсерты, а если сделать маленький - при SELECT и O_DIRECT часто возникает ошибка доступа к файлу.... сделал средний - теперь и инсерты медленные и ошибка доступа появляется.. где та тонкая грань?

#backend #clickhouse #database #devops #programming #russian

0

02.03.2019

4 ответов

12 просмотров

Denny [Altinity]

так не должно быть. как вы меняете размер кеша? Что вы вообще подразумеваете под этим? Какая ошибка, точно (копи пейст)? O_dicrect по умолчанию включается на файлах больше 10гб (можно его выключить вообще). какая фс?

0

02.03.2019

Aliaksandr Valialkin

Под большим дисковым кэшем вы понимаете большие значения vm_dirty*? Его размер должен быть согласован со скоростью записи на диск. Чем выше скорость записи, тем больше можно делать кэш "грязных" страниц. Если сделать слишком большой кэш для медленных дисков, то получите периодические задержки на (cache_size_in_bytes/disk_write_speed_bytes_per_second) секунд, когда операционка будет скидывать содержимое кэша на диск. Например, если размер кэша - 10ГБ, а максимальная скорость записи на диск - 100МБ/с, то получаются задержки до 10000/100=100 секунд. Что касается ошибок при O_DIRECT, то это выглядит как баг на стороне КХ, который нужно зарепортить и пофиксить

0

02.03.2019

Alexey Milovidov

Что за ошибка доступа?

0

02.03.2019

Victor Stepankov · Accepted Answer

Victor Stepankov

думаете почему почему в названии канала "Не тормозит"? Потому что не указано, селекты или вставки не тормозят, так и живём. Может у вас с методологией чего не так? Много инсертов мелких?

0

02.03.2019

184 похожих чатов

Уважаемые чатовцы, подскажите как быть: если сделать большой дисковый кэш

4 ответов

Похожие вопросы