LINUX.ORG.RU
Форум — Admin  

Ceph iowait

 ,


0

3

Коллеги, приветствую!

Возникла проблема опыта на которую не хватает. Имеется кластер из 3 нод, 42 осдшки, hdd+ssd+nvme. В один момент резко на 2 нодах из трех скакнул iowait c 0.1 до 25. Соответственно кластер затупил как собака. Проверил все (Сеть, контроллеры, диски) все в норме. Может кто то сталкивался и направит меня по правильному пути?

3 ноды, 42 осдшки

Нифигово. Может памяти им не хватает, osd вообще штука прожорливая... Каковы характеристики нод? Версия дистрибутива и самого ceph тоже не помешает.

Pinkbyte ★★★★★
()
Последнее исправление: Pinkbyte (всего исправлений: 1)

Что iostat то говорит? Ребаланса нет? Нагрузка не скакнула - ceph osd pool stats

jewelry
()

Решил проблему временно установив write through в /sys/block/dm-$i/queue/write_cache для WAL лвмов (категорически не рекомендуется). Почему то WAL ссдшке не нравится write back кэш.

gfreeman
() автор топика
Ответ на: комментарий от gfreeman

а что за система? На centos и федоре есть шикарная утилита tuned. Там можно поиграться с профилями и посмотреть насколько станет лучше/хуже

anonymous
()
Ответ на: комментарий от Nastishka

Для nvme SSD я так понял это не очень решение.

gfreeman
() автор топика
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.
Admin