LINUX.ORG.RU
ФорумAdmin

Ceph iowait

 ,


0

3

Коллеги, приветствую!

Возникла проблема опыта на которую не хватает. Имеется кластер из 3 нод, 42 осдшки, hdd+ssd+nvme. В один момент резко на 2 нодах из трех скакнул iowait c 0.1 до 25. Соответственно кластер затупил как собака. Проверил все (Сеть, контроллеры, диски) все в норме. Может кто то сталкивался и направит меня по правильному пути?

3 ноды, 42 осдшки

Нифигово. Может памяти им не хватает, osd вообще штука прожорливая... Каковы характеристики нод? Версия дистрибутива и самого ceph тоже не помешает.

Pinkbyte ★★★★★ ()
Последнее исправление: Pinkbyte (всего исправлений: 1 )

Что iostat то говорит? Ребаланса нет? Нагрузка не скакнула - ceph osd pool stats

jewelry ()

Решил проблему временно установив write through в /sys/block/dm-$i/queue/write_cache для WAL лвмов (категорически не рекомендуется). Почему то WAL ссдшке не нравится write back кэш.

gfreeman ()
Ответ на: комментарий от gfreeman

а что за система? На centos и федоре есть шикарная утилита tuned. Там можно поиграться с профилями и посмотреть насколько станет лучше/хуже

anonymous ()
Для того чтобы оставить комментарий войдите или зарегистрируйтесь.