Proxmox виснет на хард рейде SAS 2008 LSI 9211-8i

Фирмварь прошита последняя?

Да, также пробывал разные версии proxmox

Да

Какая именно версия?

Пробывал ставить ВинСервер без проблем работает, версия 14 вот ссылка на вывод программы https://ibb.co/wByJ5ct

А винты не битые? И зачем вообще тебе аппаратный raid под proxmox.

Пробывал ставить ВинСервер без проблем работает,

усмысле на bare hardware виндосервером этот контроллер без нареканий пашет?

Пробывал

Пробовал, едрить!

версия 14 вот ссылка на вывод программы https://ibb.co/wByJ5ct

Версия 20.00.07.00. Судя по скриншоту - только что фирмварь только что обновили?

Винты 100% целые, под винсервером все ок

И зачем вообще тебе аппаратный raid

9211-8i - это хороший HBA.

Да пробывал разные все одинаково

пробывал

Я так перестану отвечать.

На firmware 20.00.07 все проблемы с отвалом винтов были решены. Сам с таким сталкивался. Прошей заодно bios.rom и uefi.rom до последних версий, может, они что-то чудят.

Прошей в IT-mode: https://docs.broadcom.com/docs/12350530
Не используй hba вместо raid
Не используй hardware raid на proxmox.

С чегой то на проксмоксе не использовать железный раид?

Ну бывают случаи, когда меньше проблем с mdadm. Но это не зависит от дистра вообще, а зависит от железки.

Там есть zol.

там есть zfs. Глючный и жручий.

Бывает, но если требуется запускать много виртуалок, то никакой mdadm или zfs не поможет. Все виснет на io.

Тут у пятизвёздочника акк угнали.

Это опять же зависит от. В моём случае старенький адаптек сливает по иопсам mdadm'у. Бесспорно, что хорошая железка справится с задачей куда лучше, но она и денег стоит. А за даже половину денег можно вкрячить софтварный ссд кэш.

Прошил, еще вопрос контроллер встроен в мат плату сервера, плата SuperMicro X8SI6-F, они одинаковые с внешним писайным или могут быть отличия?

Практически одинаковые. Легко перешивпются между супермикровской фирмварью на оригинальную от lsi.

Зашил биос с супермикро тоже, через некоторое время отваливаеться, возможно проблема в драйвере, я дополнительно не ставил не каких драйверов, просто чистый проксмокс, еще пробывал убунту таже петрушка, может есть еще какието мысли что можно попробывать сделать

Еще обнаружил нюанс, утилита mpt2bios, при перестроении рейда через некоторое время зависает, при перестроении рейда в винде через мегарейд все нормально

при перестроении рейда через некоторое время зависает

Стопэ, какой рейд? Какая прошивка стоит, IT или IR?

IR

raid 1

Понятно. Выноси нафиг ir, ставь it и программный райд средствами proxmox.

Я ему 2 дня назад это писал.

Я там совсем не понял этого: «Не используй hba вместо raid». Наоборот «используй hba вместо raid» надо.

Я там совсем не понял этого: «Не используй hba вместо raid».

Он использует hba адаптер, в качестве raid адаптера.
Я написал, что так делать не надо.

А, так принято!

Перепрошил в ит поставил проксмокс на отдельный диск, а два диска подключенных к контроллеру в зфс зеркало, и тоже самое, блин

Покажи

dmesg |grep mpt2sas

Может, кабель переподключить надо, контакты протереть. Очень странно, что отваливается только /dev/sda (и ошибки sector 0)

И неплохо было бы smart-атрибуты показать (pastebin, только, а не картинка)

ок в понедельник все отпишу, спасибо за помощь