LINUX.ORG.RU

Наиболее производительная кластерная ФС

 


0

1

Добрый день!
Посоветуйте наиболее производительную кластерную файловую систему для интенсивного чтения и записи. Достаточно большая часть файлов будет размером 4k , далее 100K и в меньшей степени 100Mb Суммарный объём около 10000000 файлов .. Сырой объём на хранилке 20Tb

Как это сейчас работает :

Есть сервера приложений на отдельных серверах, один есть сервер с NFS-шарой, где лежат миллионы таких файлов… Сервера приложений берут данные с NFS шары и молотят всякие аналитические репорты. Происходит все это крайне медленно..

Сейчас хочу попробовать положить данные на кластерную ФС , чтобы хоть как-то ускорить процесс..
Что посоветуете из производительных ФС сейчас ?


P.s Есть Ceph –кластер на 50Tb (но как RBD) , может быть с CephFS начать тесты ?

CephFS, говорят, до сих пор ещё очень нетороплива.

bdfy ★★★★ ()
Ответ на: комментарий от kto_tama

Почитал документацию, но пока по диагонали.. Выглядит очень интересно.. Где-то у себя используете ?

Doronin ()
Ответ на: комментарий от Doronin

Для 20ТБ люстра - это жуткий оверхед. И с мелкими файлами у нее все плохо.

Deleted ()
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.