LINUX.ORG.RU
решено Форум — Admin  

Ceph поверх RDMA

 , ,


0

3

Ситуация следующая:

есть три сервера с двухпортовыми Infiniband-карточками, соединены они кольцом (без свитча), на каждом из трех сервером запущен opensm для одного из портов 

server1:port1->server2:port2
server2:port1->server3:port2
server3:port1->server1:port2
В доке по Ceph написано:

Убедитесь что у вас в наличии работающие ping и rping между всеми узлами Ceph.
Проверка rping выполняется так:
Сервер: rping –s –v server_ip
Клиент: rping –c –v –a server_ip

Ping выполняется без вопросов, а вот rping выполняется только в одну сторону, то есть с server1 на server2 пингуется, а наоборот — нет.

Заведется ли у меня ceph over rdma или нет, и если не заведется, то как решить эту проблему?

★★★★★

Давненько не следил за ситуацией, но раньше у ceph была масса проблем с rdma.

Deleted
()
Ответ на: комментарий от Ingwar

Подробней не скажу. Видел жалобы на всё подряд, что отламывается то там, то сям.
Нашёл пост на реддит, там сообщают, что на сей день rdma является недостаточно протестированным.
https://www.reddit.com/r/ceph/comments/9rmc2s/ceph_rdma_infiniband/
попробуй поспрашивать в https://t.me/ceph_ru.

Deleted
()
Ответ на: комментарий от Deleted

Мне кажется ceph-users@lists.ceph.com — наиболее подходящее место для подобных вопросов. И, насколько я помню, поддержкой RDMA занимается сообщества, с железом для тестов у них проблемы, поэтому у автора исходного сообщения есть два выхода:

0. Подождать.

1. Помолиться Богородице об удаче и везении.

Ну, технически он может ещё и предоставить железо сообществу и помочьс тестированием, но будем реалистами.

ugoday ★★★★★
()

Спасибо.

Ingwar ★★★★★
() автор топика
Вы не можете добавлять комментарии в эту тему. Тема перемещена в архив.
Admin