Добрый день.
Возможно, кто-нибудь сталкивался с такой проблемой?
Имеется две ноды. В создании массива используется 6 HDD + раздел на SSD. Создаётся массив Glusterfs по следующей схеме:
1 хард = 1 брик с XFS.
Простая репликация с одной ноды на другую, без заморочек:
gluster volume create gm0 stripe 6 replica 2 gl0:/mnt/brick0/gm0 gl1:/mnt/brick0/gm0 gl0:/mnt/brick1/gm0 gl1:/mnt/brick1/gm0 и так далее...
Под Hot tier на каждой ноде зарезервирован отдельный брик, являющийся просто разделом с SSD, так же под XFS:
gluster volume tier gm0 attach replica 2 gl0:/mnt/hot0/tier gl1:/mnt/hot0/tier
Tier добавляется успешно, о чём сразу же говорит гластер и добавляет новую задачу на добавление слоя. Статус задачи сразу же меняется failed, слой не пристыковывается.
В логах следующая картина:
[2017-03-30 12:28:39.289192] I [MSGID: 100030] [glusterfsd.c:2454:main] 0-/usr/sbin/glusterfs: Started running /usr/sbin/glusterfs version 3.8.8 (args: /usr/sbin/glusterfs -s localhost --volfile-id rebalance/gm0 --xlator-option *dht.use-readdirp=yes --xlator-option *dht.lookup-unhashed=yes --xlator-option *dht.assert-no-child-down=yes --xlator-option *replicate*.data-self-heal=off --xlator-option *replicate*.metadata-self-heal=off --xlator-option *replicate*.entry-self-heal=off --xlator-option *dht.readdir-optimize=on --xlator-option *tier-dht.xattr-name=trusted.tier.tier-dht --xlator-option *dht.rebalance-cmd=6 --xlator-option *dht.node-uuid=d95d07bb-eae4-4284-b58f-a34bf72b76e2 --xlator-option *dht.commit-hash=3337080764 --socket-file /var/run/gluster/gluster-tier-9cab50ef-b1ad-4daf-ad3e-154b59837c2b.sock --pid-file /var/lib/glusterd/vols/gm0/tier/d95d07bb-eae4-4284-b58f-a34bf72b76e2.pid -l /var/log/glusterfs/gm0-tier.log)
[2017-03-30 12:28:39.296611] I [MSGID: 101190] [event-epoll.c:628:event_dispatch_epoll_worker] 0-epoll: Started thread with index 1
[2017-03-30 12:28:44.287246] E [MSGID: 101179] [graph.y:153:new_volume] 0-parser: Line 196: volume 'gm0-replicate-0' defined again
[2017-03-30 12:28:44.288413] E [MSGID: 100026] [glusterfsd.c:2307:glusterfs_process_volfp] 0-: failed to construct the graph
[2017-03-30 12:28:44.288736] E [graph.c:982:glusterfs_graph_destroy] (-->/usr/sbin/glusterfs(mgmt_getspec_cbk+0x12e) [0x55aeac20338e] -->/usr/sbin/glusterfs(glusterfs_process_volfp+0x148) [0x55aeac1fddc8] -->/usr/lib/x86_64-linux-gnu/libglusterfs.so.0(glusterfs_graph_destroy+0x6b) [0x7f56ec04f68b] ) 0-graph: invalid argument: graph [Invalid argument]
[2017-03-30 12:28:44.288810] W [glusterfsd.c:1327:cleanup_and_exit] (-->/usr/sbin/glusterfs(mgmt_getspec_cbk+0x12e) [0x55aeac20338e] -->/usr/sbin/glusterfs(glusterfs_process_volfp+0x16f) [0x55aeac1fddef] -->/usr/sbin/glusterfs(cleanup_and_exit+0x54) [0x55aeac1fd444] ) 0-: received signum (1), shutting down
Гуру, подскажите, куда копать? Кстати, на Centos 7 картина та же.
Debian 9, 4.9.13-1, Gluster 3.8.8.
debian, glusterfs, xfs