<div style="line-height:1.7;color:#000000;font-size:14px;font-family:Arial"><div style="margin: 0;">There should be one port for communication and&nbsp;<span style="font-family: arial; white-space: pre-wrap;">transport</span>, both of which are defined by this&nbsp;<span style="font-family: arial; white-space: pre-wrap;">option</span>.</div><div style="margin: 0;"><br></div><div style="margin: 0;">Judging from the current log, I suspect that the port is hard-coded.</div><div style="margin: 0;"><br></div><div style="margin: 0;">Is there any other solutionˋ</div><div style="margin: 0;"><br></div><p style="margin: 0;"><br></p><p style="margin: 0;"><br></p><p style="margin: 0;"><br></p><p style="margin: 0;"><br></p><div style="position:relative;zoom:1"></div><div id="divNeteaseMailCard"></div><p style="margin: 0;"><br></p><pre><br>婓 2020-12-08 14:50:13ㄛ"Strahil Nikolov" &lt;hunter86_bg@yahoo.com&gt; 迡耋ㄩ

&gt;This option is only for the transport:

&gt;option transport.socket.listen-port 24017

&gt;

&gt;So it still needs 24007 for communication.

&gt;

&gt;Maybe there is an option for changing the glusterd port , but I can't find it.

&gt;

&gt;Best Regards,

&gt;Strahil Nikolov

&gt;

&gt;

&gt;

&gt;

&gt;

&gt;

&gt;圾 志找抉把扶我抗, 8 忱快抗快技志把我 2020 忍., 07:52:38 坐把我扶批我折+2, sky &lt;x_hsky@163.com&gt; 扶忘扭我扼忘: 

&gt;

&gt;

&gt;

&gt;

&gt;

&gt;Hi:

&gt;&nbsp; &nbsp; &nbsp;The firewall has been confirmed to be closed.&nbsp;

&gt;&nbsp; &nbsp; &nbsp;The following is the startup logㄛand the ports of both nodes are 24017ㄩ

&gt;&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; Final graph:&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp;

&gt;&nbsp; &nbsp; &nbsp; &nbsp; &nbsp;+------------------------------------------------------------------------------+&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp;

&gt;&nbsp; &nbsp; &nbsp; &nbsp;1: volume management&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp;

&gt;&nbsp; &nbsp; &nbsp; &nbsp;2:&nbsp; &nbsp; &nbsp;type mgmt/glusterd&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;

&gt;&nbsp; &nbsp; &nbsp; &nbsp;3:&nbsp; &nbsp; &nbsp;option rpc-auth.auth-glusterfs on&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp;

&gt;&nbsp; &nbsp; &nbsp; &nbsp;4:&nbsp; &nbsp; &nbsp;option rpc-auth.auth-unix on&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;

&gt;&nbsp; &nbsp; &nbsp; &nbsp;5:&nbsp; &nbsp; &nbsp;option rpc-auth.auth-null on

&gt;&nbsp; &nbsp; &nbsp; &nbsp;6:&nbsp; &nbsp; &nbsp;option rpc-auth-allow-insecure on

&gt;&nbsp; &nbsp; &nbsp; &nbsp;7:&nbsp; &nbsp; &nbsp;option transport.listen-backlog 1024

&gt;&nbsp; &nbsp; &nbsp; &nbsp;8:&nbsp; &nbsp; &nbsp;option max-port 60999

&gt;&nbsp; &nbsp; &nbsp; &nbsp;9:&nbsp; &nbsp; &nbsp;option base-port 49252

&gt;&nbsp; &nbsp; &nbsp; 10:&nbsp; &nbsp; &nbsp;option event-threads 1

&gt;&nbsp; &nbsp; &nbsp;11:&nbsp; &nbsp; &nbsp;option ping-timeout 0

&gt;&nbsp; &nbsp; &nbsp;12:&nbsp; &nbsp; &nbsp;option transport.rdma.listen-port 24008

&gt;&nbsp; &nbsp; &nbsp;13:&nbsp; &nbsp; &nbsp;option transport.socket.listen-port 24017

&gt;&nbsp; &nbsp; &nbsp;14:&nbsp; &nbsp; &nbsp;option transport.socket.read-fail-log off

&gt;&nbsp; &nbsp; &nbsp;15:&nbsp; &nbsp; &nbsp;option transport.socket.keepalive-interval 2

&gt;&nbsp; &nbsp; &nbsp;16:&nbsp; &nbsp; &nbsp;option transport.socket.keepalive-time 10

&gt;&nbsp; &nbsp; &nbsp;17:&nbsp; &nbsp; &nbsp;option transport-type rdma

&gt;&nbsp; &nbsp; &nbsp;18:&nbsp; &nbsp; &nbsp;option working-directory /var/lib/glusterd

&gt;&nbsp; &nbsp; &nbsp;19: end-volume&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;&nbsp;

&gt;&nbsp; &nbsp; &nbsp;20:&nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;

&gt;&nbsp; &nbsp; &nbsp;+------------------------------------------------------------------------------+

&gt;&nbsp; &nbsp; &nbsp;[2020-12-08 05:44:37.300602] I [MSGID: 101190] [event-epoll.c:682:event_dispatch_epoll_worker] 0-epoll: Started thread with index 0

&gt;

&gt;&nbsp; &nbsp; And the following is the log displayed after executing the command ※gluster peer probe dev2§. It shows that the connected port is 24007. Is this port hard-coded?

&gt;

&gt;&nbsp;[2020-12-08 05:45:23.136309] I [MSGID: 106487] [glusterd-handler.c:1082:__glusterd_handle_cli_probe] 0-glusterd: Received CLI probe req dev2 24007&nbsp;

&gt;[2020-12-08 05:45:23.138990] I [MSGID: 106128] [glusterd-handler.c:3541:glusterd_probe_begin] 0-glusterd: Unable to find peerinfo for host: dev2 (24007)&nbsp;

&gt;[2020-12-08 05:45:23.208257] W [MSGID: 106061] [glusterd-handler.c:3315:glusterd_transport_inet_options_build] 0-glusterd: Failed to get tcp-user-timeout&nbsp;

&gt;[2020-12-08 05:45:23.208387] I [rpc-clnt.c:1014:rpc_clnt_connection_init] 0-management: setting frame-timeout to 600

&gt;[2020-12-08 05:45:23.255375] I [MSGID: 106498] [glusterd-handler.c:3470:glusterd_friend_add] 0-management: connect returned 0&nbsp;

&gt;[2020-12-08 05:45:23.260180] I [MSGID: 106004] [glusterd-handler.c:6204:__glusterd_peer_rpc_notify] 0-management: Peer &lt;dev2&gt; (&lt;00000000-0000-0000-0000-000000000000&gt;), in state &lt;Establishing Connection&gt;, has disconnected from glusterd.&nbsp;

&gt;[2020-12-08 05:45:23.260997] I [MSGID: 106599] [glusterd-nfs-svc.c:161:glusterd_nfssvc_reconfigure] 0-management: nfs/server.so xlator is not installed&nbsp;

&gt;[2020-12-08 05:45:23.261412] I [MSGID: 106544] [glusterd.c:152:glusterd_uuid_init] 0-management: retrieved UUID: 769fa9d7-a204-4c44-a15e-b5eac367e322&nbsp;

&gt;[2020-12-08 05:45:23.261480] I [rpc-clnt.c:1014:rpc_clnt_connection_init] 0-quotad: setting frame-timeout to 600

&gt;[2020-12-08 05:45:23.261737] I [MSGID: 106131] [glusterd-proc-mgmt.c:86:glusterd_proc_stop] 0-management: quotad already stopped&nbsp;

&gt;[2020-12-08 05:45:23.261780] I [MSGID: 106568] [glusterd-svc-mgmt.c:265:glusterd_svc_stop] 0-management: quotad service is stopped&nbsp;

&gt;[2020-12-08 05:45:23.261915] I [rpc-clnt.c:1014:rpc_clnt_connection_init] 0-bitd: setting frame-timeout to 600

&gt;[2020-12-08 05:45:23.262039] I [MSGID: 106131] [glusterd-proc-mgmt.c:86:glusterd_proc_stop] 0-management: bitd already stopped&nbsp;

&gt;[2020-12-08 05:45:23.262064] I [MSGID: 106568] [glusterd-svc-mgmt.c:265:glusterd_svc_stop] 0-management: bitd service is stopped&nbsp;

&gt;[2020-12-08 05:45:23.262110] I [rpc-clnt.c:1014:rpc_clnt_connection_init] 0-scrub: setting frame-timeout to 600

&gt;[2020-12-08 05:45:23.262289] I [MSGID: 106131] [glusterd-proc-mgmt.c:86:glusterd_proc_stop] 0-management: scrub already stopped&nbsp;

&gt;[2020-12-08 05:45:23.262331] I [MSGID: 106568] [glusterd-svc-mgmt.c:265:glusterd_svc_stop] 0-management: scrub service is stopped

&gt;

&gt;

&gt;

&gt;

&gt;

&gt;

&gt;婓 2020-12-08 05:01:12ㄛ"Strahil Nikolov" &lt;hunter86_bg@yahoo.com&gt; 迡耋ㄩ

&gt;&gt; Are you sure that the firewall is open. Usually , there could be a firewall inbetween the nodes.

&gt;&gt; 

&gt;&gt; Also, you can run a tcpdump on nodeA and issue a peer probe from NodeB and see if there is anything hitting it.

&gt;&gt; 

&gt;&gt; What about enabling trace logs and checking for any clues. You can find details about the log level at : https://access.redhat.com/documentation/en-us/red_hat_gluster_storage/3/html/administration_guide/configuring_the_log_level Best Regards,

&gt;&gt; Strahil Nikolov

&gt;&gt; 

&gt;&gt; 圾 10:07 +0800 扶忘 07.12.2020 (扭扶), sky 扶忘扭我扼忘:

&gt;&gt;&gt; Hi:&nbsp;

&gt;&gt;&gt; 1.&nbsp;The ports of both nodes are changed to 24017

&gt;&gt;&gt; 2.&nbsp;After installation, change the port and start directly (non-restart)

&gt;&gt;&gt; 3.&nbsp;I tried, but the nodes in the pool cannot connect after restarting. The log shows an attempt to connect to the default port

&gt;&gt;&gt; 

&gt;&gt;&gt; Steps(both node1 and node2)

&gt;&gt;&gt; &nbsp; &nbsp;# yum install glusterfs glusterfs-server glusterfs-fuse

&gt;&gt;&gt; &nbsp; &nbsp;# vim&nbsp;/etc/glusterfs/glusterd.vol

&gt;&gt;&gt;&nbsp;&nbsp;....

&gt;&gt;&gt;&nbsp;&nbsp;option transport.socket.listen-port 24017

&gt;&gt;&gt;&nbsp;&nbsp;....

&gt;&gt;&gt;&nbsp;&nbsp;# systemctl start glusterd

&gt;&gt;&gt; 

&gt;&gt;&gt;&nbsp;&nbsp;# gluster peer probe node2

&gt;&gt;&gt;&nbsp;&nbsp;Probe returned with Transport endpoint is not connected

&gt;&gt;&gt; 

&gt;&gt;&gt; After changing the port back to 24007 and restarting, the connection is normal

&gt;&gt;&gt; 

&gt;&gt;&gt; 

&gt;&gt;&gt; 

&gt;&gt;&gt; 

&gt;&gt;&gt; 

&gt;&gt;&gt; 

&gt;&gt;&gt; 

&gt;&gt;&gt; 婓 2020-12-06 19:27:01ㄛ"Strahil Nikolov" &lt;hunter86_bg@yahoo.com&gt; 迡耋ㄩ&gt;Did you change the port on both nodes ?&gt;Did you restart glusterd on both nodes (the one you do peer probe and the other one that is being probed) ?&gt;&gt;Have you tried to first peer probe and then change the port on all nodes in the pool ?&gt;&gt;&gt;Best Regards,&gt;Strahil Nikolov&gt;&gt;&gt;&gt;&gt;&gt;圾 扭快找抓抗, 4 忱快抗快技志把我 2020 忍., 12:18:42 坐把我扶批我折+2, sky &lt;x_hsky@163.com&gt; 扶忘扭我扼忘: &gt;&gt;&gt;&gt;&gt;&gt;linux version: cenots 7.5&nbsp;&gt;gluster verison: 7.5.1&gt;/etc/glusterfs/glusterd.vol:&nbsp;&gt;volume management&gt;&nbsp; &nbsp; type mgmt/glusterd&gt;&nbsp; &nbsp; option working-directory /var/lib/glusterd&gt;&nbsp; &nbsp; option transport-type socket,rdma&gt;&nbsp; &nbsp; option transport.socket.keepalive-time 10&gt;&nbsp; &nbsp; option transport.socket.keepalive-interval 2&gt;&nbsp; &nbsp; option transport.socket.read-fail-log off&gt;&nbsp; &nbsp; option transport.socket.listen-port 24017&gt;&nbsp; &nbsp; option transport.rdma.listen-port 24008&gt;&nbsp; &nbsp; option ping-timeout 0&gt;&nbsp; &nbsp; option event-threads 1&gt;#&nbsp; &nbsp;option lock-timer 180&gt;#&nbsp; &nbsp;option transport.address-family inet6&gt;&nbsp; &nbsp; option base-port 49252&gt;&nbsp; &nbsp; option max-port&nbsp; 60999&gt;end-volume&gt;&gt;I started normally after changing the ports on both nodes(port from 24007 to 24017), but I cannot add nodes through the ＆gluster peer probe node2＆ command,&gt;It always prompts me:&nbsp;&gt;&nbsp; &nbsp;Probe returned with Transport endpoint is not connected&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&gt;&nbsp;&gt;&gt;&gt;&nbsp;&gt;________&gt;&gt;&gt;&gt;Community Meeting Calendar:&gt;&gt;Schedule -&gt;Every 2nd and 4th Tuesday at 14:30 IST / 09:00 UTC&gt;Bridge: https://meet.google.com/cpu-eiue-hvk&gt;Gluster-users mailing list&gt;Gluster-users@gluster.org&gt;https://lists.gluster.org/mailman/listinfo/gluster-users

&gt;&gt;&gt; 

&gt;&gt;&gt; 

&gt;&gt;&gt; 

&gt;&gt;&gt; &nbsp;

&gt;&gt; 

&gt;

&gt;

&gt;

&gt;&nbsp;

</pre></div><br><br><span title="neteasefooter"><p>&nbsp;</p></span>