<html><head><meta http-equiv="Content-Type" content="text/html; charset=utf-8"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; line-break: after-white-space;" class="">Hi,<div class=""><br class=""></div><div class="">I’m having problem with Gluster 3.12.11 geo-replication in&nbsp;CentOS 7.5. &nbsp;The process starts the geo-replication but after few minutes&nbsp;the log shows “connection to peer is broken”.</div><div class=""><br class=""></div><div class="">The “status detail” looks ok but no files are replicated.</div><div class=""><br class=""></div><div class=""><div class=""><font face="Courier" size="1" class="">[root@gluster1 vol_replicated]# &nbsp;gluster volume geo-replication vol_replicated <a href="mailto:geoaccount1@10.20.220.12" class="">geoaccount1@10.20.220.12</a>::georep_1 status detail | sort</font></div><div class=""><font face="Courier" size="1" class=""><br class=""></font></div><div class=""><font face="Courier" size="1" class="">-------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------</font></div><div class=""><font face="Courier" size="1" class="">MASTER NODE &nbsp; &nbsp;MASTER VOL &nbsp; &nbsp; &nbsp; &nbsp;MASTER BRICK &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; SLAVE USER &nbsp; &nbsp; SLAVE &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; SLAVE NODE &nbsp; &nbsp; &nbsp;STATUS &nbsp; &nbsp; CRAWL STATUS &nbsp; &nbsp;LAST_SYNCED &nbsp; &nbsp;ENTRY &nbsp; &nbsp;DATA &nbsp; &nbsp;META &nbsp; &nbsp;FAILURES &nbsp; &nbsp;CHECKPOINT TIME &nbsp; &nbsp;CHECKPOINT COMPLETED &nbsp; &nbsp;CHECKPOINT COMPLETION TIME</font></div><div class=""><font face="Courier" size="1" class="">gluster1 &nbsp; &nbsp; vol_replicated &nbsp; &nbsp;/export/brick1/vol_replicated &nbsp; &nbsp;geoaccount1 &nbsp; &nbsp;<a href="mailto:geoaccount1@10.20.220.12" class="">geoaccount1@10.20.220.12</a>::georep_1 &nbsp; &nbsp;10.20.220.12 &nbsp; &nbsp;Active &nbsp; &nbsp; Hybrid Crawl &nbsp; &nbsp;N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;8191 &nbsp; &nbsp; 6550 &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp; 0 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; N/A</font></div><div class=""><font face="Courier" size="1" class="">gluster2 &nbsp; &nbsp; vol_replicated &nbsp; &nbsp;/export/brick1/vol_replicated &nbsp; &nbsp;geoaccount1 &nbsp; &nbsp;<a href="mailto:geoaccount1@10.20.220.12" class="">geoaccount1@10.20.220.12</a>::georep_1 &nbsp; &nbsp;10.20.220.13 &nbsp; &nbsp;Passive &nbsp; &nbsp;N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;N/A &nbsp; &nbsp; &nbsp;N/A &nbsp; &nbsp; N/A &nbsp; &nbsp; N/A &nbsp; &nbsp; &nbsp; &nbsp; N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; N/A</font></div><div class=""><font face="Courier" size="1" class="">gluster3 &nbsp; &nbsp; vol_replicated &nbsp; &nbsp;/export/brick1/vol_replicated &nbsp; &nbsp;geoaccount1 &nbsp; &nbsp;<a href="mailto:geoaccount1@10.20.220.12" class="">geoaccount1@10.20.220.12</a>::georep_1 &nbsp; &nbsp;10.20.220.12 &nbsp; &nbsp;Passive &nbsp; &nbsp;N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;N/A &nbsp; &nbsp; &nbsp;N/A &nbsp; &nbsp; N/A &nbsp; &nbsp; N/A &nbsp; &nbsp; &nbsp; &nbsp; N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; N/A</font></div><div class=""><font face="Courier" size="1" class="">gluster4 &nbsp; &nbsp; vol_replicated &nbsp; &nbsp;/export/brick1/vol_replicated &nbsp; &nbsp;geoaccount1 &nbsp; &nbsp;<a href="mailto:geoaccount1@10.20.220.12" class="">geoaccount1@10.20.220.12</a>::georep_1 &nbsp; &nbsp;10.20.220.13 &nbsp; &nbsp;Active &nbsp; &nbsp; Hybrid Crawl &nbsp; &nbsp;N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;8191 &nbsp; &nbsp; 6532 &nbsp; &nbsp;0 &nbsp; &nbsp; &nbsp; 0 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;N/A &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; N/A</font></div></div><div class=""><br class=""></div><div class="">These are the messages on the log file.</div><div class=""><br class=""></div><div class=""><div class=""><font face="Courier" size="1" class="">[2018-07-23 19:35:50.18026] I [gsyncdstatus(/export/brick1/vol_replicated):276:set_active] GeorepStatus: Worker Status Change &nbsp; status=Active</font></div><div class=""><font face="Courier" size="1" class="">[2018-07-23 19:35:50.19126] I [gsyncdstatus(/export/brick1/vol_replicated):248:set_worker_crawl_status] GeorepStatus: Crawl Status Change &nbsp; &nbsp; &nbsp; status=History Crawl</font></div><div class=""><font face="Courier" size="1" class="">[2018-07-23 19:35:50.19480] I [master(/export/brick1/vol_replicated):1432:crawl] _GMaster: starting history crawl &nbsp; &nbsp; &nbsp; turns=1 stime=(0, 0) &nbsp; &nbsp;entry_stime=None &nbsp; &nbsp; &nbsp; &nbsp;etime=1532374550</font></div><div class=""><font face="Courier" size="1" class="">[2018-07-23 19:35:50.20056] E [repce(/export/brick1/vol_replicated):117:worker] &lt;top&gt;: call failed:</font></div><div class=""><font face="Courier" size="1" class="">Traceback (most recent call last):</font></div><div class=""><font face="Courier" size="1" class="">&nbsp; File "/usr/libexec/glusterfs/python/syncdaemon/repce.py", line 113, in worker</font></div><div class=""><font face="Courier" size="1" class="">&nbsp; &nbsp; res = getattr(self.obj, rmeth)(*in_data[2:])</font></div><div class=""><font face="Courier" size="1" class="">&nbsp; File "/usr/libexec/glusterfs/python/syncdaemon/changelogagent.py", line 54, in history</font></div><div class=""><font face="Courier" size="1" class="">&nbsp; &nbsp; num_parallel)</font></div><div class=""><font face="Courier" size="1" class="">&nbsp; File "/usr/libexec/glusterfs/python/syncdaemon/libgfchangelog.py", line 103, in cl_history_changelog</font></div><div class=""><font face="Courier" size="1" class="">&nbsp; &nbsp; raise ChangelogHistoryNotAvailable()</font></div><div class=""><font face="Courier" size="1" class="">ChangelogHistoryNotAvailable</font></div><div class=""><font face="Courier" size="1" class="">[2018-07-23 19:35:50.20999] E [repce(/export/brick1/vol_replicated):209:__call__] RepceClient: call failed on peer &nbsp; &nbsp; &nbsp;call=39755:140602890745664:1532374550.02 &nbsp; &nbsp; &nbsp; &nbsp;method=history &nbsp;error=ChangelogHistoryNotAvailable</font></div><div class=""><font face="Courier" size="1" class="">[2018-07-23 19:35:50.21156] I [resource(/export/brick1/vol_replicated):1675:service_loop] GLUSTER: Changelog history not available, using xsync</font></div><div class=""><font face="Courier" size="1" class="">[2018-07-23 19:35:50.28688] I [master(/export/brick1/vol_replicated):1543:crawl] _GMaster: starting hybrid crawl &nbsp; &nbsp; &nbsp; &nbsp;stime=(0, 0)</font></div><div class=""><font face="Courier" size="1" class="">[2018-07-23 19:35:50.30505] I [gsyncdstatus(/export/brick1/vol_replicated):248:set_worker_crawl_status] GeorepStatus: Crawl Status Change &nbsp; &nbsp; &nbsp; status=Hybrid Crawl</font></div><div class=""><font face="Courier" size="1" class="">[2018-07-23 19:35:54.35396] I [master(/export/brick1/vol_replicated):1554:crawl] _GMaster: processing xsync changelog &nbsp; path=/var/lib/misc/glusterfsd/vol_replicated/ssh%3A%2F%2Fgeoaccount1%4010.20.220.12%3Agluster%3A%2F%2F127.0.0.1%3Ageorep_1/a68ebfef8cdf86c3c6e9a0d85969cd3f/xsync/XSYNC-CHANGELOG.1532374550</font></div><div class=""><font face="Courier" size="1" class="">[2018-07-23 19:36:11.590595] E [syncdutils(/export/brick1/vol_replicated):304:log_raise_exception] &lt;top&gt;: connection to peer is broken</font></div></div><div class=""><br class=""></div><div class="">Anyone&nbsp;have some clues to what might be wrong?</div><div class=""><br class=""></div><div class="">Best regards,</div><div class=""><br class=""></div><div class="">Pablo J. Rebollo-Sosa</div></body></html>