<div dir="ltr"><div dir="ltr"><br></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Sat, Mar 30, 2019 at 1:18 AM &lt;<a href="mailto:brandon@thinkhuge.net">brandon@thinkhuge.net</a>&gt; wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div lang="EN-US"><div class="gmail-m_-4382140799777799585WordSection1"><div><div><div><p class="MsoNormal">Hello,<u></u><u></u></p><p class="MsoNormal"><u></u> <u></u></p><p class="MsoNormal">Yes I did find some hits on this in the following logs. We started seeing failures after upgrading to 5.3 from 4.6.  </p></div></div></div></div></div></blockquote><div><br></div><div>There are no relevant fixes for ping timer expiry between 5.5 and 5.3. So, I attribute the failures not being seen to the increased number of client.event-threads and server.event-threads to 8 in current setup from lower values earlier.</div><div><br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div lang="EN-US"><div class="gmail-m_-4382140799777799585WordSection1"><div><div><div><p class="MsoNormal">If you want me to check for something else let me know.   Thank you all on the gluster team for finding and fixing that problem whatever it was!<u></u><u></u></p><p class="MsoNormal"><u></u> <u></u></p><p class="MsoNormal">[root@lonbaknode3 glusterfs]# zgrep ping_timer /var/log/glusterfs/home-volbackups*<u></u><u></u></p><p class="MsoNormal">....<u></u><u></u></p><p class="MsoNormal">/var/log/glusterfs/home-volbackups.log-20190317.gz:[2019-03-16 10:34:44.419605] C [rpc-clnt-ping.c:162:rpc_clnt_ping_timer_expired] 0-volbackups-client-3: server <a href="http://1.2.3.4:49153" target="_blank">1.2.3.4:49153</a> has not responded in the last 42 seconds, disconnecting.<u></u><u></u></p><p class="MsoNormal">/var/log/glusterfs/home-volbackups.log-20190317.gz:[2019-03-16 10:34:44.419672] C [rpc-clnt-ping.c:162:rpc_clnt_ping_timer_expired] 0-volbackups-client-6: server <a href="http://1.2.3.4:49153" target="_blank">1.2.3.4:49153</a> has not responded in the last 42 seconds, disconnecting.<u></u><u></u></p><p class="MsoNormal">/var/log/glusterfs/home-volbackups.log-20190317.gz:[2019-03-16 10:34:57.425211] C [rpc-clnt-ping.c:162:rpc_clnt_ping_timer_expired] 0-volbackups-client-9: server <a href="http://1.2.3.4:49153" target="_blank">1.2.3.4:49153</a> has not responded in the last 42 seconds, disconnecting.<u></u><u></u></p><p class="MsoNormal">/var/log/glusterfs/home-volbackups.log-20190317.gz:[2019-03-16 11:46:25.768650] C [rpc-clnt-ping.c:162:rpc_clnt_ping_timer_expired] 0-volbackups-client-6: server <a href="http://1.2.3.4:49153" target="_blank">1.2.3.4:49153</a> has not responded in the last 42 seconds, disconnecting.<u></u><u></u></p><p class="MsoNormal">/var/log/glusterfs/home-volbackups.log-20190317.gz:[2019-03-16 16:02:29.921450] C [rpc-clnt-ping.c:162:rpc_clnt_ping_timer_expired] 0-volbackups-client-3: server <a href="http://1.2.3.4:49153" target="_blank">1.2.3.4:49153</a> has not responded in the last 42 seconds, disconnecting.<u></u><u></u></p><p class="MsoNormal">....<u></u><u></u></p><p class="MsoNormal"><u></u> <u></u></p><p class="MsoNormal">-----<u></u><u></u></p></div><div><p class="MsoNormal" style="margin-bottom:12pt">What was the version you saw failures in? Were there any logs matching with the pattern &quot;ping_timer_expired&quot; earlier? <u></u><u></u></p></div></div></div></div></div></blockquote></div></div>