<div dir="ltr"><br><div class="gmail_extra"><br><div class="gmail_quote">On 14 November 2017 at 08:36, Ashish Pandey <span dir="ltr">&lt;<a href="mailto:aspandey@redhat.com" target="_blank">aspandey@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div><div style="font-family:&quot;times new roman&quot;,&quot;new york&quot;,times,serif;font-size:12pt;color:rgb(0,0,0)"><div><br></div><div>I remember we have fixed 2 issues where such kind of error messages were coming and also we were seeing issues on mount.<br></div><div>In one of the case the problem was in  dht. Unfortunately, I don&#39;t remember the BZ&#39;s for those issues. <br></div></div></div></blockquote><div><br></div><div>I think the DHT BZ you are referring to <a href="https://bugzilla.redhat.com/show_bug.cgi?id=1438423">1438423</a>. That has been fixed in 3.10.2 so an upgrade will help with this issue.</div><div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div><div style="font-family:&quot;times new roman&quot;,&quot;new york&quot;,times,serif;font-size:12pt;color:rgb(0,0,0)"><div></div><div>As glusterfs 3.10.1 is an old version, I would request you to please upgrade it to latest one. I am sure this<br></div><div>would have fix .<br></div><div><br></div><div>----<br></div><div>Ashish<br></div><div><br></div><div><br></div><div><br></div><div><br></div><hr id="gmail-m_2293775962555706809zwchr"><div style="color:rgb(0,0,0);font-weight:normal;font-style:normal;text-decoration:none;font-family:Helvetica,Arial,sans-serif;font-size:12pt"><b>From: </b>&quot;Nithya Balachandran&quot; &lt;<a href="mailto:nbalacha@redhat.com" target="_blank">nbalacha@redhat.com</a>&gt;<br><b>To: </b>&quot;Amudhan P&quot; &lt;<a href="mailto:amudhan83@gmail.com" target="_blank">amudhan83@gmail.com</a>&gt;, &quot;Ashish Pandey&quot; &lt;<a href="mailto:aspandey@redhat.com" target="_blank">aspandey@redhat.com</a>&gt;<br><b>Cc: </b>&quot;Amudhan Pandian&quot; &lt;<a href="mailto:amudh_an@hotmail.com" target="_blank">amudh_an@hotmail.com</a>&gt;, <a href="mailto:gluster-users@gluster.org" target="_blank">gluster-users@gluster.org</a><br><b>Sent: </b>Monday, November 13, 2017 7:14:30 PM<br><b>Subject: </b>Re: [Gluster-users] Error logged in fuse-mount log file<div><div class="gmail-h5"><br><div><br></div><div dir="ltr">Adding Ashish .<div><br></div><div>Hi Amudhan,</div><div><br></div><div>Can you check the gfids for every dir in that heirarchy? Maybe one of the parent dirs has a gfid mismatch.</div><div><br></div><div>Regards,</div><div>Nithya</div></div><div class="gmail_extra"><br><div class="gmail_quote">On 13 November 2017 at 17:39, Amudhan P <span dir="ltr">&lt;<a href="mailto:amudhan83@gmail.com" target="_blank">amudhan83@gmail.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">Hi Nithya,<div><br></div><div>I have checked gfid in all the bricks in disperse set for the folder. it all same there is no difference.</div><div><br></div><div>regards</div><div>Amudhan P</div><div><div class="gmail-m_2293775962555706809h5"><div><br></div><div><br></div><div><br><div class="gmail_extra"><br><div class="gmail_quote">On Fri, Nov 10, 2017 at 9:02 AM, Nithya Balachandran <span dir="ltr">&lt;<a href="mailto:nbalacha@redhat.com" target="_blank">nbalacha@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">Hi,<div><br></div><div>Comments inline.</div><div><br></div><div>Regards,</div><div>Nithya<br><div class="gmail_extra"><br><div class="gmail_quote"><span><span>On 9 November 2017 at 15:05, Amudhan Pandian <span dir="ltr">&lt;<a href="mailto:amudh_an@hotmail.com" target="_blank">amudh_an@hotmail.com</a>&gt;</span> wrote:<br></span></span><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div id="gmail-m_2293775962555706809m_-5334527960056458822m_1420759986740830093m_-7283411623809065954divtagdefaultwrapper" style="font-size:12pt;color:rgb(0,0,0);font-family:Calibri,Helvetica,sans-serif" dir="ltr"><p>resending mail from another id, doubt on whether mail reaches mailing list.</p><p><br></p><div style="color:rgb(0,0,0)"><div><div dir="ltr"><div class="gmail-m_2293775962555706809m_-5334527960056458822m_1420759986740830093m_-7283411623809065954x_gmail_quote">---------- Forwarded message ----------<br> From: <b class="gmail-m_2293775962555706809m_-5334527960056458822m_1420759986740830093m_-7283411623809065954x_gmail_sendername">Amudhan P</b> <span dir="ltr">&lt;<a href="mailto:amudhan83@gmail.com" target="_blank">amudhan83@gmail.com</a>&gt;</span><br> Date: Tue, Nov 7, 2017 at 6:43 PM<br> Subject: error logged in fuse-mount log file<br> To: Gluster Users &lt;<a href="mailto:gluster-users@gluster.org" target="_blank">gluster-users@gluster.org</a>&gt;<br> <br> <br><div dir="ltr"><div>Hi,</div><div><br></div><div>I am using glusterfs 3.10.1 and i am seeing below msg in fuse-mount log file.</div><div><br></div><div>what does this error mean? should i worry about this and how do i resolve this?</div><div><br></div><div>[2017-11-07 11:59:17.218973] W [MSGID: 109005] [dht-selfheal.c:2113:dht_<wbr>selfheal_directory] 0-glustervol-dht: Directory selfheal fail</div><div>ed : 1 subvolumes have unrecoverable errors. path = /fol1/fol2/fol3/fol4/fol5, gfid =3f856ab3-f538-43ee-b408-<wbr>53dd3da617fb</div><div>[2017-11-07 11:59:17.218935] I [MSGID: 109063] [dht-layout.c:713:dht_layout_<wbr>normalize] 0-glustervol-dht: Found anomalies in /fol1/fol2/fol3/fol4/fol5 (gfid = 3f856ab3-f538-43ee-b408-<wbr>53dd3da617fb). Holes=1 overlaps=0</div></div></div></div></div></div></div></div></blockquote><div><br></div><div><br></div><div>DHT found a problem in the layout of this directory so it tries to recreate and set the layout again.</div><div><br></div><div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div id="gmail-m_2293775962555706809m_-5334527960056458822m_1420759986740830093m_-7283411623809065954divtagdefaultwrapper" style="font-size:12pt;color:rgb(0,0,0);font-family:Calibri,Helvetica,sans-serif" dir="ltr"><div style="color:rgb(0,0,0)"><div><div dir="ltr"><div class="gmail-m_2293775962555706809m_-5334527960056458822m_1420759986740830093m_-7283411623809065954x_gmail_quote"><div dir="ltr"><div>[2017-11-07 11:59:17.199917] W [MSGID: 122019] [ec-helpers.c:413:ec_loc_gfid_<wbr>check] 0-glustervol-disperse-5: Mismatching GFID&#39;s in loc</div><div><br></div></div></div></div></div></div></div></div></blockquote><div><br></div><div>There appears to be a GFID mismatch for this directory on one of the bricks of this disperse set. Can you check the gfid xattr for this directory on all the bricks of this set?</div><div><br></div><div> </div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div id="gmail-m_2293775962555706809m_-5334527960056458822m_1420759986740830093m_-7283411623809065954divtagdefaultwrapper" style="font-size:12pt;color:rgb(0,0,0);font-family:Calibri,Helvetica,sans-serif" dir="ltr"><div style="color:rgb(0,0,0)"><div><div dir="ltr"><div class="gmail-m_2293775962555706809m_-5334527960056458822m_1420759986740830093m_-7283411623809065954x_gmail_quote"><div dir="ltr"><div><br></div><div>[2017-11-07 11:03:08.999769] W [MSGID: 109005] [dht-selfheal.c:2113:dht_<wbr>selfheal_directory] 0-glustervol-dht: Directory selfheal fail</div><div>ed : 1 subvolumes have unrecoverable errors. path = /sec_fol1/sec_fol2/sec_fol3/<wbr>sec_fol4/sec_fol5, gfid = 59b9762e-f419-4d56-9fa2-<wbr>eea9ebc055b2</div><div>[2017-11-07 11:03:08.999749] I [MSGID: 109063] [dht-layout.c:713:dht_layout_<wbr>normalize] 0-glustervol-dht: Found anomalies in /sec_fol1/sec_fol2/sec_fol3/<wbr>sec_fol4/sec_fol5 (gfid = 59b9762e-f419-4d56-9fa2-<wbr>eea9ebc055b2). Holes=1 overlaps=0</div><div>[2017-11-07 11:03:08.980275] W [MSGID: 122019] [ec-helpers.c:413:ec_loc_gfid_<wbr>check] 0-glustervol-disperse-7: Mismatching GFID&#39;s in loc</div><div><br></div><div><br></div><div><div>[2017-11-07 12:58:43.569801] I [MSGID: 109069] [dht-common.c:1324:dht_lookup_<wbr>unlink_cbk] 0-glustervol-dht: lookup_unlink returned with op_ret -&gt; 0 and op-errno -&gt; 0 for /thi_fol1/thi_fol2/thi_fol3/<wbr>thi_fol4/thi_fol5/thi_fol6/<wbr>thi_file1</div><div>[2017-11-07 12:58:43.528844] I [MSGID: 109045] [dht-common.c:2012:dht_lookup_<wbr>everywhere_cbk] 0-glustervol-dht: attempting deletion of stale linkfile /thi_fol1/thi_fol2/thi_fol3/<wbr>thi_fol4/thi_fol5/thi_fol6/<wbr>thi_file1 on glustervol-disperse-77 (hashed subvol is glustervol-disperse-106)</div></div><div><br></div></div></div></div></div></div></div></div></blockquote><div><br></div><div> <span style="color:rgb(0,0,0);font-family:Calibri,Helvetica,sans-serif;font-size:12pt">These can be ignored.</span></div><div><span style="color:rgb(0,0,0);font-family:Calibri,Helvetica,sans-serif;font-size:12pt"><br></span></div><div><span style="color:rgb(0,0,0);font-family:Calibri,Helvetica,sans-serif;font-size:12pt"><br></span></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div id="gmail-m_2293775962555706809m_-5334527960056458822m_1420759986740830093m_-7283411623809065954divtagdefaultwrapper" style="font-size:12pt;color:rgb(0,0,0);font-family:Calibri,Helvetica,sans-serif" dir="ltr"><div style="color:rgb(0,0,0)"><div><div dir="ltr"><div class="gmail-m_2293775962555706809m_-5334527960056458822m_1420759986740830093m_-7283411623809065954x_gmail_quote"><div dir="ltr"><div>regards</div><div>Amudhan P</div></div></div><br></div></div></div></div></div><br>______________________________<wbr>_________________<br> Gluster-users mailing list<br> <a href="mailto:Gluster-users@gluster.org" target="_blank">Gluster-users@gluster.org</a><br> <a href="http://lists.gluster.org/mailman/listinfo/gluster-users" rel="noreferrer" target="_blank">http://lists.gluster.org/<wbr>mailman/listinfo/gluster-users</a><br></blockquote></div><br></div></div></div><br>______________________________<wbr>_________________<br> Gluster-users mailing list<br> <a href="mailto:Gluster-users@gluster.org" target="_blank">Gluster-users@gluster.org</a><br> <a href="http://lists.gluster.org/mailman/listinfo/gluster-users" rel="noreferrer" target="_blank">http://lists.gluster.org/<wbr>mailman/listinfo/gluster-users</a><br></blockquote></div><br></div></div></div></div></div></blockquote></div><br></div><br>______________________________<wbr>_________________<br>Gluster-users mailing list<br><a href="mailto:Gluster-users@gluster.org" target="_blank">Gluster-users@gluster.org</a><br><a href="http://lists.gluster.org/mailman/listinfo/gluster-users" target="_blank">http://lists.gluster.org/<wbr>mailman/listinfo/gluster-users</a></div></div></div><div><br></div></div></div></blockquote></div><br></div></div>