<html><head></head><body><div class="ydp338460b0yahoo-style-wrap" style="font-family:courier new, courier, monaco, monospace, sans-serif;font-size:16px;"><div></div>
        <div dir="ltr" data-setdir="false">You are the second person (excluding me) who observes this behaviour.</div><div dir="ltr" data-setdir="false">The easiest way to resolve this is to:</div><div dir="ltr" data-setdir="false">1. Check which file is newest (there is a timestamp in the file) for :</div><div dir="ltr" data-setdir="false"><div><div dir="ltr" style="color: rgb(38, 40, 42); font-family: Helvetica Neue, Helvetica, Arial, sans-serif;" data-setdir="false">/gluster_bricks/data/data<span><span style="color: rgb(38, 40, 42); font-family: Helvetica Neue, Helvetica, Arial, sans-serif;">/7ac28c32-947b-4ad5-8d69-213a205f06e8/images/d7c11f2e-58e4-4fe1-8236-6ded0f4dd757/e566f230-df72-4073-aecf-7e5a8d6b569b.meta</span></span></div></div><div dir="ltr" style="color: rgb(38, 40, 42); font-family: Helvetica Neue, Helvetica, Arial, sans-serif;" data-setdir="false"><span><span style="color: rgb(38, 40, 42); font-family: Helvetica Neue, Helvetica, Arial, sans-serif;"><span><span style="color: rgb(38, 40, 42); font-family: Helvetica Neue, Helvetica, Arial, sans-serif;"><span><span style="color: rgb(38, 40, 42); font-family: Helvetica Neue, Helvetica, Arial, sans-serif; font-size: 16px;">And for :</span></span></span></span></span></span></div><div dir="ltr" style="color: rgb(38, 40, 42); font-family: Helvetica Neue, Helvetica, Arial, sans-serif;" data-setdir="false"><span><span style="color: rgb(38, 40, 42); font-family: Helvetica Neue, Helvetica, Arial, sans-serif;"><span><span style="color: rgb(38, 40, 42); font-family: Helvetica Neue, Helvetica, Arial, sans-serif;"><span><span style="color: rgb(38, 40, 42); font-family: Helvetica Neue, Helvetica, Arial, sans-serif; font-size: 16px;">/gluster_bricks/data/data</span><span style="color: rgb(38, 40, 42); font-family: Helvetica Neue, Helvetica, Arial, sans-serif; font-size: 16px;">/</span></span>7ac28c32-947b-4ad5-8d69-213a205f06e8/images/079904a4-71af-492c-bb2f-b45a918e8a2e/fce4b64d-2444-4f11-b226-db75bb2960c2.meta</span></span><br></span></span></div><br></div><div dir="ltr" data-setdir="false">Let's assume node3storage.ovirt.local has the newest data.</div><div dir="ltr" data-setdir="false"><br></div><div dir="ltr" data-setdir="false">2.Then you can just backup (just in case you change your mind) the files locally and rsync from node3storage.ovirt.local (actually replace with the node with newest timestamp in the file) to the other bricks.</div><div dir="ltr" data-setdir="false"><br></div><div dir="ltr" data-setdir="false">3. Run a gluster heal just to notify gluster that the issue is resolved.</div><div dir="ltr" data-setdir="false"><br></div><div dir="ltr" data-setdir="false">In my case one of the nodes had a newer version of the file (I am using replica 2 arbiter 1 volume) and the gfid was different and this prevented Gluster from healing that.</div><div dir="ltr" data-setdir="false"><br></div><div dir="ltr" data-setdir="false">Usually , oVirt just updates the timestamp in the meta files - so even an older version is not a problem.</div><div dir="ltr" data-setdir="false"><br></div><div dir="ltr" data-setdir="false">P.S.: What version of gluster are you using. I suppose v6.5 or v6.6 , right ?</div><div dir="ltr" data-setdir="false"><br></div><div dir="ltr" data-setdir="false">Best Regards,</div><div dir="ltr" data-setdir="false">Strahil Nikolov</div><div dir="ltr" data-setdir="false"><br></div><div dir="ltr" data-setdir="false"><br></div><div dir="ltr" data-setdir="false"><br></div><div><br></div>
        
        </div><div id="ydp22192ad3yahoo_quoted_7165734837" class="ydp22192ad3yahoo_quoted">
            <div style="font-family:'Helvetica Neue', Helvetica, Arial, sans-serif;font-size:13px;color:#26282a;">
                
                <div>
                    В сряда, 18 декември 2019 г., 16:18:12 ч. Гринуич+2, Szilágyi Balázs &lt;szilagyi.balazs@pcvilag.hu&gt; написа:
                </div>
                <div><br></div>
                <div><br></div>
                <div><div dir="ltr">Dear Gluster Users,<br></div><div dir="ltr"><br></div><div dir="ltr">I'm a newbie to gluster storage and during the stability testing I made <br></div><div dir="ltr">a node reboot and I've got some heal issues after that, that i'm unable <br></div><div dir="ltr">to fix.<br></div><div dir="ltr">Anyway the vm's are running fine from the storage, and I did not <br></div><div dir="ltr">discovered any data corruption.<br></div><div dir="ltr">The system is oVirt version 4.3.7. I have 3 nodes with a replica 3. <br></div><div dir="ltr">Please let me know what to do with the pending heals that are unable to <br></div><div dir="ltr">finish.<br></div><div dir="ltr">Also let me know if some more details are necessary.<br></div><div dir="ltr"><br></div><div dir="ltr">Thanks,<br></div><div dir="ltr"> &nbsp; Balazs<br></div><div dir="ltr"><br></div><div dir="ltr">[<a href="mailto:root@node2" rel="nofollow" target="_blank">root@node2</a> ~]# gluster volume status data<br></div><div dir="ltr">Status of volume: data<br></div><div dir="ltr">Gluster process&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; TCP Port&nbsp; RDMA Port Online&nbsp; Pid<br></div><div dir="ltr">------------------------------------------------------------------------------<br></div><div dir="ltr">Brick node1storage.ovirt.local:/gluster_bri<br></div><div dir="ltr">cks/data/data&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 49152&nbsp;&nbsp;&nbsp;&nbsp; 0 Y&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 4187<br></div><div dir="ltr">Brick node2storage.ovirt.local:/gluster_bri<br></div><div dir="ltr">cks/data/data&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 49154&nbsp;&nbsp;&nbsp;&nbsp; 0 Y&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 6163<br></div><div dir="ltr">Brick node3storage.ovirt.local:/gluster_bri<br></div><div dir="ltr">cks/data/data&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 49154&nbsp;&nbsp;&nbsp;&nbsp; 0 Y&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 19439<br></div><div dir="ltr">Self-heal Daemon on localhost&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; N/A&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; N/A Y&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 3136<br></div><div dir="ltr">Self-heal Daemon on node3storage.ovirt.loca<br></div><div dir="ltr">l&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; N/A&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; N/A Y&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 5876<br></div><div dir="ltr">Self-heal Daemon on node1storage.ovirt.loca<br></div><div dir="ltr">l&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; N/A&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; N/A Y&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 15479<br></div><div dir="ltr"><br></div><div dir="ltr">Task Status of Volume data<br></div><div dir="ltr">------------------------------------------------------------------------------<br></div><div dir="ltr">There are no active volume tasks<br></div><div dir="ltr"><br></div><div dir="ltr">[<a href="mailto:root@node2" rel="nofollow" target="_blank">root@node2</a> ~]#<br></div><div dir="ltr">[<a href="mailto:root@node2" rel="nofollow" target="_blank">root@node2</a> ~]# gluster volume heal data info summary<br></div><div dir="ltr">Brick node1storage.ovirt.local:/gluster_bricks/data/data<br></div><div dir="ltr">Status: Connected<br></div><div dir="ltr">Total Number of entries: 2<br></div><div dir="ltr">Number of entries in heal pending: 2<br></div><div dir="ltr">Number of entries in split-brain: 0<br></div><div dir="ltr">Number of entries possibly healing: 0<br></div><div dir="ltr"><br></div><div dir="ltr">Brick node2storage.ovirt.local:/gluster_bricks/data/data<br></div><div dir="ltr">Status: Connected<br></div><div dir="ltr">Total Number of entries: 2<br></div><div dir="ltr">Number of entries in heal pending: 2<br></div><div dir="ltr">Number of entries in split-brain: 0<br></div><div dir="ltr">Number of entries possibly healing: 0<br></div><div dir="ltr"><br></div><div dir="ltr">Brick node3storage.ovirt.local:/gluster_bricks/data/data<br></div><div dir="ltr">Status: Connected<br></div><div dir="ltr">Total Number of entries: 0<br></div><div dir="ltr">Number of entries in heal pending: 0<br></div><div dir="ltr">Number of entries in split-brain: 0<br></div><div dir="ltr">Number of entries possibly healing: 0<br></div><div dir="ltr"><br></div><div dir="ltr">[<a href="mailto:root@node2" rel="nofollow" target="_blank">root@node2</a> ~]# gluster volume heal data info<br></div><div dir="ltr">Brick node1storage.ovirt.local:/gluster_bricks/data/data<br></div><div dir="ltr">/7ac28c32-947b-4ad5-8d69-213a205f06e8/images/d7c11f2e-58e4-4fe1-8236-6ded0f4dd757/e566f230-df72-4073-aecf-7e5a8d6b569b.meta<br></div><div dir="ltr">/7ac28c32-947b-4ad5-8d69-213a205f06e8/images/079904a4-71af-492c-bb2f-b45a918e8a2e/fce4b64d-2444-4f11-b226-db75bb2960c2.meta<br></div><div dir="ltr">Status: Connected<br></div><div dir="ltr">Number of entries: 2<br></div><div dir="ltr"><br></div><div dir="ltr">Brick node2storage.ovirt.local:/gluster_bricks/data/data<br></div><div dir="ltr">/7ac28c32-947b-4ad5-8d69-213a205f06e8/images/d7c11f2e-58e4-4fe1-8236-6ded0f4dd757/e566f230-df72-4073-aecf-7e5a8d6b569b.meta<br></div><div dir="ltr">/7ac28c32-947b-4ad5-8d69-213a205f06e8/images/079904a4-71af-492c-bb2f-b45a918e8a2e/fce4b64d-2444-4f11-b226-db75bb2960c2.meta<br></div><div dir="ltr">Status: Connected<br></div><div dir="ltr">Number of entries: 2<br></div><div dir="ltr"><br></div><div dir="ltr">Brick node3storage.ovirt.local:/gluster_bricks/data/data<br></div><div dir="ltr">Status: Connected<br></div><div dir="ltr">Number of entries: 0<br></div><div dir="ltr"><br></div><div dir="ltr">________<br></div><div dir="ltr"><br></div><div dir="ltr">Community Meeting Calendar:<br></div><div dir="ltr"><br></div><div dir="ltr">APAC Schedule -<br></div><div dir="ltr">Every 2nd and 4th Tuesday at 11:30 AM IST<br></div><div dir="ltr">Bridge: <a href="https://bluejeans.com/441850968" rel="nofollow" target="_blank">https://bluejeans.com/441850968</a><br></div><div dir="ltr"><br></div><div dir="ltr">NA/EMEA Schedule -<br></div><div dir="ltr">Every 1st and 3rd Tuesday at 01:00 PM EDT<br></div><div dir="ltr">Bridge: <a href="https://bluejeans.com/441850968" rel="nofollow" target="_blank">https://bluejeans.com/441850968</a><br></div><div dir="ltr"><br></div><div dir="ltr">Gluster-users mailing list<br></div><div dir="ltr"><a href="mailto:Gluster-users@gluster.org" rel="nofollow" target="_blank">Gluster-users@gluster.org</a><br></div><div dir="ltr"><a href="https://lists.gluster.org/mailman/listinfo/gluster-users" rel="nofollow" target="_blank">https://lists.gluster.org/mailman/listinfo/gluster-users</a></div></div>
            </div>
        </div></body></html>