<html>
  <head>

    <meta http-equiv="content-type" content="text/html; charset=utf-8">
  </head>
  <body text="#000000" bgcolor="#FFFFFF">
    <br>
    <div class="moz-forward-container"> Hi,
      <p>A client had some issues with their glusterfs cluster and
        botched an update. Currently they have loads of broken symlinks
        in their bricks .glusterfs subfolders <br>
      </p>
      <p>Like the second symlink one below<br>
      </p>
      <blockquote>
        <p>lrwxrwxrwx 1 root root 55 Jul 14 2017
          591c33db-e88b-4544-9372-bea4ec362360 -&gt;
          ../../83/4a/834a8af8-95a4-4f8a-9810-4e4d829e87f9/394947<br>
          lrwxrwxrwx 1 root root 74 Jul 17 2017
          591c89df-e5ed-4c5e-8ed1-643bbdf1ac3a -&gt;
../../bb/e3/bbe35c18-467e-46a2-96d1-3f3cf07d30b2/omgevingsvisie-gelderland</p>
        <p>./gfid-resolver.sh /data/home/brick1/
          591c33db-e88b-4544-9372-bea4ec362360<br>
          591c33db-e88b-4544-9372-bea4ec362360 Directory:
/data/home/brick1/*******/web_root/shared/private/uploads/image/file/39494</p>
        <p>./gfid-resolver.sh /data/home/brick1/
          591c89df-e5ed-4c5e-8ed1-643bbdf1ac3a<br>
          591c89df-e5ed-4c5e-8ed1-643bbdf1ac3a Directory:
          ./gfid-resolver.sh: line 46: cd:
/data/home/brick1//.glusterfs/59/1c/../../bb/e3/bbe35c18-467e-46a2-96d1-3f3cf07d30b2:
          Too many levels of symbolic links<br>
          /root/omgevingsvisie-gelderland</p>
      </blockquote>
      <p>The first is ok, the second link is broken.</p>
      <blockquote>
        <p>/data/home/brick1/.glusterfs/00/00<br>
          [root@storage01 00]# for l in $(find . -type l); do cd
          $(dirname $l); if [ ! -e "$(readlink $(basename $l))" ]; then
          echo $l; fi; cd - &gt; /dev/null; done<br>
          ./0000d3e7-bdaf-4c57-aaf8-e8d8906d85ce<br>
          ./0000b8dd-6982-4dc5-80ee-0d2226b8a274<br>
          ./0000d173-3e12-41a2-973a-ca167f764b73<br>
          ./00001420-a395-4f79-91db-690b009b8d3d<br>
          ./00009a6d-e885-4856-a9a1-d44badb4bef5<br>
          ./0000169f-1d61-4400-a13d-563df8dc78e1<br>
          ./00009338-f7d9-4c33-8761-b0a7d0eaf6ef<br>
          ./0000498f-3061-4c23-8633-410a21e54f60<br>
          ./0000e61f-eba8-4534-88f4-84c01c9bd698<br>
          ./00009cb9-7d55-4558-93f3-f79ab4c7938d<br>
          ./0000dd8c-ee79-47c4-9f7d-ef3569698907<br>
          ./0000403a-e9d8-4c76-9b62-72c396f34893<br>
          ./00004ff2-a0f7-49d7-ac90-3eac37c6adba<br>
          ./00002d40-3ed7-4d9b-8b72-1e4f0568be3d<br>
          ./0000dcce-6649-4446-ac4c-9eee16d5b009<br>
          ./0000c636-6d5a-4bd0-aeec-a9406af6f716<br>
          ./0000a5d9-57ac-416f-95c8-aa40577c2f99<br>
          ./000036c1-9ec2-4a1c-846f-8b00b88a3718<br>
          ./00003e8f-a9d8-4006-89ca-372800a814a7<br>
          ./00005244-aeb7-4151-b8d5-3e8cc4861080<br>
          ./00003c97-ea76-4c81-be46-9e943aefecce<br>
          ./00007ab9-c9a9-44b4-82d2-522a94270049<br>
          ./00002ec6-ae91-4cae-ab99-db2a84deecaa<br>
          ./0000778a-1489-4c43-bafc-bdcc134639dc</p>
      </blockquote>
      <p>Volume healing doesn't report any files to heal.</p>
      <p>Currently things are wonky as the client reports files missing
        that are actually there and this causes processes to fail.<br>
      </p>
      <p>Also there are many of these errors in the client log:</p>
      [2018-02-13 10:25:48.377536] W [MSGID: 114031]
      [client-rpc-fops.c:2151:client3_3_seek_cbk] 0-home-client-0:
      remote operation failed [No such device or address]<br>
      [2018-02-13 10:25:48.386911] W [MSGID: 114031]
      [client-rpc-fops.c:2151:client3_3_seek_cbk] 0-home-client-0:
      remote operation failed [No such device or address]<br>
      [2018-02-13 10:26:19.251306] W [MSGID: 114031]
      [client-rpc-fops.c:2151:client3_3_seek_cbk] 0-home-client-0:
      remote operation failed [No such device or address]<br>
      <p>Can I remove the orphaned links in .glusterfs? I haven't found
        a definitive answer yet and I don't want to cause more issues.</p>
      <blockquote> </blockquote>
    </div>
  <BR />
<BR />
<b style="color:#604c78"></b><br><br><span style="color:#604c78;"><font color="000000"><span style="mso-fareast-language:en-gb;" lang="NL">Met vriendelijke groet, With kind regards,<br><br>Jorick Astrego<br></span></font></span><b style="color:#604c78"><br>Netbulae Virtualization Experts </b><br><hr style="border:none;border-top:1px solid #ccc;"><table style="width: 522px"><tbody><tr><td style="width: 130px;font-size: 10px">Tel:  053 20 30 270</td>    <td style="width: 130px;font-size: 10px">info@netbulae.eu</td>    <td style="width: 130px;font-size: 10px">Staalsteden 4-3A</td>    <td style="width: 130px;font-size: 10px">KvK 08198180</td></tr><tr>    <td style="width: 130px;font-size: 10px">Fax: 053 20 30 271</td>    <td style="width: 130px;font-size: 10px">www.netbulae.eu</td>    <td style="width: 130px;font-size: 10px">7547 TA Enschede</td>    <td style="width: 130px;font-size: 10px">BTW NL821234584B01</td></tr></tbody></table><br><hr style="border:none;border-top:1px solid #ccc;"><BR />
</body>
</html>