<div dir="ltr"><div dir="ltr">Dear list,<br><br><div>We are using a Distributed-Replicate volume with replica 2 on Gluster 4.1.7 on CentOS 7. One of our nodes died recently and we will add new nodes and bricks to replace it soon. In preparation for the maintenance I wanted to rebalance the volume to make the disk thrashing less intense when we add/remove bricks, but after eight hours of scanning I see millions of &quot;failures&quot; in the rebalance status. The volume rebalance log shows many errors like:<br></div><br>[2019-05-07 06:06:02.310843] E [MSGID: 109023] [dht-rebalance.c:2907:gf_defrag_migrate_single_file] 0-data-dht: migrate-data failed for /ilri/miseq/MiSeq2/MiSeq2Output2018/180912_M03021_0002_000000000-BVM95/Thumbnail_Images/L001/C174.1/s_1_2103_c.jpg [No space left on device]<br><div><br></div><div>The bricks on the healthy nodes all have 1.5TB of free space so I&#39;m not sure what this error means. Could it be because one of the replicas is unavailable? I saw a similar bug report¹ about that. I&#39;ve started a simple fix-layout without data migration and it is working fine.<br></div><div><br></div><div>Thank you,<br></div><div><br></div><div>¹ <a href="https://access.redhat.com/solutions/456333">https://access.redhat.com/solutions/456333</a><br></div>--<br>Alan Orth<br><a href="mailto:alan.orth@gmail.com">alan.orth@gmail.com</a><br><a href="https://picturingjordan.com">https://picturingjordan.com</a><br><a href="https://englishbulgaria.net">https://englishbulgaria.net</a><br><a href="https://mjanja.ch">https://mjanja.ch</a><br>&quot;In heaven all the interesting people are missing.&quot; ―Friedrich Nietzsche</div></div>