<div dir="auto">The latter one is the one I have been referring to. And it is pretty dangerous Imho</div><div class="gmail_extra"><br><div class="gmail_quote">Il 31/ago/2017 01:19,  &lt;<a href="mailto:lemonnierk@ulrar.net" target="_blank">lemonnierk@ulrar.net</a>&gt; ha scritto:<br type="attribution"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Solved as to 3.7.12. The only bug left is when adding new bricks to<br>
create a new replica set, now sure where we are now on that bug but<br>
that&#39;s not a common operation (well, at least for me).<br>
<br>
On Wed, Aug 30, 2017 at 05:07:44PM +0200, Ivan Rossi wrote:<br>
&gt; There has ben a bug associated to sharding that led to VM corruption that<br>
&gt; has been around for a long time (difficult to reproduce I understood). I<br>
&gt; have not seen reports on that for some time after the last fix, so<br>
&gt; hopefully now VM hosting is stable.<br>
&gt;<br>
&gt; 2017-08-30 3:57 GMT+02:00 Everton Brogliatto &lt;<a href="mailto:brogliatto@gmail.com">brogliatto@gmail.com</a>&gt;:<br>
&gt;<br>
&gt; &gt; Ciao Gionatan,<br>
&gt; &gt;<br>
&gt; &gt; I run Gluster 3.10.x (Replica 3 arbiter or 2 + 1 arbiter) to provide<br>
&gt; &gt; storage for oVirt 4.x and I have had no major issues so far.<br>
&gt; &gt; I have done online upgrades a couple of times, power losses, maintenance,<br>
&gt; &gt; etc with no issues. Overall, it is very resilient.<br>
&gt; &gt;<br>
&gt; &gt; Important thing to keep in mind is your network, I run the Gluster nodes<br>
&gt; &gt; on a redundant network using bonding mode 1 and I have performed<br>
&gt; &gt; maintenance on my switches, bringing one of them off-line at a time without<br>
&gt; &gt; causing problems in my Gluster setup or in my running VMs.<br>
&gt; &gt; Gluster recommendation is to enable jumbo frames across the<br>
&gt; &gt; subnet/servers/switches you use for Gluster operations. Your switches must<br>
&gt; &gt; support MTU 9000 + 208 at least.<br>
&gt; &gt;<br>
&gt; &gt; There were two occasions where I purposely caused a split brain situation<br>
&gt; &gt; and I was able to heal the files manually.<br>
&gt; &gt;<br>
&gt; &gt; Volume performance tuning can make a significant difference in Gluster. As<br>
&gt; &gt; others have mentioned previously, sharding is recommended when running VMs<br>
&gt; &gt; as it will split big files in smaller pieces, making it easier for the<br>
&gt; &gt; healing to occur.<br>
&gt; &gt; When you enable sharding, the default sharding block size is 4MB which<br>
&gt; &gt; will significantly reduce your writing speeds. oVirt recommends the shard<br>
&gt; &gt; block size to be 512MB.<br>
&gt; &gt; The volume options you are looking here are:<br>
&gt; &gt; features.shard on<br>
&gt; &gt; features.shard-block-size 512MB<br>
&gt; &gt;<br>
&gt; &gt; I had an experimental setup in replica 2 using an older version of Gluster<br>
&gt; &gt; few years ago and it was unstable, corrupt data and crashed many times. Do<br>
&gt; &gt; not use replica 2. As others have already said, minimum is replica 2+1<br>
&gt; &gt; arbiter.<br>
&gt; &gt;<br>
&gt; &gt; If you have any questions that I perhaps can help with, drop me an email.<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; Regards,<br>
&gt; &gt; Everton Brogliatto<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; On Sat, Aug 26, 2017 at 1:40 PM, Gionatan Danti &lt;<a href="mailto:g.danti@assyoma.it">g.danti@assyoma.it</a>&gt;<br>
&gt; &gt; wrote:<br>
&gt; &gt;<br>
&gt; &gt;&gt; Il <a href="tel:26-08-2017%2007" value="+12608201707">26-08-2017 07</a>:38 Gionatan Danti ha scritto:<br>
&gt; &gt;&gt;<br>
&gt; &gt;&gt;&gt; I&#39;ll surely give a look at the documentation. I have the &quot;bad&quot; habit<br>
&gt; &gt;&gt;&gt; of not putting into production anything I know how to repair/cope<br>
&gt; &gt;&gt;&gt; with.<br>
&gt; &gt;&gt;&gt;<br>
&gt; &gt;&gt;&gt; Thanks.<br>
&gt; &gt;&gt;&gt;<br>
&gt; &gt;&gt;<br>
&gt; &gt;&gt; Mmmm, this should read as:<br>
&gt; &gt;&gt;<br>
&gt; &gt;&gt; &quot;I have the &quot;bad&quot; habit of not putting into production anything I do NOT<br>
&gt; &gt;&gt; know how to repair/cope with&quot;<br>
&gt; &gt;&gt;<br>
&gt; &gt;&gt; Really :D<br>
&gt; &gt;&gt;<br>
&gt; &gt;&gt;<br>
&gt; &gt;&gt; Thanks.<br>
&gt; &gt;&gt;<br>
&gt; &gt;&gt; --<br>
&gt; &gt;&gt; Danti Gionatan<br>
&gt; &gt;&gt; Supporto Tecnico<br>
&gt; &gt;&gt; Assyoma S.r.l. - <a href="http://www.assyoma.it" rel="noreferrer" target="_blank">www.assyoma.it</a><br>
&gt; &gt;&gt; email: <a href="mailto:g.danti@assyoma.it">g.danti@assyoma.it</a> - <a href="mailto:info@assyoma.it">info@assyoma.it</a><br>
&gt; &gt;&gt; GPG public key ID: FF5F32A8<br>
&gt; &gt;&gt; ______________________________<wbr>_________________<br>
&gt; &gt;&gt; Gluster-users mailing list<br>
&gt; &gt;&gt; <a href="mailto:Gluster-users@gluster.org">Gluster-users@gluster.org</a><br>
&gt; &gt;&gt; <a href="http://lists.gluster.org/mailman/listinfo/gluster-users" rel="noreferrer" target="_blank">http://lists.gluster.org/<wbr>mailman/listinfo/gluster-users</a><br>
&gt; &gt;&gt;<br>
&gt; &gt;<br>
&gt; &gt;<br>
&gt; &gt; ______________________________<wbr>_________________<br>
&gt; &gt; Gluster-users mailing list<br>
&gt; &gt; <a href="mailto:Gluster-users@gluster.org">Gluster-users@gluster.org</a><br>
&gt; &gt; <a href="http://lists.gluster.org/mailman/listinfo/gluster-users" rel="noreferrer" target="_blank">http://lists.gluster.org/<wbr>mailman/listinfo/gluster-users</a><br>
&gt; &gt;<br>
<br>
&gt; ______________________________<wbr>_________________<br>
&gt; Gluster-users mailing list<br>
&gt; <a href="mailto:Gluster-users@gluster.org">Gluster-users@gluster.org</a><br>
&gt; <a href="http://lists.gluster.org/mailman/listinfo/gluster-users" rel="noreferrer" target="_blank">http://lists.gluster.org/<wbr>mailman/listinfo/gluster-users</a><br>
<br>
<br>______________________________<wbr>_________________<br>
Gluster-users mailing list<br>
<a href="mailto:Gluster-users@gluster.org">Gluster-users@gluster.org</a><br>
<a href="http://lists.gluster.org/mailman/listinfo/gluster-users" rel="noreferrer" target="_blank">http://lists.gluster.org/<wbr>mailman/listinfo/gluster-users</a><br></blockquote></div></div>