<div dir="ltr"><div><div><div>Nigel,<br><br></div>Could you give a machine where geo-rep is failing even with bashrc fix to debug ?<br><br></div>Thanks,<br></div>Kotresh HR<br></div><div class="gmail_extra"><br><div class="gmail_quote">On Fri, Jan 12, 2018 at 3:54 PM, Amar Tumballi <span dir="ltr">&lt;<a href="mailto:atumball@redhat.com" target="_blank">atumball@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">Can we have a separate test case to validate for all the basic necessity for whole test suite to pass? That way the very first run will report an error in the setup and we can fix it faster, instead of waiting for the failure which is a setup issue after 3-4hrs ?<div><br></div><div>-AmarĀ </div></div><div class="gmail_extra"><br><div class="gmail_quote"><div><div class="h5">On Fri, Jan 12, 2018 at 3:47 PM, Atin Mukherjee <span dir="ltr">&lt;<a href="mailto:amukherj@redhat.com" target="_blank">amukherj@redhat.com</a>&gt;</span> wrote:<br></div></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div class="h5"><div dir="ltr"><br><div class="gmail_extra"><br><div class="gmail_quote"><span>On Thu, Jan 11, 2018 at 10:15 AM, Nigel Babu <span dir="ltr">&lt;<a href="mailto:nigelb@redhat.com" target="_blank">nigelb@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">Hello folks,<br><br>We may have been a little too quick to blame Meltdown on the Jenkins failures yesterday. In any case, we&#39;ve open a ticket with our provider and they&#39;re looking into the failures. I&#39;ve looked at the last 90 failures to get a comprehensive number on the failures.<br><br>Total Jobs: 90<br>Failures: 62<br>Failure Percentage: 68.89%<br><br>I&#39;ve analyzed the individual failures categorized them as well.<br><br><a href="http://slave28.cloud.gluster.org" target="_blank">slave28.cloud.gluster.org</a> failure: 9<br>Geo-replication failures: 12<br>Fops-during-migration.t: 4<br>Compilation failures: 3<br>durability-off.t failures: 7<br><br>These alone total to 35 failures. The slave28 failures were due to the machine running out of disk space. We had a very large binary archived from an experimental branch build failure. I&#39;ve cleared that core out and this is now fixed. The geo-replication failures were due to geo-rep tests depending on root&#39;s .bashrc having the PATH variable modified. This was not a standard setup and therefore didn&#39;t work on many machines. This has now been fixed. The other 3 were transient failures either limited to a particular review or a temporary bustage on master. The majority of the recent failures had more to do with infra than to do with tests.<br></div></blockquote><div><br></div></span><div>While Nigel tells me that the infra related problems for geo-rep tests are already fixed, I see a similar failure pops up through <a href="https://build.gluster.org/job/centos6-regression/8356/console" target="_blank">https://build.gluster.org/job/<wbr>centos6-regression/8356/consol<wbr>e</a> . <br></div><div><br></div><div>@Kotresh - Could you check if this is something different?</div><div><br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><span><div dir="ltr"><br>I&#39;m therefore cautiously moving with the assumption that the impact of KPTI patch is minimal so far.<span class="m_-1511641142315711997m_-4140296807366872916gmail-HOEnZb"><font color="#888888"><br clear="all"><br>-- <br><div class="m_-1511641142315711997m_-4140296807366872916gmail-m_-13828760236913517gmail_signature"><div dir="ltr">nigelb<br></div></div>
</font></span></div>
<br></span>______________________________<wbr>_________________<br>
Gluster-devel mailing list<br>
<a href="mailto:Gluster-devel@gluster.org" target="_blank">Gluster-devel@gluster.org</a><br>
<a href="http://lists.gluster.org/mailman/listinfo/gluster-devel" rel="noreferrer" target="_blank">http://lists.gluster.org/mailm<wbr>an/listinfo/gluster-devel</a><br></blockquote></div><br></div></div>
<br></div></div>______________________________<wbr>_________________<br>
Gluster-infra mailing list<br>
<a href="mailto:Gluster-infra@gluster.org" target="_blank">Gluster-infra@gluster.org</a><br>
<a href="http://lists.gluster.org/mailman/listinfo/gluster-infra" rel="noreferrer" target="_blank">http://lists.gluster.org/mailm<wbr>an/listinfo/gluster-infra</a><span class="HOEnZb"><font color="#888888"><br></font></span></blockquote></div><span class="HOEnZb"><font color="#888888"><br><br clear="all"><div><br></div>-- <br><div class="m_-1511641142315711997gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div>Amar Tumballi (amarts)<br></div></div></div></div></div>
</font></span></div>
</blockquote></div><br><br clear="all"><br>-- <br><div class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div>Thanks and Regards,<br></div>Kotresh H R<br></div></div>
</div>