<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=iso-8859-1">
<style type="text/css" style="display:none;"><!-- P {margin-top:0;margin-bottom:0;} --></style>
</head>
<body dir="ltr">
<div id="divtagdefaultwrapper" style="font-size:12pt;color:#000000;font-family:Calibri,Arial,Helvetica,sans-serif;" dir="ltr">
<div id="divtagdefaultwrapper" style="font-size: 12pt; color: rgb(0, 0, 0); font-family: Calibri, Arial, Helvetica, sans-serif, EmojiFont, &quot;Apple Color Emoji&quot;, &quot;Segoe UI Emoji&quot;, NotoColorEmoji, &quot;Segoe UI Symbol&quot;, &quot;Android Emoji&quot;, EmojiSymbols;" dir="ltr">
I get a timeout when trying to force start the volume from serv3, but I can stop the volume ...<br>
<div><span></span></div>
<div><span><br>
</span></div>
<div><span>Isn't the error&nbsp;linked to &quot;<span>0-glusterfs: failed to submit rpc-request&quot; ? (from the log i send in the first place)</span></span></div>
<div><span><br>
</span></div>
<div><span>Merwan</span></div>
<div><span><br>
</span></div>
</div>
<hr style="display:inline-block;width:98%" tabindex="-1">
<div id="divRplyFwdMsg" dir="ltr"><font face="Calibri, sans-serif" style="font-size:11pt" color="#000000"><b>De :</b> Atin Mukherjee &lt;amukherj@redhat.com&gt;<br>
<b>Envoyé :</b> dimanche 4 juin 2017 15:31:34<br>
<b>À :</b> Merwan Ouddane<br>
<b>Cc&nbsp;:</b> gluster-users<br>
<b>Objet :</b> Re: [Gluster-users] Adding a new replica to the cluster</font>
<div>&nbsp;</div>
</div>
<div>
<div dir="ltr">
<div>Apologies for the delay!<br>
<br>
>From the logs:<br>
<br>
[2017-05-31 13:06:35.839780] E [MSGID: 106005] [glusterd-utils.c:4877:glusterd_brick_start] 0-management: Unable to&nbsp; start brick 156.125.102.103:/data/br0/vm0&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;
<br>
[2017-05-31 13:06:35.839869] E [MSGID: 106074] [glusterd-brick-ops.c:2493:glusterd_op_add_brick] 0-glusterd: Unable&nbsp; to add bricks<br>
<br>
</div>
This looks like in serv3 the newly added brick failed to come up. You'd have to look at the same brick log file on serv3 to see what was the reason. As a workaround, does gluster v start &lt;volname&gt; force bring up this brick now? As far as glusterd configuration
 data is concerned, everything seems fine, no inconsistency.<br>
</div>
<div class="gmail_extra"><br>
<div class="gmail_quote">On Wed, May 31, 2017 at 6:53 PM, Merwan Ouddane <span dir="ltr">
&lt;<a href="mailto:merwan19@msn.com" target="_blank">merwan19@msn.com</a>&gt;</span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<div>
<div id="m_-6461643501595845307divtagdefaultwrapper" style="font-size: 12pt; color: rgb(0, 0, 0); font-family: Calibri, Arial, Helvetica, sans-serif, EmojiFont, &quot;Apple Color Emoji&quot;, &quot;Segoe UI Emoji&quot;, NotoColorEmoji, &quot;Segoe UI Symbol&quot;, &quot;Android Emoji&quot;, EmojiSymbols;" dir="ltr">
<p>Hello,</p>
<p><br>
</p>
<p>Here is a tar gz with the log, and the output of &quot;<span>gluster volume status &amp;&amp; gluster volume info &amp;&amp; gluster peer status&quot; for each server</span></p>
<p><span><br>
</span></p>
<p><span>Thank you,</span></p>
<p><span>Merwan</span></p>
</div>
<hr style="display:inline-block;width:98%">
<div id="m_-6461643501595845307divRplyFwdMsg" dir="ltr"><font style="font-size:11pt" color="#000000" face="Calibri, sans-serif"><b>De :</b> Atin Mukherjee &lt;<a href="mailto:amukherj@redhat.com" target="_blank">amukherj@redhat.com</a>&gt;<br>
<b>Envoyé :</b> mercredi 31 mai 2017 12:20:49
<div>
<div class="h5"><br>
<b>À :</b> Merwan Ouddane<br>
<b>Cc&nbsp;:</b> <a href="mailto:gluster-users@gluster.org" target="_blank">gluster-users@gluster.org</a><br>
<b>Objet :</b> Re: [Gluster-users] Adding a new replica to the cluster</div>
</div>
</font>
<div>&nbsp;</div>
</div>
<div>
<div class="h5">
<div>
<div dir="ltr">
<div class="gmail_extra"><br>
<div class="gmail_quote">On Tue, May 30, 2017 at 2:14 PM, Merwan Ouddane <span dir="ltr">
&lt;<a href="mailto:merwan19@msn.com" target="_blank">merwan19@msn.com</a>&gt;</span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<div dir="ltr">
<div id="m_-6461643501595845307gmail-m_7378625862639599604divtagdefaultwrapper" style="font-size: 12pt; color: rgb(0, 0, 0); font-family: Calibri, Arial, Helvetica, sans-serif, EmojiFont, &quot;Apple Color Emoji&quot;, &quot;Segoe UI Emoji&quot;, NotoColorEmoji, &quot;Segoe UI Symbol&quot;, &quot;Android Emoji&quot;, EmojiSymbols;" dir="ltr">
<p>Gluster peer status tells me that the peer is connected</p>
<p><br>
</p>
<p>Here is the log from the servers in the cluster (they are the same for both of them):</p>
<p><a href="https://pastebin.com/4aM94PJ6" class="m_-6461643501595845307gmail-m_7378625862639599604OWAAutoLink" id="m_-6461643501595845307gmail-m_7378625862639599604LPlnk942320" target="_blank">https://pastebin.com/4aM94PJ6</a><br>
<br>
</p>
<p>The log from the server i'm trying to add to the cluster:</p>
<p><a href="https://pastebin.com/YGTcKRyw" class="m_-6461643501595845307gmail-m_7378625862639599604OWAAutoLink" id="m_-6461643501595845307gmail-m_7378625862639599604LPlnk511865" target="_blank">https://pastebin.com/YGTcKRyw</a></p>
</div>
</div>
</blockquote>
I'm sorry but these log files are for brick and client. What I am looking for is glusterd log ( ls -lrt /var/log/glusterfs/*glusterd* ) from all the nodes. Also please paste the output of gluster volume status, gluster volume info, gluster peer status from
 all the nodes.</div>
<div class="gmail_quote">
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<div dir="ltr">
<div id="m_-6461643501595845307gmail-m_7378625862639599604divtagdefaultwrapper" style="font-size: 12pt; color: rgb(0, 0, 0); font-family: Calibri, Arial, Helvetica, sans-serif, EmojiFont, &quot;Apple Color Emoji&quot;, &quot;Segoe UI Emoji&quot;, NotoColorEmoji, &quot;Segoe UI Symbol&quot;, &quot;Android Emoji&quot;, EmojiSymbols;" dir="ltr">
<p><br>
<br>
</p>
<p>Merwan</p>
<br>
<div style="color:rgb(0,0,0)">
<hr style="display:inline-block;width:98%">
<div id="m_-6461643501595845307gmail-m_7378625862639599604divRplyFwdMsg" dir="ltr">
<font style="font-size:11pt" color="#000000" face="Calibri, sans-serif"><b>De :</b> Atin Mukherjee &lt;<a href="mailto:amukherj@redhat.com" target="_blank">amukherj@redhat.com</a>&gt;<br>
<b>Envoyé :</b> mardi 30 mai 2017 04:51<br>
<b>À :</b> Merwan Ouddane<br>
<b>Cc&nbsp;:</b> <a href="mailto:gluster-users@gluster.org" target="_blank">gluster-users@gluster.org</a><br>
<b>Objet :</b> Re: [Gluster-users] Adding a new replica to the cluster</font>
<div>&nbsp;</div>
</div>
<div>
<div class="m_-6461643501595845307gmail-h5">
<div>
<div dir="ltr"><br>
<div class="gmail_extra"><br>
<div class="gmail_quote">On Mon, May 29, 2017 at 9:52 PM, Merwan Ouddane <span dir="ltr">
&lt;<a href="mailto:merwan19@msn.com" target="_blank">merwan19@msn.com</a>&gt;</span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<div>Hello,<br>
<br>
I wanted to play around with gluster and I made a 2 nodes cluster replicated, then I wanted to add a third replica &quot;on the fly&quot;.<br>
<br>
I manage to probe my third server from the cluster, but when I try to add the new brick to the volume, I get a &quot;Request timed out&quot;<br>
<br>
My command:<br>
&nbsp; gluster volume add-brick vol0 replica 3 <a href="http://192.168.0.4" target="_blank">
192.168.0.4</a>:/data/br0/vol0<br>
</div>
</blockquote>
<div><br>
</div>
<div>This might happen if the originator glusterd lost connection with other peers while this command was in process. Can you check if peer status is healthy by gluster peer status command? If yes, you'd need to share the glusterd log files from all the nodes
 with us to further analyse the issue.</div>
<div><br>
&nbsp;<br>
</div>
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">
<div><br>
Does anyone have an idea ? <br>
<br>
Regards,<br>
Merwan </div>
<br>
______________________________<wbr>_________________<br>
Gluster-users mailing list<br>
<a href="mailto:Gluster-users@gluster.org" target="_blank">Gluster-users@gluster.org</a><br>
<a href="http://lists.gluster.org/mailman/listinfo/gluster-users" rel="noreferrer" target="_blank">http://lists.gluster.org/mailm<wbr>an/listinfo/gluster-users</a><br>
</blockquote>
</div>
<br>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
<br>
______________________________<wbr>_________________<br>
Gluster-users mailing list<br>
<a href="mailto:Gluster-users@gluster.org" target="_blank">Gluster-users@gluster.org</a><br>
<a href="http://lists.gluster.org/mailman/listinfo/gluster-users" rel="noreferrer" target="_blank">http://lists.gluster.org/mailm<wbr>an/listinfo/gluster-users</a><br>
</blockquote>
</div>
<br>
</div>
</div>
</div>
</div>
</div>
</div>
</blockquote>
</div>
<br>
</div>
</div>
</div>
</body>
</html>