<div dir="ltr"><div dir="ltr"><div dir="ltr">HI Shaik,<div><br></div><div>   can you provide me the outpout of <font color="#ff0000">$</font><span style="white-space:pre"><font color="#ff0000">heketi-cli server operations info</font><font color="#000000"> from heketi pod</font></span></div><div><br></div><div><pre class="gmail-bz_comment_text" id="gmail-comment_text_7" style="white-space:pre-wrap;margin:1em;padding-bottom:1em;width:50em"><font color="#000000">as a workround you can try restarting the heketi pod. This will cause the current  operations to go stale, but other pending pvcs may go to Bound state</font></pre><pre class="gmail-bz_comment_text" id="gmail-comment_text_7" style="white-space:pre-wrap;margin:1em;padding-bottom:1em;width:50em"><font color="#000000">Regards,</font></pre><pre class="gmail-bz_comment_text" id="gmail-comment_text_7" style="white-space:pre-wrap;margin:1em;padding-bottom:1em;width:50em"><font color="#000000">Madhu R</font></pre></div></div></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, Jan 24, 2019 at 12:36 PM Shaik Salam &lt;<a href="mailto:shaik.salam@tcs.com">shaik.salam@tcs.com</a>&gt; wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><font size="2" face="sans-serif">H Madhu,</font>
<br>
<br><font size="2" face="sans-serif">Could you please have look my issue
If you have time (atleast workaround).</font>
<br><font size="2" face="sans-serif">I am unable to send mail to &quot;J</font><font size="1" face="sans-serif">ohn
Mulligan&quot; &lt;<a href="mailto:John_Mulligan@redhat.com" target="_blank">John_Mulligan@redhat.com</a>&gt;</font><font size="2" face="sans-serif">&quot;
who is currently handling issue</font>
<br><a href="https://bugzilla.redhat.com/show_bug.cgi?id=1636912" target="_blank"><font size="2" color="blue" face="sans-serif">https://bugzilla.redhat.com/show_bug.cgi?id=1636912</font></a>
<br>
<br><font size="2" face="sans-serif">BR</font>
<br><font size="2" face="sans-serif">Salam</font>
<br>
<br>
<br><font size="1" color="#5f5f5f" face="sans-serif">From:      
 </font><font size="1" face="sans-serif">Shaik Salam/HYD/TCS</font>
<br><font size="1" color="#5f5f5f" face="sans-serif">To:      
 </font><font size="1" face="sans-serif">&quot;John Mulligan&quot;
&lt;<a href="mailto:John_Mulligan@redhat.com" target="_blank">John_Mulligan@redhat.com</a>&gt;, &quot;Michael Adam&quot; &lt;<a href="mailto:madam@redhat.com" target="_blank">madam@redhat.com</a>&gt;,
&quot;Madhu Rajanna&quot; &lt;<a href="mailto:mrajanna@redhat.com" target="_blank">mrajanna@redhat.com</a>&gt;</font>
<br><font size="1" color="#5f5f5f" face="sans-serif">Cc:      
 </font><font size="1" face="sans-serif">&quot;<a href="mailto:gluster-users@gluster.org" target="_blank">gluster-users@gluster.org</a>
List&quot; &lt;<a href="mailto:gluster-users@gluster.org" target="_blank">gluster-users@gluster.org</a>&gt;</font>
<br><font size="1" color="#5f5f5f" face="sans-serif">Date:      
 </font><font size="1" face="sans-serif">01/24/2019 12:21 PM</font>
<br><font size="1" color="#5f5f5f" face="sans-serif">Subject:    
   </font><font size="1" face="sans-serif">Failed to provision
volume with StorageClass &quot;glusterfs-storage&quot;: glusterfs: server
busy</font>
<br>
<hr noshade>
<br>
<br><font size="2" face="sans-serif"> </font>
<br>
<br><font size="2" face="sans-serif">Hi All,</font>
<br>
<br><font size="2" color="#2f2f2f" face="Segoe UI">We are facing also following
issue on openshift origin while we are creating pvc for pods.</font><font size="3">
</font><font size="2" color="#2f2f2f" face="Segoe UI"> (atlease provide
workaround to move further)</font>
<br><font size="2" color="#2f2f2f" face="Segoe UI"><br>
Failed to provision volume with StorageClass &quot;glusterfs-storage&quot;:
glusterfs: create volume err: error creating volume<br>
Failed to provision volume with StorageClass &quot;glusterfs-storage&quot;:
glusterfs: create volume err: error creating volume Server busy. Retry
operation later..</font><font size="3"> </font><font size="2" color="#2f2f2f" face="Segoe UI"><br>
<br>
Please find heketidb dump and log</font><font size="3"> </font><font size="2" face="sans-serif"><br>
<br>
[negroni] Completed 429 Too Many Requests in 250.763µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:07:49 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 169.08µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started DELETE /volumes/520bc5f4e1bfd029855a72f9ca7ebf6c</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Completed 404 Not Found in 148.125µs</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:08:04 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 496.624µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:08:04 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 101.673µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:08:19 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 209.681µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:08:19 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 103.595µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:08:34 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 297.594µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:08:34 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 96.75µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:08:49 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 477.007µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:08:49 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 165.38µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:09:04 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 488.253µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:09:04 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 171.836µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:09:19 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 208.59µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[heketi] WARNING 2019/01/23 12:09:19 operations in-flight (8) exceeds limit
(8)</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Completed 429 Too Many Requests in 125.141µs</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Started DELETE /volumes/99e87ecd0a816ac34ae5a04eabc1d606</font><font size="3">
</font><font size="2" face="sans-serif"><br>
[negroni] Completed 404 Not Found in 138.687µs</font><font size="3"> </font><font size="2" face="sans-serif"><br>
[negroni] Started POST /volumes</font><font size="3"> <br>
</font><font size="2" face="sans-serif"><br>
<br>
BR</font><font size="3"> </font><font size="2" face="sans-serif"><br>
Salam</font><font size="3"> </font>
<br><p>=====-----=====-----=====<br>
Notice: The information contained in this e-mail<br>
message and/or attachments to it may contain <br>
confidential or privileged information. If you are <br>
not the intended recipient, any dissemination, use, <br>
review, distribution, printing or copying of the <br>
information contained in this e-mail message <br>
and/or attachments to it are strictly prohibited. If <br>
you have received this communication in error, <br>
please notify us by reply e-mail or telephone and <br>
immediately and permanently delete the message <br>
and any attachments. Thank you</p>

<p></p></blockquote></div><br clear="all"><div><br></div>-- <br><div dir="ltr" class="gmail_signature"><div dir="ltr"><div>Madhu Rajanna</div><div>Software Engineer<br></div><p style="font-weight:normal;margin:0px;font-size:10px;color:rgb(153,153,153)"><a style="color:rgb(0,136,206);font-size:10px;margin:0px;text-decoration:none;font-family:overpass,sans-serif" href="https://www.redhat.com" target="_blank">Red Hat <span>Bangalore, India</span></a></p>


<p style="font-weight:normal;margin:0px 0px 6px;font-size:10px;color:rgb(153,153,153)"><span style="margin:0px;padding:0px">
<a style="color:rgb(0,136,206);font-size:10px;margin:0px;text-decoration:none;font-family:overpass,sans-serif" href="mailto:mrajanna@redhat.com" target="_blank">mrajanna@redhat.com</a>   </span>
<span href="tel:9845222159">M: +91-9741133155     </span>
</p>
<a href="https://red.ht/sig" target="_blank"> <img src="https://www.redhat.com/profiles/rh/themes/redhatdotcom/img/logo-red-hat-black.png" height="auto" width="90"></a></div></div>