<font size=2 face="sans-serif">Hi,</font>
<br>
<br><font size=2 face="sans-serif">We have deployed glustrerfs as containers
on openshift orgin.</font>
<br>
<br><font size=2 face="sans-serif">We are unable to create new volume for
opeshift pods observed following error.</font>
<br>
<br><font size=2 color=#2f2f2f face="Arial">Failed to provision volume
with StorageClass &quot;glusterfs-storage&quot;: glusterfs: create volume
err: error creating volume</font><font size=3> </font>
<br><font size=2 color=#2f2f2f face="Arial">Failed to provision volume
with StorageClass &quot;glusterfs-storage&quot;: glusterfs: create volume
err: error creating volume Server busy. Retry operation later..</font><font size=3>
</font>
<br>
<br><font size=2 face="sans-serif">We could observe above issue due to
pending operations on heketi db.</font>
<br><font size=2 face="sans-serif">We have exported db and removed pending
operations (volumes,bricks) on db, lvs from physical hosts and imported.</font>
<br><font size=2 face="sans-serif">But heketi trying to delete volumes
which are removed from heketi as part of pending operations in db and still
we are unable to create volumes facing server busy.</font>
<br><font size=2 face="sans-serif">Can you please let me know still heketi
where it is getting volumes id which are not available on heketi deb??</font>
<br><font size=2 face="sans-serif">why we are unable to create volumes
?? (no info on glusterd,glusterfsd logs)??</font>
<br>
<br>
<table width=1060 style="border-collapse:collapse;">
<tr height=8>
<td width=302 bgcolor=#101214 style="border-style:none none none none;border-color:#000000;border-width:0px 0px 0px 0px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Started POST /volumes </font>
<td width=753 valign=top style="border-style:none none none none;border-color:#000000;border-width:0px 0px 0px 0px;padding:1px 1px;">
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[heketi]
WARNING 2019/01/21 11:48:31 operations in-flight (8) exceeds limit (8)
</font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Completed 429 Too Many Requests in 260.577µs </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Started POST /volumes </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[heketi]
WARNING 2019/01/21 11:48:39 operations in-flight (8) exceeds limit (8)
</font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Completed 429 Too Many Requests in 221.477µs </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Started DELETE /volumes/99e87ecd0a816ac34ae5a04eabc1d606 </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Completed 404 Not Found in 151.896µs </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Started DELETE /volumes/99e87ecd0a816ac34ae5a04eabc1d606 </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Completed 404 Not Found in 125.387µs </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Started DELETE /volumes/520bc5f4e1bfd029855a72f9ca7ebf6c </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Completed 404 Not Found in 168.23µs </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Started DELETE /volumes/99e87ecd0a816ac34ae5a04eabc1d606 </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Completed 404 Not Found in 123.231µs </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Started DELETE /volumes/520bc5f4e1bfd029855a72f9ca7ebf6c </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Completed 404 Not Found in 160.416µs </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Started DELETE /volumes/99e87ecd0a816ac34ae5a04eabc1d606 </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Completed 404 Not Found in 124.439µs </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Started DELETE /volumes/520bc5f4e1bfd029855a72f9ca7ebf6c </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Completed 404 Not Found in 126.748µs </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Started DELETE /volumes/99e87ecd0a816ac34ae5a04eabc1d606 </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Completed 404 Not Found in 138.377µs </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Started DELETE /volumes/520bc5f4e1bfd029855a72f9ca7ebf6c </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Completed 404 Not Found in 138.477µs </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Started DELETE /volumes/520bc5f4e1bfd029855a72f9ca7ebf6c </font>
<tr height=8>
<td width=302 bgcolor=#101214 valign=top style="border-style:none solid none none;border-color:#000000;border-width:0px 1px 0px 0px;padding:1px 1px;">
<td width=752 bgcolor=#101214 style="border-style:none none none solid;border-color:#000000;border-width:0px 0px 0px 1px;padding:1px 1px;"><font size=1 color=#d2d2d2 face="Consolas">[negroni]
Completed 404 Not Found in 267.79µs</font></table>
<br>
<br>
<br><font size=2 face="sans-serif">BR</font>
<br><font size=2 face="sans-serif">Salam</font><p>=====-----=====-----=====<br>
Notice: The information contained in this e-mail<br>
message and/or attachments to it may contain <br>
confidential or privileged information. If you are <br>
not the intended recipient, any dissemination, use, <br>
review, distribution, printing or copying of the <br>
information contained in this e-mail message <br>
and/or attachments to it are strictly prohibited. If <br>
you have received this communication in error, <br>
please notify us by reply e-mail or telephone and <br>
immediately and permanently delete the message <br>
and any attachments. Thank you</p>

<p></p>