<div>‐‐‐‐‐‐‐ Original Message â€â€â€â€â€â€â€<br></div><div> On Thursday, November 5, 2020 3:28 PM, Yaniv Kaul &lt;ykaul@redhat.com&gt; wrote:<br></div><div> <br></div><blockquote class="protonmail_quote" type="cite"><div dir="ltr"><div class="gmail_quote"><div style="font-family:arial,helvetica,sans-serif">Waiting for IO, just like the rest of those in D state.&nbsp;<br></div><div style="font-family:arial,helvetica,sans-serif">You may have a slow storage subsystem. How many cores do you&nbsp;have, btw?<br></div><div style="font-family:arial,helvetica,sans-serif">Y.<br></div></div></div></blockquote><div><br></div><div>Strange because "iostat -xtcm 5" does not show that the disks are 100% used, I've pasted below a sample output of "iostat -xtcm".<br></div><div><br></div><div>Both nodes have 1 CPU Intel Xeon E5-2620 v3 @ 2.40GHz which as 12 cores.<br></div><div><br></div><div>11/05/2020 03:37:25 PM<br></div><div>avg-cpu:&nbsp; %user&nbsp;&nbsp; %nice %system %iowait&nbsp; %steal&nbsp;&nbsp; %idle<br></div><div>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.93&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp; 84.81&nbsp;&nbsp;&nbsp; 0.03&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp; 14.22<br></div><div><br></div><div>Device:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; rrqm/s&nbsp;&nbsp; wrqm/s&nbsp;&nbsp;&nbsp;&nbsp; r/s&nbsp;&nbsp;&nbsp;&nbsp; w/s&nbsp;&nbsp;&nbsp; rMB/s&nbsp;&nbsp;&nbsp; wMB/s avgrq-sz avgqu-sz&nbsp;&nbsp; await r_await w_await&nbsp; svctm&nbsp; %util<br></div><div>sda&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 0.60&nbsp;&nbsp; 23.80&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.20&nbsp;&nbsp;&nbsp; 17.31&nbsp;&nbsp;&nbsp;&nbsp; 0.03&nbsp;&nbsp;&nbsp; 1.31&nbsp;&nbsp; 45.33&nbsp;&nbsp;&nbsp; 0.20&nbsp;&nbsp; 1.25&nbsp;&nbsp; 3.04<br></div><div>sdc&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 0.60&nbsp;&nbsp; 24.80&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.24&nbsp;&nbsp;&nbsp; 19.15&nbsp;&nbsp;&nbsp;&nbsp; 0.03&nbsp;&nbsp;&nbsp; 1.04&nbsp;&nbsp; 40.00&nbsp;&nbsp;&nbsp; 0.10&nbsp;&nbsp; 1.01&nbsp;&nbsp; 2.56<br></div><div>sdg&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 0.60&nbsp;&nbsp; 23.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.22&nbsp;&nbsp;&nbsp; 19.05&nbsp;&nbsp;&nbsp;&nbsp; 0.03&nbsp;&nbsp;&nbsp; 1.39&nbsp;&nbsp; 45.33&nbsp;&nbsp;&nbsp; 0.24&nbsp;&nbsp; 1.25&nbsp;&nbsp; 2.96<br></div><div>sdf&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 0.60&nbsp;&nbsp; 25.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.23&nbsp;&nbsp;&nbsp; 18.25&nbsp;&nbsp;&nbsp;&nbsp; 0.03&nbsp;&nbsp;&nbsp; 1.16&nbsp;&nbsp; 41.33&nbsp;&nbsp;&nbsp; 0.19&nbsp;&nbsp; 1.06&nbsp;&nbsp; 2.72<br></div><div>sdd&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 0.60&nbsp;&nbsp; 24.60&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.19&nbsp;&nbsp;&nbsp; 15.43&nbsp;&nbsp;&nbsp;&nbsp; 0.02&nbsp;&nbsp;&nbsp; 0.86&nbsp;&nbsp; 32.00&nbsp;&nbsp;&nbsp; 0.10&nbsp;&nbsp; 0.83&nbsp;&nbsp; 2.08<br></div><div>sdh&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 0.40&nbsp;&nbsp; 25.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.22&nbsp;&nbsp;&nbsp; 17.64&nbsp;&nbsp;&nbsp;&nbsp; 0.03&nbsp;&nbsp;&nbsp; 1.10&nbsp;&nbsp; 58.00&nbsp;&nbsp;&nbsp; 0.19&nbsp;&nbsp; 1.01&nbsp;&nbsp; 2.56<br></div><div>sdi&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 0.40&nbsp;&nbsp; 25.80&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.23&nbsp;&nbsp;&nbsp; 17.71&nbsp;&nbsp;&nbsp;&nbsp; 0.03&nbsp;&nbsp;&nbsp; 1.01&nbsp;&nbsp; 60.00&nbsp;&nbsp;&nbsp; 0.09&nbsp;&nbsp; 0.98&nbsp;&nbsp; 2.56<br></div><div>sdj&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 0.60&nbsp;&nbsp; 24.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.19&nbsp;&nbsp;&nbsp; 15.67&nbsp;&nbsp;&nbsp;&nbsp; 0.02&nbsp;&nbsp;&nbsp; 0.91&nbsp;&nbsp; 32.00&nbsp;&nbsp;&nbsp; 0.13&nbsp;&nbsp; 0.85&nbsp;&nbsp; 2.08<br></div><div>sde&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 0.60&nbsp;&nbsp; 26.60&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.20&nbsp;&nbsp;&nbsp; 15.12&nbsp;&nbsp;&nbsp;&nbsp; 0.03&nbsp;&nbsp;&nbsp; 1.00&nbsp;&nbsp; 36.00&nbsp;&nbsp;&nbsp; 0.21&nbsp;&nbsp; 0.91&nbsp;&nbsp; 2.48<br></div><div>sdk&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 0.60&nbsp;&nbsp; 25.20&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.20&nbsp;&nbsp;&nbsp; 16.12&nbsp;&nbsp;&nbsp;&nbsp; 0.02&nbsp;&nbsp;&nbsp; 0.78&nbsp;&nbsp; 29.33&nbsp;&nbsp;&nbsp; 0.10&nbsp;&nbsp; 0.74&nbsp;&nbsp; 1.92<br></div><div>sdl&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 0.60&nbsp;&nbsp; 25.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.22&nbsp;&nbsp;&nbsp; 17.56&nbsp;&nbsp;&nbsp;&nbsp; 0.02&nbsp;&nbsp;&nbsp; 0.94&nbsp;&nbsp; 37.33&nbsp;&nbsp;&nbsp; 0.06&nbsp;&nbsp; 0.94&nbsp;&nbsp; 2.40<br></div><div>sdb&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp; 0.60&nbsp;&nbsp; 15.40&nbsp;&nbsp;&nbsp;&nbsp; 0.00&nbsp;&nbsp;&nbsp;&nbsp; 0.21&nbsp;&nbsp;&nbsp; 27.80&nbsp;&nbsp;&nbsp;&nbsp; 0.03&nbsp;&nbsp;&nbsp; 2.15&nbsp;&nbsp; 42.67&nbsp;&nbsp;&nbsp; 0.57&nbsp;&nbsp; 1.95&nbsp;&nbsp; 3.12<br></div><div><br></div>