<div style="line-height:1.7;color:#000000;font-size:14px;font-family:arial">Hi John:<br>&nbsp;&nbsp;&nbsp; Glusterfs is not designed for handling large count&nbsp; small files, because it has no meta data server, every lookup operation cost a lot in your situation.<br>&nbsp;&nbsp;&nbsp; The disk usage is abnormal, does your disk only have gluster bricks? <br><br>Best Regards.<br>Jules Wang<br><br><br><div></div><div id="divNeteaseMailCard"></div><br>At 2012-11-02 08:03:21,"Jonathan&nbsp;Lefman"&nbsp;&lt;jonathan.lefman@essess.com&gt; wrote:<br> <blockquote id="isReplyContent" style="PADDING-LEFT: 1ex; MARGIN: 0px 0px 0px 0.8ex; BORDER-LEFT: #ccc 1px solid">Hi all,<div><br></div><div>I am having problems with painfully slow directory listings on a freshly created replicated volume. &nbsp;The configuration is as follows: &nbsp;&nbsp;2 nodes with 3 replicated drives each. &nbsp;The total volume capacity is 5.6T. &nbsp;We would like to expand the storage capacity much more, but first we need to figure this problem out.</div>
<div><br></div><div>Soon after loading up about 100 MB of small files (about 300kb each), the drive usage is at 1.1T. &nbsp;I am not sure if this to be expected. &nbsp;The main problem is that directory listing (ls or find) takes a very long time. &nbsp;The CPU usage on the nodes is high for each of the glusterfsd processes - 3 on each machine 54%, 43%, and 25% per core is an example of the usage. &nbsp;Memory is very low for each process. &nbsp;It is incredibly difficult to diagnose this issue. &nbsp;We have wiped previous gluster installs, all directories, and mount points as well as reformatting the disks. &nbsp;Each drive is formatted with ext4. &nbsp;</div>
<div><br></div><div>Has anyone had a similar result? &nbsp;Any ideas on how to debug this one?</div><div><br></div><div>Thank you,</div><div><br></div><div>Jon</div><div><br></div>
</blockquote></div><br><br><span title="neteasefooter"><span id="netease_mail_footer"></span></span>