<div dir="ltr">In addition to the suggestions above I would look at the memory usage pattern while the IO is going on<div><br></div><div>watch  cat /proc/meminfo</div><div><br></div><div>This system might have a decent amount of memory - but are the sysctl tunings for the dirty buffer sizes set small or something?</div>

</div><div class="gmail_extra"><br><br><div class="gmail_quote">On 2 August 2014 04:17, Chris Samuel <span dir="ltr"><<a href="mailto:samuel@unimelb.edu.au" target="_blank">samuel@unimelb.edu.au</a>></span> wrote:<br>

<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div class="">On Fri, 1 Aug 2014 03:13:39 PM mathog wrote:<br>
<br>
> That may fix the problem but I am still curious about exactly what<br>
> happened during the terminal stalls.   Using the current cfq scheduler<br>
> what is going on in the system that is keeping those terminal processes<br>
> from getting any CPU time?<br>
<br>
</div>Not entirely sure, but you may get some idea with latencytop *if* it is able<br>
to get some time to run to return info.<br>
<br>
cheers,<br>
Chris<br>
<span class="HOEnZb"><font color="#888888">--<br>
 Christopher Samuel        Senior Systems Administrator<br>
 VLSCI - Victorian Life Sciences Computation Initiative<br>
 Email: <a href="mailto:samuel@unimelb.edu.au">samuel@unimelb.edu.au</a> Phone: <a href="tel:%2B61%20%280%293%20903%2055545" value="+61390355545">+61 (0)3 903 55545</a><br>
 <a href="http://www.vlsci.org.au/" target="_blank">http://www.vlsci.org.au/</a>      <a href="http://twitter.com/vlsci" target="_blank">http://twitter.com/vlsci</a><br>
</font></span><div class="HOEnZb"><div class="h5"><br>
_______________________________________________<br>
Beowulf mailing list, <a href="mailto:Beowulf@beowulf.org">Beowulf@beowulf.org</a> sponsored by Penguin Computing<br>
To change your subscription (digest mode or unsubscribe) visit <a href="http://www.beowulf.org/mailman/listinfo/beowulf" target="_blank">http://www.beowulf.org/mailman/listinfo/beowulf</a><br>
</div></div></blockquote></div><br></div>