<div dir="ltr">On Sun, Jun 10, 2018 at 4:53 AM, Chris Samuel <span dir="ltr"><<a href="mailto:chris@csamuel.org" target="_blank">chris@csamuel.org</a>></span> wrote:<br><div class="gmail_extra"><div class="gmail_quote"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">On Sunday, 10 June 2018 1:22:07 AM AEST Scott Atchley wrote:<br>
<br>
> Hi Chris,<br>
<br>
Hey Scott,<br>
<span class=""><br>
> We have looked at this _a_ _lot_ on Titan:<br>
><br>
> A Multi-faceted Approach to Job Placement for Improved Performance on<br>
> Extreme-Scale Systems<br>
> <br>
> <a href="https://ieeexplore.ieee.org/document/7877165/" rel="noreferrer" target="_blank">https://ieeexplore.ieee.org/<wbr>document/7877165/</a><br>
<br>
</span>Thanks! IEEE has it paywalled but it turns out ACM members can read it here:<br>
<br>
<a href="https://dl.acm.org/citation.cfm?id=3015021" rel="noreferrer" target="_blank">https://dl.acm.org/citation.<wbr>cfm?id=3015021</a><br>
<span class=""><br>
> This issue we have is small jobs "inside" large jobs interfering with the<br>
> larger jobs. The item that is easy to implement with our scheduler was<br>
> "Dual-Ended Scheduling". We set a threshold of 16 nodes to demarcate small.<br>
> Jobs using more than 16 nodes, schedule from the top/front of the list and<br>
> smaller schedule from the bottom/back of the list.<br>
<br>
</span>I'm guessing for "list" you mean a list of nodes?</blockquote><div><br></div><div>Yes. It may be specific to Cray/Moab. </div><div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">  It's an interesting idea <br>
and possibly something that might be doable in Slurm with some patching, for <br>
us it might be more like allocate sub-node jobs from the start of the list (to <br>
hopefully fill up holes left by other small jobs) and full node jobs from the <br>
end of the list (where here list is a set of nodes of the same weight).<br>
<br>
You've got me thinking... ;-)<br>
<br>
All the best!<br>
<span class="HOEnZb"><font color="#888888">Chris<br></font></span></blockquote><div><br></div><div>Good luck. If you want to discuss, please do not hesitate to ask. We have another paper pending along the same lines.</div><div><br></div><div>Scott</div></div></div></div>