<div dir="auto"><a href="https://github.com/JuliaParallel/ClusterManagers.jl">https://github.com/JuliaParallel/ClusterManagers.jl</a><div dir="auto"><br></div><div dir="auto">Sorry for the terse reply. Warm evening sitting beside the Maschsee in Hannover.  Modelling beer evaporation.</div></div><br><div class="gmail_quote"><div dir="ltr">On Fri, 27 Jul 2018 8:47 pm Lux, Jim (337K), <<a href="mailto:james.p.lux@jpl.nasa.gov">james.p.lux@jpl.nasa.gov</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">





<div lang="EN-US" link="#0563C1" vlink="#954F72">
<div class="m_1078984761278103112WordSection1">
<p class="MsoNormal">I’ve just started using Jupyter to organize my Pythonic ramblings..<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">What would be kind of cool is to have a high level way to do some embarrassingly parallel python stuff, and I’m sure it’s been done, but my google skills appear to be lacking (for all I know there’s someone at JPL who is doing this, among
 the 6000 people doing stuff here).<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">What I’m thinking is this:<u></u><u></u></p>
<p class="MsoNormal">I have a high level python script that iterates through a set of data values for some model parameter, and farms out running the model to nodes on a cluster, but then gathers the results back.
<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">So, I’d have N copies of the python model script on the nodes. 
<u></u><u></u></p>
<p class="MsoNormal">Almost like a pythonic version of pdsh.<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">Yeah, I’m sure I could use lots of subprocess() and execute() stuff (heck, I could shell pdsh), but like with all things python, someone has probably already done it before and has all the nice hooks into the Ipython kernel.<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
<p class="MsoNormal">James Lux<u></u><u></u></p>
<p class="MsoNormal">Task Manager, DARPA High Frequency Research (DHFR) Space Testbed<u></u><u></u></p>
<p class="MsoNormal">Jet Propulsion Laboratory  (Mail Stop 161-213)<u></u><u></u></p>
<p class="MsoNormal">4800 Oak Grove Drive<u></u><u></u></p>
<p class="MsoNormal">Pasadena CA 91109<u></u><u></u></p>
<p class="MsoNormal">(818)354-2075 (office)<u></u><u></u></p>
<p class="MsoNormal">(818)395-2714 (cell)<u></u><u></u></p>
<p class="MsoNormal"><u></u> <u></u></p>
</div>
</div>

_______________________________________________<br>
Beowulf mailing list, <a href="mailto:Beowulf@beowulf.org" target="_blank" rel="noreferrer">Beowulf@beowulf.org</a> sponsored by Penguin Computing<br>
To change your subscription (digest mode or unsubscribe) visit <a href="http://www.beowulf.org/mailman/listinfo/beowulf" rel="noreferrer noreferrer" target="_blank">http://www.beowulf.org/mailman/listinfo/beowulf</a><br>
</blockquote></div>