<div dir="ltr"><div class="gmail_default" style="color:#000000">Hello Roland,</div><div class="gmail_default" style="color:#000000"><br></div><div class="gmail_default" style="color:#000000">Thanks a lot for the suggestions. I&#39;ll try to figure it out.</div><div><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><font color="#666666"><br></font></div><div dir="ltr"><font color="#666666"><span class="gmail_default" style="color:rgb(0,0,0)">R</span><span class="gmail_default" style="color:rgb(0,0,0)">egards</span></font></div><div><font color="#000000"><span class="gmail_default" style="color:rgb(0,0,0)">S</span><span class="gmail_default" style="color:rgb(0,0,0)">hamim</span></font></div></div></div></div></div></div></div></div></div></div><div hspace="streak-pt-mark" style="max-height:1px"><img alt="" style="width:0px;max-height:0px;overflow:hidden" src="https://mailfoogae.appspot.com/t?sender=ac2hhbWltc0BpaXNlcmIuYWMuaW4%3D&amp;type=zerocontent&amp;guid=0e1da5d6-d353-4b1b-b713-370211354e18"><font color="#ffffff" size="1">ᐧ</font></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Tue, Nov 15, 2022 at 11:31 PM Roland Haas &lt;<a href="mailto:rhaas@illinois.edu">rhaas@illinois.edu</a>&gt; wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">Hello Shamim,<br>
<br>
&gt; Thanks for pointing out the issue. I&#39;ll check with HPC admins to fix the<br>
&gt; Intel-17 or install a better version. Could you please help me with the<br>
&gt; issue regarding running BNSM on more than 1 node? The issue is explained in<br>
&gt; my previous email in reply to your suggestions on problems divided into<br>
&gt; Part A,  B and C.<br>
<br>
That is unfortunately quite tricky to do. Each cluster handles this a<br>
bit differently. My best suggestion is to first look for an example of<br>
a hybrid job (MPI+OpenMP) that the cluster admins hopefully provide.<br>
<br>
Next you must construct a submitscript (template) that matches their<br>
example (more or less).<br>
<br>
You can try these out by submitting test jobs and looking at the file:<br>
<br>
&lt;basedir&gt;/&lt;jobname&gt;/output-0000/SIMFACTORY/SubmitScript<br>
<br>
which has all the replacements done.<br>
<br>
For testing you may want to set the &quot;submit&quot; option in the machine ini<br>
file to just &quot;echo 42&quot; or so so that no actual job is submitted.<br>
<br>
I will be, unfortunately, quite busy until after the ET release (this<br>
week) and most likely also next week, so cannot really promise to be<br>
able look into this very deeply.<br>
<br>
My best suggestion is to track down an OpenMP+MPI example in the<br>
cluster documentation and then tweak your SubmitScript (foo.sub) file<br>
until you have something that, when provided the correct options,<br>
matches their example.<br>
<br>
The error that you received basically says that your submitscript asked<br>
for more resources than available, but this can be triggered by a number<br>
of things including configuration options set by the admins.<br>
<br>
Yours,<br>
Roland<br>
<br>
-- <br>
My email is as private as my paper mail. I therefore support encrypting<br>
and signing email messages. Get my PGP key from <a href="http://pgp.mit.edu" rel="noreferrer" target="_blank">http://pgp.mit.edu</a> .<br>
</blockquote></div>