<html>
  <head>
    <meta http-equiv="Content-Type" content="text/html;
      charset=windows-1252">
  </head>
  <body text="#000000" bgcolor="#FFFFFF">
    <p>Hi Ian,</p>
    <p>thanks for spotting that. Unfortunately there is only the hwloc
      directory in external. There is an MPI file (just called MPI) in
      the done directory.<br>
    </p>
    <p>I have recompiled with the fix you mentioned but I still get the
      same error.</p>
    <p>Cheers,</p>
    <p>Chris<br>
    </p>
    <br>
    <div class="moz-cite-prefix">On 05/16/2017 09:43 AM, Ian Hinder
      wrote:<br>
    </div>
    <blockquote type="cite"
      cite="mid:427C4245-D055-4D88-8765-EF8E6BB60EFA@aei.mpg.de">
      <meta http-equiv="Content-Type" content="text/html;
        charset=windows-1252">
      <br>
      <div>
        <div>On 16 May 2017, at 08:52, Chris Stevens &lt;<a
            href="mailto:c.stevens@ru.ac.za" moz-do-not-send="true">c.stevens@ru.ac.za</a>&gt;
          wrote:</div>
        <br class="Apple-interchange-newline">
        <blockquote type="cite">
          <meta http-equiv="Content-Type" content="text/html;
            charset=windows-1252">
          <div text="#000000" bgcolor="#FFFFFF">
            <p>Hi Ian,</p>
            <p>thanks for your quick reply!</p>
            <p>There are a couple of other guys here who have
              successfully used the toolkit with this version of
              openmpi, so I'm not sure if this is at fault. There is not
              another version of openmpi available currently on the
              cluster, but I could ask for this to be remedied.<br>
            </p>
            <p>I have tried using procs=48 and num-threads=2 but I find
              the same problem.</p>
            <p>As you say, I recompiled a clean config to double check.
              I have also used the May 16 version but to no avail.</p>
            <p>Could it be something to do with compilation, that has
              gone wrong somehow, even though it finishes successfully
              with done?<br>
            </p>
          </div>
        </blockquote>
        <div>Is it possible that it is building and using its own copy
          of OpenMPI?  The build system is "clever", and the logic for
          when it decides to do this seems a bit flaky.  [I would be a
          lot happier if it only built a library from the bundled source
          if it was explicitly asked for in the optionlist with a BUILD
          setting, not as a fallback to something going wrong when
          trying to use the settings the user has given.]</div>
        <div><br>
        </div>
        <div>I noticed that you have</div>
        <div><br>
        </div>
        <div>
          <div>MPI_DIR = /apps/libs/openmpi/1.8.8-intel16.0.1/lib</div>
          <div><br>
          </div>
          <div>in the optionlist, which is wrong; it should not have the
            "lib" on the end.  I didn't think anything of it at the
            time, since you were specifying the other directories.  But
            maybe the MPI thorn is deciding that since it can't find a
            valid MPI installation, it will helpfully decide to build
            OpenMPI for you.  This version may then conflict with the
            rest of the configuration.</div>
        </div>
        <div><br>
        </div>
        <div>Can you look and see if there is a built version of OpenMPI
          in the config?  I think it would be in
          configs/&lt;config&gt;/scratch/external.</div>
        <div><br>
        </div>
      </div>
      <div apple-content-edited="true">
        <div style="color: rgb(0, 0, 0); letter-spacing: normal;
          orphans: auto; text-align: start; text-indent: 0px;
          text-transform: none; white-space: normal; widows: auto;
          word-spacing: 0px; -webkit-text-stroke-width: 0px; word-wrap:
          break-word; -webkit-nbsp-mode: space; -webkit-line-break:
          after-white-space;">
          <div style="color: rgb(0, 0, 0); letter-spacing: normal;
            orphans: auto; text-align: start; text-indent: 0px;
            text-transform: none; white-space: normal; widows: auto;
            word-spacing: 0px; -webkit-text-stroke-width: 0px;
            word-wrap: break-word; -webkit-nbsp-mode: space;
            -webkit-line-break: after-white-space;">
            <div style="color: rgb(0, 0, 0); letter-spacing: normal;
              orphans: auto; text-align: start; text-indent: 0px;
              text-transform: none; white-space: normal; widows: auto;
              word-spacing: 0px; -webkit-text-stroke-width: 0px;
              word-wrap: break-word; -webkit-nbsp-mode: space;
              -webkit-line-break: after-white-space;">
              <div style="color: rgb(0, 0, 0); letter-spacing: normal;
                orphans: auto; text-align: start; text-indent: 0px;
                text-transform: none; white-space: normal; widows: auto;
                word-spacing: 0px; -webkit-text-stroke-width: 0px;
                word-wrap: break-word; -webkit-nbsp-mode: space;
                -webkit-line-break: after-white-space;">
                <div>-- </div>
                <div>Ian Hinder</div>
                <div><a href="http://members.aei.mpg.de/ianhin"
                    moz-do-not-send="true">http://members.aei.mpg.de/ianhin</a></div>
              </div>
            </div>
          </div>
        </div>
      </div>
      <br>
    </blockquote>
    <br>
    <div class="moz-signature">-- <br>
      <font size="-1" face="Cantarell" color="#666666">Dr Chris Stevens</font>
      <div class="moz-signature"> <font size="-1" face="Cantarell"
          color="#666666"> </font>
        <p><font size="-1" face="Cantarell" color="#666666">Department
            of Mathematics</font></p>
        <font size="-1" face="Cantarell" color="#666666"> </font>
        <p><font size="-1" face="Cantarell" color="#666666">Rhodes
            University</font></p>
        <p><font color="#666666"><font size="-1"><font face="Cantarell">Room
                5</font></font></font></p>
        <p><font color="#666666"><font size="-1"><font face="Cantarell">
                Ph: +27 46 603 8932</font></font></font></p>
      </div>
    </div>
  </body>
</html>