<html><head><meta http-equiv="Content-Type" content="text/html charset=windows-1252"></head><body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;">Hi Roland,<div><br></div><div>In the release notes for the current release, it is written</div><div><br></div><div><a href="http://einsteintoolkit.org/about/releases/ET_2017_06_announcement.html:">http://einsteintoolkit.org/about/releases/ET_2017_06_announcement.html:</a></div><div><br></div><blockquote style="margin: 0 0 0 40px; border: none; padding: 0px;"><div>-(#) On Comet, using more than one MPI process might produce corrupt output files. This</div><div>&nbsp;is a known file system bug on this machine.</div></blockquote><div><br></div><div><a href="https://docs.einsteintoolkit.org/et-docs/Release_coordination:">https://docs.einsteintoolkit.org/et-docs/Release_coordination:</a></div><div><br></div><div><div><span class="Apple-tab-span" style="white-space:pre">        </span>• comet<br><div><span class="Apple-tab-span" style="white-space:pre">                </span>• failures on multiple MPI ranks are almost certainly due to the file system bug that corrupts ASCII output files. Nothing we can do about it at this&nbsp;point (there is a ticket by Milton Ruiz with SDSC) short of adding various strange workarounds to every output routine (and it may still fail for&nbsp;checkpoint and recovery as is happening to the SpEC code right now)<br></div></div><br></div><div>Do you have any more details? &nbsp;I had the feeling that it was you who was fighting this. &nbsp;Would it be possible to add an autoconf or runtime test, so that users are at least made aware of the problem? &nbsp;Do you know of other systems that are affected? &nbsp;Do we have an ET ticket for this?</div><div><br></div><div><div apple-content-edited="true">
<div style="color: rgb(0, 0, 0); letter-spacing: normal; orphans: auto; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; widows: auto; word-spacing: 0px; -webkit-text-stroke-width: 0px; word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;"><div style="color: rgb(0, 0, 0); letter-spacing: normal; orphans: auto; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; widows: auto; word-spacing: 0px; -webkit-text-stroke-width: 0px; word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;"><div style="color: rgb(0, 0, 0); letter-spacing: normal; orphans: auto; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; widows: auto; word-spacing: 0px; -webkit-text-stroke-width: 0px; word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;"><div style="color: rgb(0, 0, 0); letter-spacing: normal; orphans: auto; text-align: start; text-indent: 0px; text-transform: none; white-space: normal; widows: auto; word-spacing: 0px; -webkit-text-stroke-width: 0px; word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;"><div>--&nbsp;</div><div>Ian Hinder</div><div><a href="http://members.aei.mpg.de/ianhin">http://members.aei.mpg.de/ianhin</a></div></div></div></div></div>
</div>
<br></div></body></html>