<div dir="ltr">I am not certain if this will work -- worth a try.<div><br></div><div>Instead of exporting LD_LIBRARY_PATH etc yourself, use the scripts that Intel provides. These are safer since they keep changing them. For instance, on my cluster I have</div><div><br></div><div><div>VERS=2015</div><div>source /opt/intel/composer$VERS/bin/compilervars.sh intel64</div><div>source /opt/intel/composer$VERS/mkl/bin/mklvars.sh intel64</div><div><br></div><div># This should work always</div><div>export MKLPATH=$MKLROOT/lib/intel64</div><div>export MKLINC=$MKLROOT/include</div></div><div><br></div><div>Make sure that you are appropriately compiling, and check what version of VERS to use</div><div><br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Wed, Apr 27, 2016 at 9:42 AM, Walid Hetaba <span dir="ltr"><<a href="mailto:hetaba@fhi-berlin.mpg.de" target="_blank">hetaba@fhi-berlin.mpg.de</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">



<div bgcolor="#FFFFFF" text="#000000">
Dear colleagues,<br>
<br>
I'm trying to get the parallel version of WIEN2k 14.2 running on the institute's cluster, but I'm stuck now.<br>
I searched the mailing list for the error message I receive, but at first glance I did not find relevant postings.<br>
<br>
This is the problem I face:<br>
The serial version of WIEN2k is running fine (also when using qsub and the submission system).<br>
However, when trying to use the parallel version I get the following error when lapw1 is invoked in parallel mode:<br>
"Intel MKL FATAL ERROR: Cannot load symbol MKLMPI_Get_wrappers."<br>
<br>
Here the facts on hard- and software:<br>
I'm using WIEN2k 14.2 to run the example TiC case from the UG as a test to see whether all works out fine.<br>
I compiled the sofware using the Intel Cluster Studio with the Intel Fortran Compiler 16.0, Intel C++ Compiler 16.0, Intel MKL 11.3 and Intel MPI.<br>
I compiled it using FFTW3 and the MKL lapack, scalapack and blacs.<br>
<br>
The cluster consists of 37 nodes with 20 CPUs each. It is running a CentOS Linux distribution and it is using SGE as submission system. In the submission script orte is used as the parallel environment.<br>
<br>
This is what I've tried so far:<br>
I don't know why it can't find things from the MKL as I export all my environmental variables using the submission script, which I also checked by printing them.<br>
As additional information I include the submission script (WIEN2k-test-p.sh, which is still a bit messy as I adopted it from another program for testing reasons), the :parallel file with the error messages (which I renamed to .parallel so that Thunderbird on
 Windows can handle it), the output-file (TiC.o14540) and the .machines file.<br>
<br>
I get the same error messages when using OpenMPI instead of the IntelMPI, but the output is a bit different (see TiC.o14541).<br>
<br>
I did try different ways to export my environmental variables (to get rid of unnecessary stuff), also tried mpi as the parallel environment in the submission script instead of orte. I also tried to request a different number of slots,...<br>
But nothing off this got me rid of this error message.<br>
<br>
Has anybody experienced a similar problem or are there any hints what else I can check?<br>
<br>
Thanks for your help.<br>
All the best,<br>
Walid<span class="HOEnZb"><font color="#888888"><br>
<br>
<pre cols="72">-- 
Dr.techn. Walid Hetaba

Fritz-Haber-Institut der Max-Planck-Gesellschaft
Department of Inorganic Chemistry
Faradayweg 4-6, 14195 Berlin, Germany
T: +49 30 8413-4412
<a href="mailto:hetaba@fhi-berlin.mpg.de" target="_blank">hetaba@fhi-berlin.mpg.de</a>
<a href="http://www.fhi-berlin.mpg.de" target="_blank">http://www.fhi-berlin.mpg.de</a></pre>
</font></span></div>

</blockquote></div><br><br clear="all"><div><br></div>-- <br><div class="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><span style="font-size:12.8px">Professor Laurence Marks</span><br></div><div dir="ltr"><span style="font-size:12.8px">"Research is to see what everybody else has seen, and to think what nobody else has thought", </span><span style="font-size:12.8px">Albert Szent-Gyorgi</span><br><a href="http://www.numis.northwestern.edu" target="_blank">www.numis.northwestern.edu</a> ; <span style="font-size:12.8px">Corrosion in 4D: </span><a href="http://MURI4D.numis.northwestern.edu" style="font-size:12.8px" target="_blank">MURI4D.numis.northwestern.edu</a><div><span style="font-size:12.8px">Partner of the CFW 100% program for gender equity, </span><a href="http://www.cfw.org/100-percent" style="font-size:12.8px" target="_blank">www.cfw.org/100-percent</a></div><div>Co-Editor, Acta Cryst A</div></div></div></div></div></div></div></div></div></div></div>
</div>