<HTML><HEAD>
<META http-equiv=Content-Type content="text/html; charset=utf-8">
<META content="MSHTML 6.00.6000.17095" name=GENERATOR></HEAD>
<BODY style="MARGIN: 4px 4px 1px; FONT: 10pt Tahoma">
<DIV>Dear Jeff,</DIV>
<DIV>&nbsp;</DIV>
<DIV>We are currently moving our Blue Gene system from Loadleveler&nbsp;resource manager&nbsp;to Moab Scheduling system. The Moab is currently running very well with Slurm in Blue Gene but the problem is the mpi. Unfortunately; all the mpi wrappers in /bgsys/drivers/ppcfloor/comm/bin/&nbsp;were compiled against Loadleveler libraries. Is there any Blue Gene documentation that you think it may&nbsp;help me?</DIV>
<DIV>&nbsp;</DIV>
<DIV>Regards,</DIV>
<DIV>&nbsp;</DIV>
<DIV>Sticks&nbsp;<BR><BR>&gt;&gt;&gt; Jeff Hammond &lt;jhammond@alcf.anl.gov&gt; 13/12/2011 15:04 &gt;&gt;&gt;<BR>You should not install have to install MPICH2 on any Blue Gene system.<BR>Please look in /bgsys/drivers/ppcfloor/comm/bin/ for the mpi*<BR>compiler wrapper scripts.&nbsp; If they are not present, please follow the<BR>IBM documentation on how to install the system software via RPM.&nbsp; Do<BR>not try to install MPI on a Blue Gene by downloading the latest<BR>MPICH2.<BR><BR>Jeff<BR><BR>On Tue, Dec 13, 2011 at 6:30 AM, Sticks Mabakane &lt;smabakane@csir.co.za&gt; wrote:<BR>&gt; Dear Mpich-2,<BR>&gt;<BR>&gt; I am an administrator of Blue Gene system and currently trying to install<BR>&gt; mpich-2. I have successfully installed mpich-2 without any errors. However;<BR>&gt; when i try to run the DL_POLY application using mpich-2 is giving the<BR>&gt; following error:<BR>&gt;<BR>&gt; mpiexec@chpcsn] HYD_pmcd_pmi_alloc_pg_scratch<BR>&gt; (./pm/pmiserv/pmiserv_utils.c:595): assert (pg-&gt;pg_process_count *<BR>&gt; sizeof(struct HYD_pmcd_pmi_ecount)) failed<BR>&gt; [mpiexec@chpcsn] HYD_pmci_launch_procs (./pm/pmiserv/pmiserv_pmci.c:103):<BR>&gt; error allocating pg scratch space<BR>&gt; [mpiexec@chpcsn] main (./ui/mpich/mpiexec.c:401): process manager returned<BR>&gt; error launching processes<BR>&gt; ~<BR>&gt;<BR>&gt; I have also tried to issue the command: mpirun --help and it showed the same<BR>&gt; error message as follows:<BR>&gt;<BR>&gt; chpcsn:/bgsys/drivers/ppcfloor/bin # /bgsys/drivers/ppcfloor/bin/mpirun<BR>&gt; --help<BR>&gt; [mpiexec@chpcsn] HYDU_parse_array (./utils/args/args.c:137):<BR>&gt; [mpiexec@chpcsn] parse_args (./ui/mpich/utils.c:1387): error parsing input<BR>&gt; array<BR>&gt; [mpiexec@chpcsn] HYD_uii_mpx_get_parameters (./ui/mpich/utils.c:1438):<BR>&gt; unable to parse user arguments<BR>&gt;<BR>&gt; Usage: ./mpiexec [global opts] [exec1 local opts] : [exec2 local opts] : ...<BR>&gt;<BR>&gt; Global options (passed to all executables):<BR>&gt;<BR>&gt;&nbsp;&nbsp; Global environment options:<BR>&gt;&nbsp;&nbsp;&nbsp;&nbsp; -genv {name} {value}&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; environment variable name and value<BR>&gt;&nbsp;&nbsp;&nbsp;&nbsp; -genvlist {env1,env2,...}&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; environment variable list to pass<BR>&gt;&nbsp;&nbsp;&nbsp;&nbsp; -genvnone&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; do not pass any environment variables<BR>&gt;&nbsp;&nbsp;&nbsp;&nbsp; -genvall&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; pass all environment variables not<BR>&gt; managed<BR>&gt;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; by the launcher (default)<BR>&gt;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; :<BR>&gt;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; :<BR>&gt;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; :<BR>&gt;<BR>&gt; Mpich-2 was compiled using gcc-4.1.2 and G Fortran 95. Blue Gene system is<BR>&gt; running: Linux PowerPC. Please receive an attached config.log file.<BR>&gt;<BR>&gt; Regards,<BR>&gt;<BR>&gt; Sticks<BR>&gt;<BR>&gt;<BR>&gt; --<BR>&gt; This message is subject to the CSIR's copyright terms and conditions, e-mail<BR>&gt; legal notice, and implemented Open Document Format (ODF) standard.<BR>&gt; The full disclaimer details can be found at<BR>&gt; <A href="http://www.csir.co.za/disclaimer.html.">http://www.csir.co.za/disclaimer.html.</A><BR>&gt;<BR>&gt;<BR>&gt; This message has been scanned for viruses and dangerous content by<BR>&gt; MailScanner,<BR>&gt; and is believed to be clean.<BR>&gt;<BR>&gt;<BR>&gt; _______________________________________________<BR>&gt; mpich-discuss mailing list&nbsp;&nbsp;&nbsp;&nbsp; mpich-discuss@mcs.anl.gov<BR>&gt; To manage subscription options or unsubscribe:<BR>&gt; <A href="https://lists.mcs.anl.gov/mailman/listinfo/mpich-discuss">https://lists.mcs.anl.gov/mailman/listinfo/mpich-discuss</A><BR>&gt;<BR><BR><BR><BR>-- <BR>Jeff Hammond<BR>Argonne Leadership Computing Facility<BR>University of Chicago Computation Institute<BR>jhammond@alcf.anl.gov / (630) 252-5381<BR><A href="http://www.linkedin.com/in/jeffhammond">http://www.linkedin.com/in/jeffhammond</A><BR><A href="https://wiki-old.alcf.anl.gov/index.php/User:Jhammond">https://wiki-old.alcf.anl.gov/index.php/User:Jhammond</A><BR></DIV><font face="Verdana,Arial,Helvetica,Trebuchet MS" size="1">
<br />-- 
<br />This message is subject to the CSIR's copyright terms and conditions, e-mail legal notice, and implemented Open Document Format (ODF) standard.
<br />The full disclaimer details can be found at <a href="http://www.csir.co.za/disclaimer.html">http://www.csir.co.za/disclaimer.html</a>.
<p>
<br />This message has been scanned for viruses and dangerous content by <a href="http://www.mailscanner.info/"><b>MailScanner</b></a>, 
<br />and is believed to be clean.
</font>
</BODY></HTML>