<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.0 Transitional//EN">
<HTML><HEAD>
<META HTTP-EQUIV="Content-Type" CONTENT="text/html; charset=iso-8859-1">
<TITLE>Large Message Sizes with Mpich2 V 1.0.8</TITLE>

<META content="MSHTML 6.00.2900.3492" name=GENERATOR></HEAD>
<BODY>
<DIV><SPAN class=688013218-17032009><FONT face=Arial color=#0000ff 
size=2><B>UNRESTRICTED | ILLIMITÉ </B><BR><BR>Rajeev,</FONT></SPAN></DIV>
<DIV><SPAN class=688013218-17032009><FONT face=Arial color=#0000ff 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV><SPAN class=688013218-17032009><FONT face=Arial color=#0000ff 
size=2>Similar problems were experienced by other MCNP users.&nbsp; The feedback 
that I received from a user was to re-compile the code with a modified version 
of mpich2 in order to handle large messages.&nbsp; I browsed the documentation 
for mpich2 and haven't found any limitation that would explain why my runs crash 
when I use large models.</FONT></SPAN></DIV>
<DIV><SPAN class=688013218-17032009><FONT face=Arial color=#0000ff 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV><SPAN class=688013218-17032009><FONT face=Arial color=#0000ff size=2>Since 
yesterday I modified the MCNP source code for debugging purposes and realized 
that the crash&nbsp;happens when the send buffer is being initialized.&nbsp; I 
assume that MCNP is trying to send out large amount of information and requires 
significant resources on&nbsp;the system.&nbsp; The amount of memory consumed by 
the system is larger than the RAM + swap space.</FONT></SPAN></DIV>
<DIV><SPAN class=688013218-17032009><FONT face=Arial color=#0000ff 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV><SPAN class=688013218-17032009><FONT face=Arial color=#0000ff size=2>I will 
try to increase the swap space on my system and hopefully this will help me out 
to narrow down the problem.</FONT></SPAN></DIV>
<DIV><SPAN class=688013218-17032009><FONT face=Arial color=#0000ff 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV><SPAN class=688013218-17032009><FONT face=Arial color=#0000ff 
size=2>Thanks</FONT></SPAN></DIV>
<DIV><SPAN class=688013218-17032009><FONT face=Arial color=#0000ff 
size=2></FONT></SPAN>&nbsp;</DIV>
<DIV><SPAN class=688013218-17032009><FONT face=Arial color=#0000ff 
size=2>Benoit</FONT></SPAN></DIV>
<BLOCKQUOTE dir=ltr style="MARGIN-RIGHT: 0px">
  <DIV class=OutlookMessageHeader dir=ltr align=left><FONT face=Tahoma 
  size=2>-----Original Message-----<BR><B>From:</B> 
  mpich-discuss-bounces@mcs.anl.gov 
  [mailto:mpich-discuss-bounces@mcs.anl.gov]<B>On Behalf Of </B>Rajeev 
  Thakur<BR><B>Sent:</B> March 16, 2009 5:03 PM<BR><B>To:</B> 
  mpich-discuss@mcs.anl.gov<BR><B>Subject:</B> Re: [mpich-discuss] Large Message 
  Sizes with Mpich2 V 1.0.8<BR><BR></FONT></DIV>
  <DIV dir=ltr align=left><SPAN class=078170221-16032009><FONT face=Arial 
  color=#0000ff size=2>What maximum message predefined message size in MPICH2 
  are you refering to?</FONT></SPAN></DIV>
  <DIV dir=ltr align=left><SPAN class=078170221-16032009><FONT face=Arial 
  color=#0000ff size=2></FONT></SPAN>&nbsp;</DIV>
  <DIV dir=ltr align=left><SPAN class=078170221-16032009><FONT face=Arial 
  color=#0000ff size=2>Rajeev</FONT></SPAN></DIV><BR>
  <BLOCKQUOTE 
  style="PADDING-LEFT: 5px; MARGIN-LEFT: 5px; BORDER-LEFT: #0000ff 2px solid; MARGIN-RIGHT: 0px">
    <DIV class=OutlookMessageHeader lang=en-us dir=ltr align=left>
    <HR tabIndex=-1>
    <FONT face=Tahoma size=2><B>From:</B> mpich-discuss-bounces@mcs.anl.gov 
    [mailto:mpich-discuss-bounces@mcs.anl.gov] <B>On Behalf Of </B>Arsenault, 
    Benoit<BR><B>Sent:</B> Monday, March 16, 2009 3:21 PM<BR><B>To:</B> 
    mpich-discuss@mcs.anl.gov<BR><B>Subject:</B> [mpich-discuss] Large Message 
    Sizes with Mpich2 V 1.0.8<BR></FONT><BR></DIV>
    <DIV></DIV><!-- Converted from text/rtf format -->
    <P><B><FONT face=Arial size=2>UNRESTRICTED | ILLIMITÉ</FONT></B> </P>
    <P><FONT face=Arial size=2>Mpich2 Users,</FONT> </P>
    <P><FONT face=Arial size=2>I compiled the 64-bit mpich2 Version 1.0.8 with 
    MCNP5 Version 1.40 on Linux RedHat.&nbsp; I can run reasonable size problems 
    without any difficulties, but the code crashes when I use large 
    models.&nbsp; The error message that I get is listed below and relates to a 
    subroutine in MCNP5.</FONT></P>
    <P><FONT face=Arial size=2>&nbsp;[pe:0] **DOTCOMM Error** DOTCOMMI_PACK 
    (dotcommi_pack.c:104[!(( dotcommp_sbuf.data != ((void *)0) ))]) 
    (alloc(dotcommp_sbuf.data)) (2069154944)</FONT></P>
    <P><FONT face=Arial size=2>&nbsp;[pe:0] **DOTCOMM Error** DOTCOMMI_PACK 
    (dotcommi_pack.c:104[!(( dotcommp_sbuf.data != ((void *)0) ))]) 
    (alloc(dotcommp_sbuf.data)) (2049205848)</FONT></P>
    <P><FONT face=Arial size=2>&nbsp;[pe:0] **DOTCOMM Error** DOTCOMMI_PACK 
    (dotcommi_pack.c:104[!(( dotcommp_sbuf.data != ((void *)0) ))]) 
    (alloc(dotcommp_sbuf.data)) (2029256752)</FONT></P>
    <P><FONT face=Arial size=2>&nbsp;[pe:0] **DOTCOMM Error** DOTCOMMI_PACK 
    (dotcommi_pack.c:104[!(( dotcommp_sbuf.data != ((void *)0) ))]) 
    (alloc(dotcommp_sbuf.data)) (2029256704)</FONT></P>
    <P><FONT face=Arial size=2>&nbsp;[pe:0] **DOTCOMM Error** DOTCOMMI_PACK 
    (dotcommi_pack.c:104[!(( dotcommp_sbuf.data != ((void *)0) ))]) 
    (alloc(dotcommp_sbuf.data)) (2028987040)</FONT></P>
    <P><FONT face=Arial size=2>&nbsp;[pe:0] **DOTCOMM Error** DOTCOMMI_PACK 
    (dotcommi_pack.c:104[!(( dotcommp_sbuf.data != ((void *)0) ))]) 
    (alloc(dotcommp_sbuf.data)) (2028987032)</FONT></P>
    <P><FONT face=Arial size=2>&nbsp;[pe:0] **DOTCOMM Error** DOTCOMMI_PACK 
    (dotcommi_pack.c:104[!(( dotcommp_sbuf.data != ((void *)0) ))]) 
    (alloc(dotcommp_sbuf.data)) (2028592456).</FONT></P>
    <P><FONT face=Arial size=2>I browsed the MCNP Users' group and similar 
    problems have been encountered where users had to re-compile mpich2 with a 
    change to increase the maximum size of a message.&nbsp; I couldn't find a 
    way to go beyond the maximum size of a message pre-defined in mpich2 V 
    1.0.8.</FONT></P>
    <P><FONT face=Arial size=2>Would anyone knows if mpich2 V 1.0.8 has the same 
    limitations in terms of maximum message size, and if this can be 
    resolved?</FONT></P><BR>
    <P><FONT face=Arial size=2>Thanks for your help.</FONT> </P><BR>
    <P><FONT face=Arial size=2>Ben</FONT> </P><BR><BR><BR>
    <TABLE style="COLOR: black" bgColor=white>
      <TBODY>
      <TR>
        <TD><BR>CONFIDENTIAL&nbsp;AND&nbsp;PRIVILEGED&nbsp;INFORMATION&nbsp;NOTICE<BR><BR>This&nbsp;e-mail,&nbsp;and&nbsp;any&nbsp;attachments,&nbsp;may&nbsp;contain&nbsp;information&nbsp;that<BR>is&nbsp;confidential,&nbsp;subject&nbsp;to&nbsp;copyright,&nbsp;or&nbsp;exempt&nbsp;from&nbsp;disclosure.<BR>Any&nbsp;unauthorized&nbsp;review,&nbsp;disclosure,&nbsp;retransmission,&nbsp;<BR>dissemination&nbsp;or&nbsp;other&nbsp;use&nbsp;of&nbsp;or&nbsp;reliance&nbsp;on&nbsp;this&nbsp;information&nbsp;<BR>may&nbsp;be&nbsp;unlawful&nbsp;and&nbsp;is&nbsp;strictly&nbsp;prohibited.&nbsp;&nbsp;<BR><BR>AVIS&nbsp;D'INFORMATION&nbsp;CONFIDENTIELLE&nbsp;ET&nbsp;PRIVILÉGIÉE<BR><BR>Le&nbsp;présent&nbsp;courriel,&nbsp;et&nbsp;toute&nbsp;pièce&nbsp;jointe,&nbsp;peut&nbsp;contenir&nbsp;de&nbsp;<BR>l'information&nbsp;qui&nbsp;est&nbsp;confidentielle,&nbsp;régie&nbsp;par&nbsp;les&nbsp;droits&nbsp;<BR>d'auteur,&nbsp;ou&nbsp;interdite&nbsp;de&nbsp;divulgation.&nbsp;Tout&nbsp;examen,&nbsp;<BR>divulgation,&nbsp;retransmission,&nbsp;diffusion&nbsp;ou&nbsp;autres&nbsp;utilisations&nbsp;<BR>non&nbsp;autorisées&nbsp;de&nbsp;l'information&nbsp;ou&nbsp;dépendance&nbsp;non&nbsp;autorisée&nbsp;<BR>envers&nbsp;celle-ci&nbsp;peut&nbsp;être&nbsp;illégale&nbsp;et&nbsp;est&nbsp;strictement&nbsp;interdite.</TD></TR></TBODY></TABLE></BLOCKQUOTE></BLOCKQUOTE><br><br><table bgcolor=white style="color:black"><tr><td><br>CONFIDENTIAL&nbsp;AND&nbsp;PRIVILEGED&nbsp;INFORMATION&nbsp;NOTICE<br>
<br>
This&nbsp;e-mail,&nbsp;and&nbsp;any&nbsp;attachments,&nbsp;may&nbsp;contain&nbsp;information&nbsp;that<br>
is&nbsp;confidential,&nbsp;subject&nbsp;to&nbsp;copyright,&nbsp;or&nbsp;exempt&nbsp;from&nbsp;disclosure.<br>
Any&nbsp;unauthorized&nbsp;review,&nbsp;disclosure,&nbsp;retransmission,&nbsp;<br>
dissemination&nbsp;or&nbsp;other&nbsp;use&nbsp;of&nbsp;or&nbsp;reliance&nbsp;on&nbsp;this&nbsp;information&nbsp;<br>
may&nbsp;be&nbsp;unlawful&nbsp;and&nbsp;is&nbsp;strictly&nbsp;prohibited.&nbsp;&nbsp;<br>
<br>
AVIS&nbsp;D&#39;INFORMATION&nbsp;CONFIDENTIELLE&nbsp;ET&nbsp;PRIVILÉGIÉE<br>
<br>
Le&nbsp;présent&nbsp;courriel,&nbsp;et&nbsp;toute&nbsp;pièce&nbsp;jointe,&nbsp;peut&nbsp;contenir&nbsp;de&nbsp;<br>
l&#39;information&nbsp;qui&nbsp;est&nbsp;confidentielle,&nbsp;régie&nbsp;par&nbsp;les&nbsp;droits&nbsp;<br>
d&#39;auteur,&nbsp;ou&nbsp;interdite&nbsp;de&nbsp;divulgation.&nbsp;Tout&nbsp;examen,&nbsp;<br>
divulgation,&nbsp;retransmission,&nbsp;diffusion&nbsp;ou&nbsp;autres&nbsp;utilisations&nbsp;<br>
non&nbsp;autorisées&nbsp;de&nbsp;l&#39;information&nbsp;ou&nbsp;dépendance&nbsp;non&nbsp;autorisée&nbsp;<br>
envers&nbsp;celle-ci&nbsp;peut&nbsp;être&nbsp;illégale&nbsp;et&nbsp;est&nbsp;strictement&nbsp;interdite.</td></tr></table></BODY></HTML>