On Sat, Oct 13, 2012 at 4:55 PM, Jed Brown <span dir="ltr"><<a href="mailto:jedbrown@mcs.anl.gov" target="_blank">jedbrown@mcs.anl.gov</a>></span> wrote:<br><div class="gmail_quote"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">

<div class="HOEnZb"><div class="h5">On Sat, Oct 13, 2012 at 3:53 PM, George Mathew <span dir="ltr"><<a href="mailto:gmnnus@gmail.com" target="_blank">gmnnus@gmail.com</a>></span> wrote:<br></div></div><div class="gmail_quote">

<div><div class="h5"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">

<div><span style="white-space:pre-wrap">On Sat, Oct 13, 2012 at 3:19 PM, Matthew Knepley <</span><a href="https://lists.mcs.anl.gov/mailman/listinfo/petsc-users" style="white-space:pre-wrap" target="_blank">knepley at gmail.com</a><span style="white-space:pre-wrap">> wrote:</span></div>

<pre style="white-space:pre-wrap">><i> On Sat, Oct 13, 2012 at 3:17 PM, George Mathew <<a href="https://lists.mcs.anl.gov/mailman/listinfo/petsc-users" target="_blank">gmnnus at gmail.com</a>> wrote:

</i>><i>

>> I have petsc 3.3 and mpich2 version 1.4.1p1 installed.

</i>>><i> When I run the example ex2.c code in the petsc user manual, it runs one

</i>>><i> one machine format. But, if I chose to run on multiple nodes, it gives

</i>>><i> error.

>> The example is the file ${PETSC}/src/ksp/ksp/examples/tutorials/ex2.c.

>> I compiled it and when run using the following command, it works.

</i>>><i> mpiexec -f machinefile -n 1 ./ex2

</i>>><i> But, if I run it using the command

</i>>><i> mpiexec -f machinefile -n 2 ./ex2

>> I get the following error.

</i>>><i>

</i>><i>

</i>><i> It is very likely that you are running the code with the wrong mpiexec

> (from another MPI installation).

> I cannot tell which MPI you used with configure.log.

</i>><i>

</i>

>Can you also try

>1. Run multiple processes on your local machine

>2. Run with -skip_petscrc</pre><pre style="white-space:pre-wrap">I have only one MPI installation. It is under /usr/local/bin. The following command works:</pre><pre style="white-space:pre-wrap">mpiexec -n 4 ./ex2</pre>

<pre style="white-space:pre-wrap">So, locally, multiple processes must be running fine.</pre><pre style="white-space:pre-wrap">How do I run with -skip_petscrc?</pre></blockquote><div><br></div></div></div><div>mpiexec -n 4 -f machinefile ./ex2 -skip_petscrc</div>

</div></blockquote><div><br></div><div>Here is the message when run with skip_petscrc:</div><div><br></div><div>$ mpiexec -f machinefile -n 4 ./ex2 -skip_petscrc</div><div>[0]PETSC ERROR: PetscWorldIsSingleHost() line 99 in src/sys/utils/pdisplay.c</div>

<div>[0]PETSC ERROR: PetscSetDisplay() line 125 in src/sys/utils/pdisplay.c</div><div>[0]PETSC ERROR: PetscOptionsCheckInitial_Private() line 319 in src/sys/objects/init.c</div><div>[0]PETSC ERROR: PetscInitialize() line 761 in src/sys/objects/pinit.c</div>

<div>PETSC ERROR: Logging has not been enabled.</div><div>You might have forgotten to call PetscInitialize().</div><div>application called MPI_Abort(MPI_COMM_WORLD, 56) - process 0 </div></div><br>