Maybe that arch didn't get rebuilt?  The HG time stamp in your stack trace says 'March 23'.<div>Hong alerted me to this bug today and the fix is here: <br><a href="http://petsc.cs.iit.edu/petsc/petsc-dev/rev/de0779566bd9">http://petsc.cs.iit.edu/petsc/petsc-dev/rev/de0779566bd9</a></div>

<div><br></div><div>Dmitry.<br><div class="gmail_quote">On Fri, Mar 30, 2012 at 9:27 PM, Barry Smith <span dir="ltr"><<a href="mailto:bsmith@mcs.anl.gov">bsmith@mcs.anl.gov</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">

<br>
  I will try again. But I just pulled before the test. Will see.<br>
<span class="HOEnZb"><font color="#888888"><br>
   Barry<br>
</font></span><div class="HOEnZb"><div class="h5"><br>
On Mar 30, 2012, at 9:21 PM, Dmitry Karpeev wrote:<br>
<br>
> Barry,<br>
> This looks like petsc-dev from about a week ago -- I fixed this bug today.<br>
> It runs on my laptop right now.<br>
><br>
> Dmitry.<br>
><br>
> On Fri, Mar 30, 2012 at 9:00 PM, Barry Smith <<a href="mailto:bsmith@mcs.anl.gov">bsmith@mcs.anl.gov</a>> wrote:<br>
><br>
> > [0]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [0]PETSC ERROR: Caught signal number 11 SEGV: Segmentation Violation, probably memory access out of range<br>
> > [0]PETSC ERROR: Try option -start_in_debugger or -on_error_attach_debugger<br>
> > [0]PETSC ERROR: or see <a href="http://www.mcs.anl.gov/petsc/documentation/faq.html#valgrind[0]PETSC" target="_blank">http://www.mcs.anl.gov/petsc/documentation/faq.html#valgrind[0]PETSC</a> ERROR: or try <a href="http://valgrind.org" target="_blank">http://valgrind.org</a> on GNU/linux and Apple Mac OS X to find memory corruption errors<br>


> > [0]PETSC ERROR: likely location of problem given in stack below<br>
> > [0]PETSC ERROR: ---------------------  Stack Frames ------------------------------------<br>
> > [0]PETSC ERROR: Note: The EXACT line numbers in the stack are not available,<br>
> > [0]PETSC ERROR:       INSTEAD the line number of the start of the function<br>
> > [0]PETSC ERROR:       is given.<br>
> > [0]PETSC ERROR: [0] DMCreateDecomposition line 854 /Users/barrysmith/Src/petsc-dev/src/dm/interface/dm.c<br>
> > [0]PETSC ERROR: [0] PCSetUp_ASM line 161 /Users/barrysmith/Src/petsc-dev/src/ksp/pc/impls/asm/asm.c<br>
> > [0]PETSC ERROR: [0] PCSetUp line 810 /Users/barrysmith/Src/petsc-dev/src/ksp/pc/interface/precon.c<br>
> > [0]PETSC ERROR: [0] KSPSetUp line 182 /Users/barrysmith/Src/petsc-dev/src/ksp/ksp/interface/itfunc.c<br>
> > [0]PETSC ERROR: [0] KSPSolve line 339 /Users/barrysmith/Src/petsc-dev/src/ksp/ksp/interface/itfunc.c<br>
> > [0]PETSC ERROR: [0] SNES_KSPSolve line 4169 /Users/barrysmith/Src/petsc-dev/src/snes/interface/snes.c<br>
> > [0]PETSC ERROR: [0] SNESSolve_LS line 143 /Users/barrysmith/Src/petsc-dev/src/snes/impls/ls/ls.c<br>
> > [0]PETSC ERROR: [0] SNESSolve line 3345 /Users/barrysmith/Src/petsc-dev/src/snes/interface/snes.c<br>
> > [0]PETSC ERROR: --------------------- Error Message ------------------------------------<br>
> > [0]PETSC ERROR: Signal received!<br>
> > [0]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [0]PETSC ERROR: Petsc Development HG revision: ebfd90d136e614e3f7e877dc536ab77f25382894  HG Date: Fri Mar 23 21:43:17 2012 -0500<br>
> > [0]PETSC ERROR: See docs/changes/index.html for recent updates.<br>
> > [0]PETSC ERROR: See docs/faq.html for hints about trouble shooting.<br>
> > [0]PETSC ERROR: See docs/index.html for manual pages.<br>
> > [0]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [0]PETSC ERROR: ./ex50 on a arch-gnu named barry-smiths-macbook-pro.local by barrysmith Fri Mar 30 20:27:34 2012<br>
> > [0]PETSC ERROR: Libraries linked from /Users/barrysmith/Src/petsc-dev/arch-gnu/lib<br>
> > [0]PETSC ERROR: Configure run at Fri Mar 23 22:22:13 2012<br>
> > [0]PETSC ERROR: Configure options --download-blacs --download-fftw --download-hypre --download-metis --download-mpich --download-mumps --download-parmetis --download-ptscotch --download-scalapack --download-superlu --download-superlu_dist --download-yaml --with-shared-libraries PETSC_ARCH=arch-gnu<br>


> > [0]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [0]PETSC ERROR: User provided function() line 0 in unknown directory unknown file<br>
> > application called MPI_Abort(MPI_COMM_WORLD, 59) - process 0<br>
> > [cli_0]: aborting job:<br>
> > application called MPI_Abort(MPI_COMM_WORLD, 59) - process 0<br>
> > [1]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [1]PETSC ERROR: Caught signal number 11 SEGV: Segmentation Violation, probably memory access out of range<br>
> > [1]PETSC ERROR: Try option -start_in_debugger or -on_error_attach_debugger<br>
> > [1]PETSC ERROR: or see <a href="http://www.mcs.anl.gov/petsc/documentation/faq.html#valgrind[1]PETSC" target="_blank">http://www.mcs.anl.gov/petsc/documentation/faq.html#valgrind[1]PETSC</a> ERROR: or try <a href="http://valgrind.org" target="_blank">http://valgrind.org</a> on GNU/linux and Apple Mac OS X to find memory corruption errors<br>


> > [1]PETSC ERROR: likely location of problem given in stack below<br>
> > [1]PETSC ERROR: ---------------------  Stack Frames ------------------------------------<br>
> > [1]PETSC ERROR: Note: The EXACT line numbers in the stack are not available,<br>
> > [1]PETSC ERROR:       INSTEAD the line number of the start of the function<br>
> > [1]PETSC ERROR:       is given.<br>
> > [1]PETSC ERROR: [1] DMCreateDecomposition line 854 /Users/barrysmith/Src/petsc-dev/src/dm/interface/dm.c<br>
> > [1]PETSC ERROR: [1] PCSetUp_ASM line 161 /Users/barrysmith/Src/petsc-dev/src/ksp/pc/impls/asm/asm.c<br>
> > [1]PETSC ERROR: [1] PCSetUp line 810 /Users/barrysmith/Src/petsc-dev/src/ksp/pc/interface/precon.c<br>
> > [1]PETSC ERROR: [1] KSPSetUp line 182 /Users/barrysmith/Src/petsc-dev/src/ksp/ksp/interface/itfunc.c<br>
> > [1]PETSC ERROR: [1] KSPSolve line 339 /Users/barrysmith/Src/petsc-dev/src/ksp/ksp/interface/itfunc.c<br>
> > [1]PETSC ERROR: [1] SNES_KSPSolve line 4169 /Users/barrysmith/Src/petsc-dev/src/snes/interface/snes.c<br>
> > [1]PETSC ERROR: [1] SNESSolve_LS line 143 /Users/barrysmith/Src/petsc-dev/src/snes/impls/ls/ls.c<br>
> > [1]PETSC ERROR: [1] SNESSolve line 3345 /Users/barrysmith/Src/petsc-dev/src/snes/interface/snes.c<br>
> > [1]PETSC ERROR: --------------------- Error Message ------------------------------------<br>
> > [1]PETSC ERROR: Signal received!<br>
> > [1]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [1]PETSC ERROR: Petsc Development HG revision: ebfd90d136e614e3f7e877dc536ab77f25382894  HG Date: Fri Mar 23 21:43:17 2012 -0500<br>
> > [1]PETSC ERROR: See docs/changes/index.html for recent updates.<br>
> > [1]PETSC ERROR: See docs/faq.html for hints about trouble shooting.<br>
> > [1]PETSC ERROR: See docs/index.html for manual pages.<br>
> > [1]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [1]PETSC ERROR: ./ex50 on a arch-gnu named barry-smiths-macbook-pro.local by barrysmith Fri Mar 30 20:27:34 2012<br>
> > [1]PETSC ERROR: Libraries linked from /Users/barrysmith/Src/petsc-dev/arch-gnu/lib<br>
> > [1]PETSC ERROR: Configure run at Fri Mar 23 22:22:13 2012<br>
> > [1]PETSC ERROR: Configure options --download-blacs --download-fftw --download-hypre --download-metis --download-mpich --download-mumps --download-parmetis --download-ptscotch --download-scalapack --download-superlu --download-superlu_dist --download-yaml --with-shared-libraries PETSC_ARCH=arch-gnu<br>


> > [1]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [1]PETSC ERROR: User provided function() line 0 in unknown directory unknown file<br>
> > application called MPI_Abort(MPI_COMM_WORLD, 59) - process 1<br>
> > [cli_1]: aborting job:<br>
> > application called MPI_Abort(MPI_COMM_WORLD, 59) - process 1<br>
> > [2]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [2]PETSC ERROR: Caught signal number 11 SEGV: Segmentation Violation, probably memory access out of range<br>
> > [2]PETSC ERROR: Try option -start_in_debugger or -on_error_attach_debugger<br>
> > [2]PETSC ERROR: or see <a href="http://www.mcs.anl.gov/petsc/documentation/faq.html#valgrind[2]PETSC" target="_blank">http://www.mcs.anl.gov/petsc/documentation/faq.html#valgrind[2]PETSC</a> ERROR: or try <a href="http://valgrind.org" target="_blank">http://valgrind.org</a> on GNU/linux and Apple Mac OS X to find memory corruption errors<br>


> > [2]PETSC ERROR: likely location of problem given in stack below<br>
> > [2]PETSC ERROR: ---------------------  Stack Frames ------------------------------------<br>
> > [2]PETSC ERROR: Note: The EXACT line numbers in the stack are not available,<br>
> > [2]PETSC ERROR:       INSTEAD the line number of the start of the function<br>
> > [2]PETSC ERROR:       is given.<br>
> > [2]PETSC ERROR: [2] DMCreateDecomposition line 854 /Users/barrysmith/Src/petsc-dev/src/dm/interface/dm.c<br>
> > [2]PETSC ERROR: [2] PCSetUp_ASM line 161 /Users/barrysmith/Src/petsc-dev/src/ksp/pc/impls/asm/asm.c<br>
> > [2]PETSC ERROR: [2] PCSetUp line 810 /Users/barrysmith/Src/petsc-dev/src/ksp/pc/interface/precon.c<br>
> > [2]PETSC ERROR: [2] KSPSetUp line 182 /Users/barrysmith/Src/petsc-dev/src/ksp/ksp/interface/itfunc.c<br>
> > [2]PETSC ERROR: [2] KSPSolve line 339 /Users/barrysmith/Src/petsc-dev/src/ksp/ksp/interface/itfunc.c<br>
> > [2]PETSC ERROR: [2] SNES_KSPSolve line 4169 /Users/barrysmith/Src/petsc-dev/src/snes/interface/snes.c<br>
> > [2]PETSC ERROR: [2] SNESSolve_LS line 143 /Users/barrysmith/Src/petsc-dev/src/snes/impls/ls/ls.c<br>
> > [2]PETSC ERROR: [2] SNESSolve line 3345 /Users/barrysmith/Src/petsc-dev/src/snes/interface/snes.c<br>
> > [2]PETSC ERROR: --------------------- Error Message ------------------------------------<br>
> > [2]PETSC ERROR: Signal received!<br>
> > [2]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [2]PETSC ERROR: Petsc Development HG revision: ebfd90d136e614e3f7e877dc536ab77f25382894  HG Date: Fri Mar 23 21:43:17 2012 -0500<br>
> > [2]PETSC ERROR: See docs/changes/index.html for recent updates.<br>
> > [2]PETSC ERROR: See docs/faq.html for hints about trouble shooting.<br>
> > [2]PETSC ERROR: See docs/index.html for manual pages.<br>
> > [2]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [2]PETSC ERROR: ./ex50 on a arch-gnu named barry-smiths-macbook-pro.local by barrysmith Fri Mar 30 20:27:34 2012<br>
> > [2]PETSC ERROR: Libraries linked from /Users/barrysmith/Src/petsc-dev/arch-gnu/lib<br>
> > [2]PETSC ERROR: Configure run at Fri Mar 23 22:22:13 2012<br>
> > [2]PETSC ERROR: Configure options --download-blacs --download-fftw --download-hypre --download-metis --download-mpich --download-mumps --download-parmetis --download-ptscotch --download-scalapack --download-superlu --download-superlu_dist --download-yaml --with-shared-libraries PETSC_ARCH=arch-gnu<br>


> > [2]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [2]PETSC ERROR: User provided function() line 0 in unknown directory unknown file<br>
> > application called MPI_Abort(MPI_COMM_WORLD, 59) - process 2<br>
> > [cli_2]: aborting job:<br>
> > application called MPI_Abort(MPI_COMM_WORLD, 59) - process 2<br>
> > [3]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [3]PETSC ERROR: Caught signal number 11 SEGV: Segmentation Violation, probably memory access out of range<br>
> > [3]PETSC ERROR: Try option -start_in_debugger or -on_error_attach_debugger<br>
> > [3]PETSC ERROR: or see <a href="http://www.mcs.anl.gov/petsc/documentation/faq.html#valgrind[3]PETSC" target="_blank">http://www.mcs.anl.gov/petsc/documentation/faq.html#valgrind[3]PETSC</a> ERROR: or try <a href="http://valgrind.org" target="_blank">http://valgrind.org</a> on GNU/linux and Apple Mac OS X to find memory corruption errors<br>


> > [3]PETSC ERROR: likely location of problem given in stack below<br>
> > [3]PETSC ERROR: ---------------------  Stack Frames ------------------------------------<br>
> > [3]PETSC ERROR: Note: The EXACT line numbers in the stack are not available,<br>
> > [3]PETSC ERROR:       INSTEAD the line number of the start of the function<br>
> > [3]PETSC ERROR:       is given.<br>
> > [3]PETSC ERROR: [3] DMCreateDecomposition line 854 /Users/barrysmith/Src/petsc-dev/src/dm/interface/dm.c<br>
> > [3]PETSC ERROR: [3] PCSetUp_ASM line 161 /Users/barrysmith/Src/petsc-dev/src/ksp/pc/impls/asm/asm.c<br>
> > [3]PETSC ERROR: [3] PCSetUp line 810 /Users/barrysmith/Src/petsc-dev/src/ksp/pc/interface/precon.c<br>
> > [3]PETSC ERROR: [3] KSPSetUp line 182 /Users/barrysmith/Src/petsc-dev/src/ksp/ksp/interface/itfunc.c<br>
> > [3]PETSC ERROR: [3] KSPSolve line 339 /Users/barrysmith/Src/petsc-dev/src/ksp/ksp/interface/itfunc.c<br>
> > [3]PETSC ERROR: [3] SNES_KSPSolve line 4169 /Users/barrysmith/Src/petsc-dev/src/snes/interface/snes.c<br>
> > [3]PETSC ERROR: [3] SNESSolve_LS line 143 /Users/barrysmith/Src/petsc-dev/src/snes/impls/ls/ls.c<br>
> > [3]PETSC ERROR: [3] SNESSolve line 3345 /Users/barrysmith/Src/petsc-dev/src/snes/interface/snes.c<br>
> > [3]PETSC ERROR: --------------------- Error Message ------------------------------------<br>
> > [3]PETSC ERROR: Signal received!<br>
> > [3]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [3]PETSC ERROR: Petsc Development HG revision: ebfd90d136e614e3f7e877dc536ab77f25382894  HG Date: Fri Mar 23 21:43:17 2012 -0500<br>
> > [3]PETSC ERROR: See docs/changes/index.html for recent updates.<br>
> > [3]PETSC ERROR: See docs/faq.html for hints about trouble shooting.<br>
> > [3]PETSC ERROR: See docs/index.html for manual pages.<br>
> > [3]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [3]PETSC ERROR: ./ex50 on a arch-gnu named barry-smiths-macbook-pro.local by barrysmith Fri Mar 30 20:27:34 2012<br>
> > [3]PETSC ERROR: Libraries linked from /Users/barrysmith/Src/petsc-dev/arch-gnu/lib<br>
> > [3]PETSC ERROR: Configure run at Fri Mar 23 22:22:13 2012<br>
> > [3]PETSC ERROR: Configure options --download-blacs --download-fftw --download-hypre --download-metis --download-mpich --download-mumps --download-parmetis --download-ptscotch --download-scalapack --download-superlu --download-superlu_dist --download-yaml --with-shared-libraries PETSC_ARCH=arch-gnu<br>


> > [3]PETSC ERROR: ------------------------------------------------------------------------<br>
> > [3]PETSC ERROR: User provided function() line 0 in unknown directory unknown file<br>
> > application called MPI_Abort(MPI_COMM_WORLD, 59) - process 3<br>
> > [cli_3]: aborting job:<br>
> > application called MPI_Abort(MPI_COMM_WORLD, 59) - process 3<br>
> /Users/barrysmith/Src/petsc-dev/src/snes/examples/tutorials<br>
> Possible problem with ex50_6, diffs above<br>
><br>
><br>
<br>
</div></div></blockquote></div><br></div>