<html xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40">
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
<meta name="Title" content="">
<meta name="Keywords" content="">
<meta name="Generator" content="Microsoft Word 15 (filtered medium)">
<style><!--
/* Font Definitions */
@font-face
        {font-family:Latha;
        panose-1:2 11 6 4 2 2 2 2 2 4;}
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0in;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Calibri",sans-serif;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:#954F72;
        text-decoration:underline;}
span.EmailStyle17
        {mso-style-type:personal-compose;
        font-family:"Calibri",sans-serif;
        color:windowtext;}
span.msoIns
        {mso-style-type:export-only;
        mso-style-name:"";
        text-decoration:underline;
        color:teal;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-family:"Calibri",sans-serif;}
@page WordSection1
        {size:8.5in 11.0in;
        margin:1.0in 1.0in 1.0in 1.0in;}
div.WordSection1
        {page:WordSection1;}
--></style>
</head>
<body bgcolor="white" lang="EN-US" link="#0563C1" vlink="#954F72">
<div class="WordSection1">
<p class="MsoNormal"><span style="font-size:11.0pt">Hello,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">I am running NHEP across 16 MPI processors over 16 nodes in a matrix of global size of 1,000,000x1,000,000 with approximately global 16,000,000 non-zeros. Each node has approximately 1million non-zeros.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">The following is my slepc code for EPS.
<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">PetscInt nev;<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">ierr = EPSCreate(PETSC_COMM_WORLD, &eps);  // CHKERRQ(ierr);<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">ierr = EPSSetOperators(eps, A, NULL);  // CHKERRQ(ierr);<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">ierr = EPSSetProblemType(eps, EPS_NHEP);  // CHKERRQ(ierr);<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">EPSSetWhichEigenpairs(eps, EPS_LARGEST_REAL);<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">EPSSetDimensions(eps, 100, PETSC_DEFAULT, PETSC_DEFAULT);<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">PRINTROOT("calling epssolve");<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">ierr = EPSSolve(eps);  // CHKERRQ(ierr);<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">ierr = EPSGetType(eps, &type);  // CHKERRQ(ierr);<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">ierr = PetscPrintf(PETSC_COMM_WORLD, " Solution method: %s\n\n", type);<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">// CHKERRQ(ierr);<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">ierr = EPSGetDimensions(eps, &nev, NULL, NULL);  // CHKERRQ(ierr);<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">ierr = PetscPrintf(PETSC_COMM_WORLD,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">                       " Number of requested eigenvalues: %D\n",<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">                       nev);  // CHKERRQ(ierr);<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">I am getting the following error. Attached is the entire error file for your reference. Please let me know what should I fix in this code.
<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">2]PETSC ERROR: Argument out of range<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[2]PETSC ERROR: Argument 2 out of range<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[2]PETSC ERROR: See http://www.mcs.anl.gov/petsc/documentation/faq.html for trouble shooting.<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[2]PETSC ERROR: Petsc Release Version 3.7.4, Oct, 02, 2016<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[2]PETSC ERROR: ./miniapps on a sandybridge named nid00300 by d3s Wed Jun 14 15:32:00 2017<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[13]PETSC ERROR: #1 BVDotVec_BLAS_Private() line 272 in /autofs/nccs-svm1_home1/ramki/libraries/slepc-3.7.3/src/sys/classes/bv/interface/bvblas.c<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[13]PETSC ERROR: #2 BVDotVec_Svec() line 150 in /autofs/nccs-svm1_home1/ramki/libraries/slepc-3.7.3/src/sys/classes/bv/impls/svec/svec.c<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[13]PETSC ERROR: #3 BVDotVec() line 191 in /autofs/nccs-svm1_home1/ramki/libraries/slepc-3.7.3/src/sys/classes/bv/interface/bvglobal.c<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[13]PETSC ERROR: #4 BVOrthogonalizeCGS1() line 81 in /autofs/nccs-svm1_home1/ramki/libraries/slepc-3.7.3/src/sys/classes/bv/interface/bvorthog.c<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[13]PETSC ERROR: #5 BVOrthogonalizeCGS() line 214 in /autofs/nccs-svm1_home1/ramki/libraries/slepc-3.7.3/src/sys/classes/bv/interface/bvorthog.c<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[13]PETSC ERROR: #6 BVOrthogonalizeColumn() line 371 in /autofs/nccs-svm1_home1/ramki/libraries/slepc-3.7.3/src/sys/classes/bv/interface/bvorthog.c<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[13]PETSC ERROR: #7 EPSBasicArnoldi() line 59 in /autofs/nccs-svm1_home1/ramki/libraries/slepc-3.7.3/src/eps/impls/krylov/epskrylov.c<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[13]PETSC ERROR: #8 EPSSolve_KrylovSchur_Default() line 203 in /autofs/nccs-svm1_home1/ramki/libraries/slepc-3.7.3/src/eps/impls/krylov/krylovschur/krylovschur.c<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt">[13]PETSC ERROR: #9 EPSSolve() line 101 in /autofs/nccs-svm1_home1/ramki/libraries/slepc-3.7.3/src/eps/interface/epssolve.c<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-size:11.0pt"><o:p> </o:p></span></p>
<p class="MsoNormal"><span style="font-family:"Times New Roman",serif">-- <o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:"Times New Roman",serif">Regards,<o:p></o:p></span></p>
<p class="MsoNormal"><span style="font-family:"Times New Roman",serif">Ramki<o:p></o:p></span></p>
<p class="MsoNormal"><o:p> </o:p></p>
</div>
</body>
</html>