<div dir="ltr"><div>This matrix is 2000 x 200?  That's tiny.  Even a 2000-by-200 dense matrix takes only (2000*200 entries)*(8 bytes per entry) to store, or about 3 MB.  The sparse version might take 150KB.  The 'peak RSS' differs by 2MB, so this seems consistent.<br><br></div>Try a 20,000 x 20,000 dense and sparse matrix, by which time the memory usage will be dominated by the matrix storage.<br></div><div class="gmail_extra"><br><div class="gmail_quote">On 24 April 2017 at 17:24, D D <span dir="ltr"><<a href="mailto:driver.dan12@yahoo.com" target="_blank">driver.dan12@yahoo.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">



<div>
<div style="color:#000;background-color:#fff;font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px">
<div id="m_-542945584979095556yui_3_16_0_ym19_1_1493033032302_23896">Unless, of course, my assumption is incorrect. But why should my assumption be incorrect?<br>
</div>
<div id="m_-542945584979095556yui_3_16_0_ym19_1_1493033032302_23902"><br>
</div>
<div dir="ltr" id="m_-542945584979095556yui_3_16_0_ym19_1_1493033032302_24344">I think I'm constructing my sparse matrix properly by calling MatSetFromOptions. The loop from line 52 - 57 in example1.cpp may be incorrect.<br>
</div>
<div id="m_-542945584979095556yui_3_16_0_ym19_1_1493033032302_24345"><span><br>
</span></div>
<div id="m_-542945584979095556yui_3_16_0_ym19_1_1493033032302_24585"><span id="m_-542945584979095556yui_3_16_0_ym19_1_1493033032302_24584">How do you think I should measure the effect of the size of the sparse vs dense matrix structure to make sure I'm effectively using the PETSc sparse matrix structure
 in my example code?</span></div><div><div class="h5">
<div class="m_-542945584979095556qtdSeparateBR"><br>
<br>
</div>
<div class="m_-542945584979095556yahoo_quoted" style="display:block">
<div style="font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px">
<div style="font-family:HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:16px">
<div dir="ltr"><font face="Arial" size="2">On Monday, April 24, 2017 12:10 PM, D D <<a href="mailto:driver.dan12@yahoo.com" target="_blank">driver.dan12@yahoo.com</a>> wrote:<br>
</font></div>
<br>
<br>
<div class="m_-542945584979095556y_msg_container">
<div id="m_-542945584979095556yiv0567569497">
<div>
<div style="color:#000;background-color:#fff;font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px">
You are correct, and that is why I'm using the peak RSS. The total memory should be lower to reflect the sparse versus dense structure.<br clear="none">
<div class="m_-542945584979095556yiv0567569497qtdSeparateBR"><br clear="none">
<br clear="none">
</div>
<div class="m_-542945584979095556yiv0567569497yqt7881792458" id="m_-542945584979095556yiv0567569497yqt49326">
<div class="m_-542945584979095556yiv0567569497yahoo_quoted" style="display:block">
<div style="font-family:Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:13px">
<div style="font-family:HelveticaNeue,Helvetica Neue,Helvetica,Arial,Lucida Grande,sans-serif;font-size:16px">
<div dir="ltr"><font face="Arial" size="2">On Monday, April 24, 2017 11:28 AM, "Zhang, Hong" <<a href="mailto:hongzhang@anl.gov" target="_blank">hongzhang@anl.gov</a>> wrote:<br clear="none">
</font></div>
<br clear="none">
<br clear="none">
<div class="m_-542945584979095556yiv0567569497y_msg_container">
<div id="m_-542945584979095556yiv0567569497">
<div>The peak RSS does not tell you how much memory the matrix takes. It may include many things such as the binary, the libraries linked to it, and stack and heap memory.
<div class="m_-542945584979095556yiv0567569497"><br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
<div class="m_-542945584979095556yiv0567569497">Hong (Mr.)<br class="m_-542945584979095556yiv0567569497" clear="none">
<div class="m_-542945584979095556yiv0567569497yqt8050180386" id="m_-542945584979095556yiv0567569497yqt78088">
<div class="m_-542945584979095556yiv0567569497">
<div class="m_-542945584979095556yiv0567569497"><br class="m_-542945584979095556yiv0567569497" clear="none">
<div>
<blockquote class="m_-542945584979095556yiv0567569497" type="cite">
<div class="m_-542945584979095556yiv0567569497">On Apr 24, 2017, at 9:46 AM, D D <<a rel="nofollow" shape="rect" class="m_-542945584979095556yiv0567569497" href="mailto:driver.dan12@yahoo.com" target="_blank">driver.dan12@yahoo.com</a>> wrote:</div>
<br class="m_-542945584979095556yiv0567569497Apple-interchange-newline" clear="none">
<div class="m_-542945584979095556yiv0567569497">
<div class="m_-542945584979095556yiv0567569497">
<div class="m_-542945584979095556yiv0567569497" style="background-color:rgb(255,255,255);font-family:'Helvetica Neue',Helvetica,Arial,'Lucida Grande',sans-serif;font-size:13px">
<div class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_14257">
Hello,</div>
<div class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_13790">
<br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
<div class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_13789">
I see memory usage that confuses me:</div>
<div class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_13788">
<br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
<div class="m_-542945584979095556yiv0567569497" dir="ltr" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_15260">
me@blah:src$ ./example1 -n_row 200 -n_col 2000 -sparsity 0.03 -mat_type mpidenseInitialize<br class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_14304" clear="none">
Got options<br class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_14305" clear="none">
Create and assemble matrix<br class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_14306" clear="none">
Assembled<br class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_14307" clear="none">
Peak RSS 21 Mb<br class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_14308" clear="none">
me@blah:~/src$ ./example1 -n_row 200 -n_col 2000 -sparsity 0.03 -mat_type mpiaij<br class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_14309" clear="none">
Initialize<br class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_14310" clear="none">
Got options<br class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_14311" clear="none">
Create and assemble matrix<br class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_14312" clear="none">
Assembled<br class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_14313" clear="none">
Peak RSS 19 Mb<br class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_14314" clear="none">
<br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
<div class="m_-542945584979095556yiv0567569497" dir="ltr" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_13786">
I put my example code on Github so I can more effectively communicate my question. And here is my question: why does the program as written use so much memory for the sparse case - matrix type mpiaij? Note that I'm creating a random dense matrix with at most
 3% non-zero entries since this is my use case.<br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
<div class="m_-542945584979095556yiv0567569497" dir="ltr" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_15688">
<br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
<div class="m_-542945584979095556yiv0567569497" dir="ltr" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_15697">
I have read the relevant portions of the user's manual and searched for answers. Have I missed a resource that can answer my question?</div>
<div class="m_-542945584979095556yiv0567569497" dir="ltr" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_15757">
<br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
<div class="m_-542945584979095556yiv0567569497" dir="ltr" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_15737">
<a rel="nofollow" shape="rect" class="m_-542945584979095556yiv0567569497enhancr2_091ed883-8ee2-c9df-4955-6e64f88122d6" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16258" href="https://github.com/dtsmith2001/hpc" target="_blank">dtsmith2001/hpc</a><br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
<div class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16300">
<br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
<div class="m_-542945584979095556yiv0567569497ymail-preserve-class m_-542945584979095556yiv0567569497ymail-preserve-style m_-542945584979095556yiv0567569497yahoo-link-enhancr-card" dir="ltr" id="m_-542945584979095556yiv0567569497enhancr2_091ed883-8ee2-c9df-4955-6e64f88122d6" style="max-width:400px;font-family:'Helvetica Neue',Helvetica,Arial,sans-serif">
<a rel="nofollow" shape="rect" class="m_-542945584979095556yiv0567569497yahoo-enhancr-cardlink" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16281" href="https://github.com/dtsmith2001/hpc" style="text-decoration:none" target="_blank">
<table class="m_-542945584979095556yiv0567569497card-wrapper m_-542945584979095556yiv0567569497yahoo-ignore-table" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16280" style="max-width:400px" border="0" cellspacing="0" cellpadding="0">
<tbody class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16279">
<tr class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16278">
<td colspan="1" rowspan="1" class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16277" width="400">
<table class="m_-542945584979095556yiv0567569497card m_-542945584979095556yiv0567569497yahoo-ignore-table" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16276" style="max-width:400px" width="100%" border="0" cellspacing="0" cellpadding="0">
<tbody class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16275">
<tr class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16274">
<td colspan="1" rowspan="1" class="m_-542945584979095556yiv0567569497card-primary-image-cell" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16273" style="background:#000 url('') no-repeat center center;background-size:cover;height:200px" valign="top" bgcolor="#000000">
<table class="m_-542945584979095556yiv0567569497yahoo-ignore-table" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16272" style="width:100%" border="0" cellspacing="0" cellpadding="0">
<tbody class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16271">
<tr class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16270">
<td colspan="1" rowspan="1" class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16269" style="background:transparent url('') repeat left top;height:200px" valign="top" bgcolor="transparent">
<table class="m_-542945584979095556yiv0567569497yahoo-ignore-table" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16268" style="width:100%;height:185px;min-height:185px" height="185">
<tbody class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16267">
<tr class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16266">
<td colspan="1" rowspan="1" class="m_-542945584979095556yiv0567569497card-richInfo2" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16768" style="text-align:left;text-align:left;padding:15px 0 0 15px;vertical-align:top">
</td>
<td colspan="1" rowspan="1" class="m_-542945584979095556yiv0567569497card-actions" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16265" style="text-align:right;padding:15px 15px 0 0;vertical-align:top">
<div class="m_-542945584979095556yiv0567569497card-share-container"></div>
</td>
</tr>
</tbody>
</table>
</td>
</tr>
</tbody>
</table>
</td>
</tr>
<tr class="m_-542945584979095556yiv0567569497">
<td colspan="1" rowspan="1" class="m_-542945584979095556yiv0567569497">
<table class="m_-542945584979095556yiv0567569497card-info m_-542945584979095556yiv0567569497yahoo-ignore-table" style="background:#fff;width:95%;max-width:380px;border:1px solid #e0e4e9;border-bottom:3px solid #010101;margin-left:auto;margin-right:auto" border="0" cellspacing="0" cellpadding="0" align="center">
<tbody class="m_-542945584979095556yiv0567569497">
<tr class="m_-542945584979095556yiv0567569497">
<td colspan="1" rowspan="1" class="m_-542945584979095556yiv0567569497" style="background-color:#ffffff;padding:16px 0 16px 12px;vertical-align:top">
<img class="m_-542945584979095556yiv0567569497card-object-1 m_-542945584979095556yiv0567569497yahoo-ignore-inline-image m_-542945584979095556yiv0567569497ymail-preserve-class" style="min-width:32px;border:1px solid #e0e4e9;margin-top:3px" height="32">
</td>
<td colspan="1" rowspan="1" class="m_-542945584979095556yiv0567569497" style="vertical-align:middle;padding:16px 12px;width:99%">
<h2 class="m_-542945584979095556yiv0567569497card-title" style="font-size:16px;line-height:19px;margin:0 0 4px 0;font-family:'Helvetica Neue',Helvetica,Arial,sans-serif">
dtsmith2001/hpc</h2>
<div class="m_-542945584979095556yiv0567569497card-description" style="font-size:11px;line-height:15px;color:#999">
hpc - High Performance Computing Explorations using PETSc and SLEPc</div>
</td>
<td colspan="1" rowspan="1" class="m_-542945584979095556yiv0567569497" style="text-align:right;padding:16px 12px 16px 0">
</td>
</tr>
</tbody>
</table>
</td>
</tr>
</tbody>
</table>
</td>
</tr>
</tbody>
</table>
</a></div>
<div class="m_-542945584979095556yiv0567569497"><br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
<div class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_13785">
<br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
<div class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_16243">
Dale</div>
<div class="m_-542945584979095556yiv0567569497" id="m_-542945584979095556yiv0567569497yui_3_16_0_ym19_1_1493033032302_15791">
<br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
</div>
</div>
</div>
</blockquote>
</div>
<br class="m_-542945584979095556yiv0567569497" clear="none">
</div>
</div>
</div>
</div>
</div>
</div>
<br clear="none">
<br clear="none">
</div>
</div>
</div>
</div>
</div>
</div>
</div>
</div>
<br>
<br>
</div>
</div>
</div>
</div>
</div></div></div>
</div>

</blockquote></div><br></div>