
<html><head><title>strange PETSc/KSP GMRES timings for MPI+OMP configuration on KNLs</title>

</head>

<body>

<span style=" font-family:'Tahoma'; font-size: 10pt;">Hi,<br>

<br>

For  several  days  I've been trying to figure out what is going wrong<br>

with my python app timings solving Ax=b with KSP (GMRES) solver when trying to run on Intel's KNL 7210/7230.<br>

<br>

I  downsized  the  problem  to  1000x1000 A matrix and a single node and<br>

observed the following:<br>

<br>

<img width=482 height=260 alt="" style="padding : 1px;" src="cid:113AA549.01D2E6A0.1F35115E.77F210D8_csseditor"><br>

I'm attaching 2 extreme timings where configurations differ only by 1 OMP thread (64MPI/1 OMP vs 64/2 OMPs),<br>

23321 vs 23325 slurm task ids.<br>

<br>

Any help will be appreciated....<br>

<br>

Best,<br>

Damian</body></html>