<html><head><style type="text/css"><!-- DIV {margin:0px;} --></style></head><body><div style="font-family:times new roman, new york, times, serif;font-size:12pt"><DIV style="FONT-SIZE: 12pt; FONT-FAMILY: times new roman, new york, times, serif">Thanks,</DIV>
<DIV style="FONT-SIZE: 12pt; FONT-FAMILY: times new roman, new york, times, serif">I don;t have root access to the box.&nbsp; I will see if I can ask sys-admin to do it.&nbsp; I am running </DIV>
<DIV style="FONT-SIZE: 12pt; FONT-FAMILY: times new roman, new york, times, serif">Linux snowwhite 2.6.18-8.el5 #1 SMP</DIV>
<DIV style="FONT-SIZE: 12pt; FONT-FAMILY: times new roman, new york, times, serif">&nbsp;</DIV>
<DIV style="FONT-SIZE: 12pt; FONT-FAMILY: times new roman, new york, times, serif">DO you know if the broken yield got into this version ?&nbsp; </DIV>
<DIV style="FONT-SIZE: 12pt; FONT-FAMILY: times new roman, new york, times, serif">FYI : the 'yield' people said it is not 'broken', it is in fact the 'right yield'.</DIV>
<DIV style="FONT-SIZE: 12pt; FONT-FAMILY: times new roman, new york, times, serif">&nbsp;</DIV>
<DIV style="FONT-SIZE: 12pt; FONT-FAMILY: times new roman, new york, times, serif">tan</DIV>
<DIV style="FONT-SIZE: 12pt; FONT-FAMILY: times new roman, new york, times, serif"><BR><BR>&nbsp;</DIV>
<DIV style="FONT-SIZE: 12pt; FONT-FAMILY: times new roman, new york, times, serif">----- Original Message ----<BR>From: Darius Buntinas &lt;buntinas@mcs.anl.gov&gt;<BR>To: chong tan &lt;chong_guan_tan@yahoo.com&gt;<BR>Cc: mpich-discuss@mcs.anl.gov<BR>Sent: Monday, December 17, 2007 10:50:12 AM<BR>Subject: Re: [MPICH] any way to ask nemesis to turn-off and turn of active polling ?<BR><BR><BR>Try setting the processor affinity for the "average" processes (map each <BR>one to its own processor).&nbsp; If you have a kernel with the "broken" <BR>sched_yield implementations, that may not help.<BR><BR>If you have a "broken" sched_yield implementation, you can try doing <BR>this as root:<BR>&nbsp; sysctl kernel.sched_compat_yield=1<BR>or<BR>&nbsp; echo "1"&gt;/proc/sys/kernel/sched_compat_yield<BR><BR>-d<BR><BR><BR>On 12/17/2007 11:35 AM, chong tan wrote:<BR>&gt; Yes, in a very subtle way which has major impact on performance.&nbsp; I will <BR>&gt; try to
 decribe it a litle here:<BR>&gt;&nbsp; <BR>&gt; system has 32G, total image 35G.&nbsp; Load is a litle offbalance <BR>&gt; mathematically, 4X dual core, running 5 processes.<BR>&gt; 4 processes are the same size, each runs on a CPU.&nbsp; the last process is <BR>&gt; very small, about10% of others, run<BR>&gt; on a core of one of the CPU.&nbsp; SO 1 CPU runs 2 procs: average (P1)one and <BR>&gt; light one (P2).<BR>&gt;&nbsp; <BR>&gt; All proc do first MPI comm in a fixed algorithmic point.&nbsp; The 'useful' <BR>&gt; image is about 29G at that point, and should<BR>&gt; fit into the physical memory.&nbsp; P2 get there in a heart beat, then <BR>&gt; others., followed by P1&nbsp; which took another 60+ minutes<BR>&gt; to get there.&nbsp; If I combine P1 and P2 into 1 process, then I don;t no <BR>&gt; see this extra delay.<BR>&gt;&nbsp; <BR>&gt; tan<BR>&gt; <BR>&gt; <BR>&gt;&nbsp; <BR>&gt; ----- Original Message ----<BR>&gt; From: Darius Buntinas &lt;<A
 href="mailto:buntinas@mcs.anl.gov" ymailto="mailto:buntinas@mcs.anl.gov">buntinas@mcs.anl.gov</A>&gt;<BR>&gt; To: chong tan &lt;<A href="mailto:chong_guan_tan@yahoo.com" ymailto="mailto:chong_guan_tan@yahoo.com">chong_guan_tan@yahoo.com</A>&gt;<BR>&gt; Cc: <A href="mailto:mpich-discuss@mcs.anl.gov" ymailto="mailto:mpich-discuss@mcs.anl.gov">mpich-discuss@mcs.anl.gov</A><BR>&gt; Sent: Monday, December 17, 2007 8:02:17 AM<BR>&gt; Subject: Re: [MPICH] any way to ask nemesis to turn-off and turn of <BR>&gt; active polling ?<BR>&gt; <BR>&gt; <BR>&gt; No, there's no way to do that.&nbsp; Even MPI_Barrier will do active polling.<BR>&gt; <BR>&gt; Are you having issues where an MPI process that is waiting in a blocking<BR>&gt; call is taking CPU time away from other processes?<BR>&gt; <BR>&gt; -d<BR>&gt; <BR>&gt; On 12/14/2007 04:53 PM, chong tan wrote:<BR>&gt;&nbsp; &gt; My issue is like this :<BR>&gt;&nbsp; &gt; <BR>&gt;&nbsp; &gt; among all the processess,
 some will get to the point of first MPI<BR>&gt;&nbsp; &gt; communication points faster than<BR>&gt;&nbsp; &gt; than other.&nbsp; Is there a way that I tell nemesis to start without doing<BR>&gt;&nbsp; &gt; active polling, and then turn<BR>&gt;&nbsp; &gt; on active polling with some function ?<BR>&gt;&nbsp; &gt; <BR>&gt;&nbsp; &gt; Or should I just use MPI_Barrier() on that ?<BR>&gt;&nbsp; &gt; <BR>&gt;&nbsp; &gt; thanks<BR>&gt;&nbsp; &gt; tan<BR>&gt;&nbsp; &gt; <BR>&gt;&nbsp; &gt;<BR>&gt;&nbsp; &gt; ------------------------------------------------------------------------<BR>&gt;&nbsp; &gt; Be a better friend, newshound, and know-it-all with Yahoo! Mobile. Try<BR>&gt;&nbsp; &gt; it now.<BR>&gt;&nbsp; &gt; <BR>&gt; &lt;<A href="http://us.rd.yahoo.com/evt=51733/*http://mobile.yahoo.com/;_ylt=Ahu06i62sR8HDtDypao8Wcj9tAcJ" target=_blank>http://us.rd.yahoo.com/evt=51733/*http://mobile.yahoo.com/;_ylt=Ahu06i62sR8HDtDypao8Wcj9tAcJ</A> <BR>&gt; <BR>&gt;&nbsp;
 &gt;&nbsp; &gt;<BR>&gt; <BR>&gt; <BR>&gt; ------------------------------------------------------------------------<BR>&gt; Be a better friend, newshound, and know-it-all with Yahoo! Mobile. Try <BR>&gt; it now. <BR>&gt; &lt;<A href="http://us.rd.yahoo.com/evt=51733/*http://mobile.yahoo.com/;_ylt=Ahu06i62sR8HDtDypao8Wcj9tAcJ" target=_blank>http://us.rd.yahoo.com/evt=51733/*http://mobile.yahoo.com/;_ylt=Ahu06i62sR8HDtDypao8Wcj9tAcJ</A> <BR>&gt;&nbsp; &gt;<BR></DIV>
<DIV style="FONT-SIZE: 12pt; FONT-FAMILY: times new roman, new york, times, serif"><BR></DIV></div><br>
      <hr size=1>Be a better friend, newshound, and 
know-it-all with Yahoo! Mobile. <a href="http://us.rd.yahoo.com/evt=51733/*http://mobile.yahoo.com/;_ylt=Ahu06i62sR8HDtDypao8Wcj9tAcJ "> Try it now.</a></body></html>