A log of the run is here: /lustre/beagle/ketan/labs/modftdock/production/campaign5/ftdock-20110627-1307-5uq66e5a.log<br><br><div class="gmail_quote">On Tue, Jun 28, 2011 at 11:36 AM, Ketan Maheshwari <span dir="ltr"><<a href="mailto:ketancmaheshwari@gmail.com">ketancmaheshwari@gmail.com</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;">It seems at 1600 app task rate, after a while the run stalls. However, this does not get reflected on the std.err which seems to think tasks are still active. While std.out reports the waiting thread status and job queues die down.<div>
<div></div><div class="h5"><br>
<br><div class="gmail_quote">On Mon, Jun 27, 2011 at 2:00 PM, Ketan Maheshwari <span dir="ltr"><<a href="mailto:ketancmaheshwari@gmail.com" target="_blank">ketancmaheshwari@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">

I was trying trunk on beagle today. Seems when I try to scale up the number of app tasks, it hangs. To be more precise, I found that above a threshold of 1600 app tasks, the run hangs with following periodic std.outs:<br>

<br>
No events in 10s.<br><br>Registered futures:<br>string[] str_roots  Closed, 500 elements, no listeners<br>int n  Closed, no listeners<br>int n  Closed, no listeners<br>int n  Closed, no listeners<br>int n  Closed, no listeners<br>


int n  Closed, no listeners<br>int n  Closed, no listeners<br>int n  Closed, no listeners<br>int n  Closed, no listeners<br>int n  Closed, no listeners<br>int n  Closed, no listeners<br>int n  Closed, no listeners<br>int n  Closed, no listeners<br>


int n  Closed, no listeners<br>int n  Closed, no listeners<br>int n  Closed, no listeners<br>----<br><br>Waiting threads:<br>0-2<br>----<br><br clear="all">When, the threshold is <=1600 app tasks, it seems to work. The SWIFT_MAX_HEAP is 7000MB.<br>

<font color="#888888">
<br><br>-- <br>Ketan<br><br>
</font></blockquote></div><br><br clear="all"><br></div></div>-- <br><font color="#888888">Ketan<br><br><br>
</font></blockquote></div><br><br clear="all"><br>-- <br>Ketan<br><br><br>