<div dir="ltr">changing the queue to "batch", I get this <div><span class="im" style="font-family:arial,sans-serif;font-size:12.7272720336914px"><div>Execution failed:</div><div>Exception in simulate:</div><div>    Arguments: [--timesteps, 1, --range, 100, --nvalues, 5]</div><div>    Host: black</div></span><div style="font-family:arial,sans-serif;font-size:12.7272720336914px">    Directory: p4-run026/jobs/5/simulate-58d6x2yl</div><span class="im" style="font-family:arial,sans-serif;font-size:12.7272720336914px"><div><span style="white-space:pre-wrap">     </span>exception @ swift-int-staging.k, line: 181</div><div>Caused by: </div><div><span style="white-space:pre-wrap">    </span>exception @ swift-int-staging.k, line: 177</div><div>Caused by: null</div></span><div style="font-family:arial,sans-serif;font-size:12.7272720336914px">Caused by: org.globus.cog.abstraction.impl.common.execution.JobException: Job failed with an exit code of 1</div></div><div style="font-family:arial,sans-serif;font-size:12.7272720336914px"><br></div><div style="font-family:arial,sans-serif;font-size:12.7272720336914px">???? </div></div><div class="gmail_extra"><br><div class="gmail_quote">On Sat, Sep 27, 2014 at 5:17 PM, Mihael Hategan <span dir="ltr"><<a href="mailto:hategan@mcs.anl.gov" target="_blank">hategan@mcs.anl.gov</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Hi Justin,<br>
<br>
Is there a queue named "normal" on that machine (qstat -q should tell<br>
you)?<br>
<span class="HOEnZb"><font color="#888888"><br>
Mihael<br>
</font></span><div class="HOEnZb"><div class="h5"><br>
On Sat, 2014-09-27 at 15:41 -0400, Justin bbt wrote:<br>
> So, I am using this config<br>
><br>
><br>
> <pool handle="black"><br>
>     <execution provider="coaster" jobmanager="local:pbs" URL="none"/><br>
>     <profile namespace="env"    key="PATHPREFIX">{env.PWD}/../app</profile><br>
>     <profile namespace="globus" key="jobsPerNode">1</profile><br>
>     <profile namespace="globus" key="queue">normal</profile><br>
> <profile namespace="globus"  key="ppn">16</profile><br>
>   <profile namespace="globus" key="maxWallTime">00:01:00</profile><br>
>     <profile namespace="globus" key="maxTime">3600</profile><br>
>     <profile namespace="globus" key="lowOverAllocation">100</profile><br>
>     <profile namespace="globus" key="highOverAllocation">100</profile><br>
>     <profile namespace="globus" key="slots">2</profile><br>
>     <profile namespace="globus" key="maxNodes">1</profile><br>
>     <profile namespace="globus" key="nodeGranularity">1</profile><br>
>     <profile namespace="karajan" key="jobThrottle">.320</profile><br>
>     <profile namespace="karajan" key="initialScore">10000</profile><br>
>   <profile namespace="globus" key="slots">1</profile><br>
>    <profile namespace="globus"  key="project">TG-CCR134513</profile><br>
>     <workdirectory>/brashear/usrname</workdirectory><br>
>       <profile namespace="swift" key="stagingMethod">local</profile><br>
> <filesystem provider="local" /><br>
> </pool><br>
><br>
> but, it does not work and give this error :<br>
><br>
> Swift 0.95 RC6 swift-r7900 cog-r3908<br>
> RunID: run011<br>
> Warning: The @ syntax for function invocation is deprecated<br>
> [Error] sites.xml, line 2, col 10: cvc-elt.1: Cannot find the declaration<br>
> of element 'config'.<br>
> Progress: Sat, 27 Sep 2014 15:35:52-0400<br>
><br>
> Could not submit job (qsub reported an exit code of 170).<br>
> qsub: Unknown queue MSG=cannot locate queue<br>
><br>
> Execution failed:<br>
> Exception in simulate:<br>
>     Arguments: [--timesteps, 1, --range, 100, --nvalues, 5]<br>
>     Host: black<br>
>     Directory: p4-run011/jobs/s/simulate-sdm041yl<br>
> exception @ swift-int-staging.k, line: 181<br>
> Caused by:<br>
> exception @ swift-int-staging.k, line: 177<br>
> Caused by: Block task failed: Error submitting block task<br>
> org.globus.cog.abstraction.impl.common.task.TaskSubmissionException: Could<br>
> not submit job (qsub reported an exit code of 170).<br>
> qsub: Unknown queue MSG=cannot locate queue<br>
><br>
> at<br>
> org.globus.cog.abstraction.impl.scheduler.common.AbstractJobSubmissionTaskHandler.submit(AbstractJobSubmissionTaskHandler.java:63)<br>
> at<br>
> org.globus.cog.abstraction.impl.common.AbstractTaskHandler.submit(AbstractTaskHandler.java:45)<br>
> at<br>
> org.globus.cog.abstraction.impl.common.task.ExecutionTaskHandler.submit(ExecutionTaskHandler.java:61)<br>
> at<br>
> org.globus.cog.abstraction.coaster.service.job.manager.BlockTaskSubmitter.run(BlockTaskSubmitter.java:70)<br>
> Caused by:<br>
> org.globus.cog.abstraction.impl.scheduler.common.ProcessException: Could<br>
> not submit job (qsub reported an exit code of 170).<br>
> qsub: Unknown queue MSG=cannot locate queue<br>
><br>
> at<br>
> org.globus.cog.abstraction.impl.scheduler.common.AbstractExecutor.start(AbstractExecutor.java:113)<br>
> at<br>
> org.globus.cog.abstraction.impl.scheduler.common.AbstractJobSubmissionTaskHandler.submit(AbstractJobSubmissionTaskHandler.java:53)<br>
> ... 3 more<br>
><br>
><br>
><br>
> also, in some configs I saw this. But I dont know what this is and what<br>
> values should I set to<br>
><br>
>     <profile namespace="globus"<br>
> key="providerAttributes">pbs.aprun;pbs.mpp;depth=32</profile><br>
><br>
><br>
> On Tue, Sep 23, 2014 at 6:22 PM, Justin bbt <<a href="mailto:justinbbt@gmail.com">justinbbt@gmail.com</a>> wrote:<br>
><br>
> > Thank you very much.<br>
> ><br>
> > I am actually using the Blacklight, which I guess is PBS based.<br>
> > So, should I use the Crays tutorial and setting ?<br>
> > <a href="http://swift-lang.org/tutorials/cray/tutorial.html" target="_blank">http://swift-lang.org/tutorials/cray/tutorial.html</a><br>
> ><br>
> > On Tue, Sep 23, 2014 at 10:31 AM, Ketan Maheshwari <<a href="mailto:ketan@mcs.anl.gov">ketan@mcs.anl.gov</a>><br>
> > wrote:<br>
> ><br>
> >> Hi Justin,<br>
> >><br>
> >> If you are using xsede Stampede regular nodes (non xeon phi), here is a<br>
> >> site configuration that has worked for me in the past, connecting over ssh<br>
> >> to slurm:<br>
> >><br>
> >> <?xml version="1.0" encoding="UTF-8"?><br>
> >> <config xmlns="<a href="http://www.ci.uchicago.edu/swift/SwiftSites" target="_blank">http://www.ci.uchicago.edu/swift/SwiftSites</a>"><br>
> >>  <pool handle="stampede"><br>
> >>    <execution provider="coaster" jobmanager="ssh-cl:slurm" url="<br>
> >> <a href="http://stampede.tacc.utexas.edu" target="_blank">stampede.tacc.utexas.edu</a>"/><br>
> >>    <filesystem provider="local" /><br>
> >>    <profile namespace="globus"  key="jobsPerNode">1</profile><br>
> >>    <profile namespace="globus"  key="ppn">1</profile><br>
> >>    <profile namespace="globus"  key="maxTime">7500</profile><br>
> >>    <profile namespace="globus"  key="maxwalltime">00:10:00</profile><br>
> >>    <profile namespace="globus"  key="lowOverallocation">100</profile><br>
> >>    <profile namespace="globus"  key="highOverallocation">100</profile><br>
> >>    <profile namespace="globus"  key="queue">normal</profile><br>
> >>    <profile namespace="globus"  key="nodeGranularity">1</profile><br>
> >>    <profile namespace="globus"  key="maxNodes">1</profile><br>
> >>    <profile namespace="globus" key="slots">1</profile><br>
> >>    <profile namespace="globus"  key="project">TG-EAR130015</profile><br>
> >>    <profile namespace="karajan" key="jobThrottle">.3199</profile><br>
> >>    <profile namespace="karajan" key="initialScore">10000</profile><br>
> >>    <workdirectory>/tmp/{env.USER}/swift.work</workdirectory><br>
> >>   </pool><br>
> >> </config><br>
> >><br>
> >> You will need to replace project id with yours.<br>
> >><br>
> >> Thanks,<br>
> >> Ketan<br>
> >><br>
> >> On Mon, Sep 22, 2014 at 8:32 PM, Justin bbt <<a href="mailto:justinbbt@gmail.com">justinbbt@gmail.com</a>> wrote:<br>
> >><br>
> >>> Hi<br>
> >>><br>
> >>> If I want to use resources on the xsede<br>
> >>> <a href="https://www.xsede.org/overview" target="_blank">https://www.xsede.org/overview</a><br>
> >>> which site config should I use ?<br>
> >>><br>
> >>><br>
> >>> _______________________________________________<br>
> >>> Swift-user mailing list<br>
> >>> <a href="mailto:Swift-user@ci.uchicago.edu">Swift-user@ci.uchicago.edu</a><br>
> >>> <a href="https://lists.ci.uchicago.edu/cgi-bin/mailman/listinfo/swift-user" target="_blank">https://lists.ci.uchicago.edu/cgi-bin/mailman/listinfo/swift-user</a><br>
> >>><br>
> >><br>
> >><br>
> ><br>
> _______________________________________________<br>
> Swift-user mailing list<br>
> <a href="mailto:Swift-user@ci.uchicago.edu">Swift-user@ci.uchicago.edu</a><br>
> <a href="https://lists.ci.uchicago.edu/cgi-bin/mailman/listinfo/swift-user" target="_blank">https://lists.ci.uchicago.edu/cgi-bin/mailman/listinfo/swift-user</a><br>
<br>
<br>
</div></div></blockquote></div><br></div>