<div dir="ltr"><div class="gmail_extra"><br><div class="gmail_quote">On Wed, Jan 23, 2013 at 10:13 PM, Karl Rupp <span dir="ltr"><<a href="mailto:rupp@mcs.anl.gov" target="_blank">rupp@mcs.anl.gov</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div id=":3ex">It's also a matter of the need for a 'yes/no'-testing. Running a fixed test like<br>
 if (err > eps) fail_test();<br>
is probably too harsh and we instead use some kind of continuous metric to judge the outcome of the test. </div></blockquote><div><br></div><div style>Agreed, but note that an arbitrarily small continuum difference can force an additional iteration. Maybe our tests should be configured to "always run exactly 10 iterations". I wonder if a Bayesian filter could be trained to recognize real failures.</div>
<div> </div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div id=":3ex">Speaking of a HTML table, something that is spinning in my head for a long time already is that one can easily draw diagrams automatically showing the convergence history of the residual norm obtained in a test run. Coloring the frame of the plot proportional to the relative deviation from a reference convergence history gives you a quick idea of how far a test is off the reference. It won't work for all tests, but it gives you on idea about the sanity of the implementation.<div class="im">
</div></div></blockquote></div><br>I spend years trying to convince people to use actual norms instead of jpeg semi-norms and now you want to reverse that? Blasphemy!</div><div class="gmail_extra"><br></div><div class="gmail_extra" style>
Actually, that's an interesting idea. I guess it could be presented in a more compressed way than the numerical values, thus providing a better summary.</div></div>