On Fri, Mar 8, 2013 at 2:15 AM, Ryosuke Niwa <span dir="ltr">&lt;<a href="mailto:rniwa@webkit.org" target="_blank">rniwa@webkit.org</a>&gt;</span> wrote:<br><div class="gmail_quote"><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
<div>Three major problems with existing WebKit performance tests are:</div><div><ol><li>There are too many tests to run</li><li>Some tests have variances that are too high to be of any use</li><li>Some tests are too specific to be of any general use</li>
</ol></div></blockquote><div><br></div><div>If you find what differentiate the good tests from the bad tests, it would be good to create a wiki page explaining what to be careful about to make a good test.</div><div><br></div>
<div>One thing that have bitten my ass in the past is the JIT being smart and removing some &quot;dead&quot; test code because it has no side effect. I am sure there are plenty of mistake like this to be avoided.</div><div>
<br></div><div>Cheers,</div><div>Benjamin </div></div>