<div dir="ltr"><div class="gmail_extra"><div class="gmail_quote">On 29 July 2017 at 18:31, Eliot Miranda <span dir="ltr"><<a href="mailto:eliot.miranda@gmail.com" target="_blank">eliot.miranda@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="auto">The success criterion is that they all succeed.  By extension this implies that the vm doesn't crash.</div></blockquote><div><br></div><div>Does this mean that the Test Runner should report 100% pass rate? I have never seen that even with the stock image+vm from <a href="http://pharo.org">pharo.org</a>. So I have a bootstrapping problem if I don't have a baseline that passes the CI test.</div><div><br></div><div>Just now I ran - randomly - a clean Pharo 5.0 image that I have on my Mac and the result I see is: 9098 run, 7408 passes, 8 skipped, 81 expected failures, 22 failures, 587 errors, 0 unexpected passes. If resolving those 22 failures and 587 errors is a blocker for running a CI then that is quite an obstacle from my perspective.</div><div><br></div><div>are other people really seeing 100% pass rates?</div><div><br></div><div><br></div></div></div></div>