<div dir="ltr"><div style><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px">Hi,</span></font></div><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px"><br></span></font></div><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px">Cherry-picking Michael&#39;s email into its own thread:</span></font></div><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px"><br></span></font></div><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px">&gt; Is there a plan (long term) to do (essentially) automated performance tests so that we</span></font></div><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px">&gt; can perform consistent(ish) checks for new changes in code, then post the results in an</span></font></div><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px">&gt; easy(ish) way to interpret for others?</span></font></div><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px"><br></span></font></div><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px">There&#39;s no organized plan. I&#39;ve lately been trying to organize a dedicated machine here so we can start to do some of this - had we had it and the right kinds of tests then various bugs would not have gone unnoticed. In principle, people could run that test suite on their own hardware, of course.</span></font></div><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px"><br></span></font></div><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px">One option I&#39;ve been toying with lately is dumping the mdrun performance data matrix to XML (or something) so that some existing plotting machinery can show the trend over time (and also observe a per-commit delta large enough to vote -1 on Jenkins). I also mean to have a poke around with <a href="http://www.phoromatic.com/">http://www.phoromatic.com/</a> to see if maybe it already has infrastructure we could use.</span></font></div><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px"><br></span></font></div><div style><font color="#000000" face="Calibri, sans-serif"><span style="font-size:14px">Mark</span></font></div></div></div>