“SPEC verklaart SPECjbb 2013-benchmarkscores ongeldig vanwege bug”

0
303

De Standard Performance Evaluation Corporation, ofwel SPEC, heeft een fout ontdekt in zijn SPECjbb 2013-benchmarksoftware. De fout kan een te hoge SPECjbb-score opleveren. De scores van de benchmarksuite zijn om die reden door SPEC ongeldig verklaard.

De SPECjbb 2013-benchmarksoftware is in gebruik voor het testen van servers. Daarvoor worden de prestaties van Java-code gemeten. De software is sinds januari vorig jaar op de markt, maar ontwikkelaar SPEC meldt echter dat het een storende fout in de benchmarksoftware heeft gevonden. De bug in het zogenaamde partial purchase request-testonderdeel kan een te hoge score opleveren, waardoor het maken van eerlijke vergelijkingen niet mogelijk is.

SPEC heeft na ontdekking van de bug besloten om SPECjbb 2013 niet langer te verkopen. Ook het uploaden van benchmarkscores is niet langer mogelijk en bestaande scores zijn aangemerkt als  onbetrouwbaar. SPEC zegt aan een bugfix te werken. Licentiehouders van de SPECjbb 2013-suite zullen te zijner tijd een gratis update krijgen.