IACOB USTINOV — IAKY JOCKER-JOLLY
Un scor fără context este doar un număr.
Ce trebuie să însoțească măsurarea
Pentru a interpreta un benchmark trebuie să știm ce corpus a fost folosit, ce interogări au fost testate, ce reguli de relevanță s-au aplicat și ce versiune a sistemului a rulat.
Comparația corectă
Un scor obținut pe un corpus mic și controlat nu trebuie prezentat ca performanță la scară largă. El descrie exact testul efectuat și devine util ca punct de comparație pentru următoarea versiune.
Benchmarkul bun nu ascunde condițiile în care a fost obținut scorul.
