Hva er nøyaktighet?
Når en leverandør sier at systemet har 95 prosent nøyaktighet, betyr det at ett av tjue svar er feil. Spørsmålet er ikke om tallet høres høyt ut, men hva en feil koster hos deg. Én feil av tjue kan være helt greit i sortering av e-post og helt uakseptabelt i lønnskjøring.
Nøyaktighet måles på testdata, altså eksempler modellen ikke har sett før. Ligner ikke testdataene på virkeligheten din, kan tallet falle betydelig i praksis. Derfor bør det alltid måles på deres egne data før du stoler på det.
Ett tall skjuler også hva slags feil systemet gjør. Å slippe gjennom en falsk faktura er noe helt annet enn å stoppe en ekte. Spør alltid hvilke feil som gjøres, ikke bare hvor mange.
Eksempel fra hverdagen
Et system konterer 97 av 100 bilag riktig. Det høres bra ut, men rutinen må svare på hva som skjer med de tre siste. En god løsning sier fra når den er usikker, slik at et menneske tar akkurat de bilagene. Da får du farten fra maskinen og tryggheten fra folkene dine.
Hvorfor det betyr noe for en mindre bedrift
Be alltid om tall målt på egne data i en pilot, og bygg rutinen slik at feil fanges billig. Det er forskjellen på en automatisering du kan stole på og en du må rydde opp etter.