Accuracy

Wat is accuracy?

Accuracy (nauwkeurigheid) is een maatstaf die aangeeft welk percentage van de voorspellingen van een AI-model correct is. Voorspelt een model bij 100 e-mails 90 keer goed of iets spam is of niet, dan is de accuracy 90 procent. Het is de meest intuïtieve manier om de prestaties van een model samen te vatten in één getal.

Hoe werkt het?

Je deelt het aantal juiste voorspellingen door het totale aantal voorspellingen. Simpel, maar daar zit ook de valkuil: accuracy kan misleidend zijn bij scheve datasets. Stel dat 95 procent van je transacties geen fraude is. Een model dat altijd “geen fraude” roept, haalt dan 95 procent accuracy en is toch volkomen nutteloos. Daarom kijken specialisten ook naar aanvullende maatstaven zoals precision (hoeveel van de gevonden gevallen klopt) en recall (hoeveel van de echte gevallen wordt gevonden).

Wat heb je eraan als bedrijf?

Als een leverancier roept dat zijn AI-oplossing “98 procent accuraat” is, weet je nu welke vervolgvraag je stelt: accuraat waarop, en hoe vaak komt het geval dat je wilt vinden eigenlijk voor? Bij zeldzame gebeurtenissen zoals fraude, defecten of opzeggers zegt accuracy weinig. Vraag dan naar precision en recall voor de categorie die er voor jou toe doet.

Gerelateerde begrippen

Accuracy hoort bij een familie van evaluation metrics, samen met precision, recall en de F-score. De resultaten worden vaak weergegeven in een confusion matrix.