Performance metrics

Risico

Het doel van het algoritme, de functionele eisen van het model en de performance metrics sluiten onvoldoende op elkaar aan, waardoor niet kan worden beoordeeld of het voldoende presteert en of de kwaliteit ervan op orde is.

Onderzoeksvraag

Is de kwaliteit van het model gedocumenteerd?

Beheersmaatregelen

Documenteer alle prestatiecriteria, inclusief de relatie met de doelstellingen en de functionele eisen van het algoritme (AUC, MAE, MSE, accuracy etc.). Bewaar testresultaten waaruit blijkt dat het algoritme aan de criteria voldoet.

Inspectiestappen

Opzet

  1. Stel vast dat beschreven is welke performance metrics gelden, hoe deze worden gebruikt en op welke wijze deze overeenkomen met de doelstellingen van het algoritme.          
    Mogelijke bronnen: beleidsdocumenten.

Bestaan

  1. Stel vast dat performance metrics zijn gebruikt en dat deze overeenkomen met de doelstellingen van het algoritme.
    Mogelijke bronnen: rapportages, overzicht van uitgevoerde monitoringsactiviteiten, dashboards.

Ethische principes

Werking is uit te leggen