Tarket leakage
Risico
De data waarop het model is gebaseerd, zijn niet beschikbaar voordat de uitkomsten zijn geobserveerd.
Onderzoeksvraag
Is er target leakage? Met andere woorden: maken de voorspellingen deel uit van de model features?
Beheersmaatregelen
Controle op genoemd aspect (target leakage).
Inspectiestappen
Opzet
- Stel vast dat beschreven is op welke wijze wordt gewaarborgd dat de data waarop het model is gebaseerd niet beschikbaar zijn voordat de uitkomsten zijn geobserveerd.
Mogelijke bronnen: beleidsdocumenten, toetsingplan.
Bestaan
- Stel vast dat datgene wat het model voorspelt niet is opgenomen in de voorspellende variabelen.
- Stel vast dat geen afgeleide van hetgeen voorspeld wordt, is opgenomen in de voorspellende variabelen.
Mogelijke bronnen: toetsingsrapportages, monitoringsactiviteiten, code.