Tarket leakage

Risico

De data waarop het model is gebaseerd, zijn niet beschikbaar voordat de uitkomsten zijn geobserveerd.

Onderzoeksvraag

Is er target leakage? Met andere woorden: maken de voorspellingen deel uit van de model features?

Beheersmaatregelen

Controle op genoemd aspect (target leakage).

Inspectiestappen

Opzet

  1. Stel vast dat beschreven is op welke wijze wordt gewaarborgd dat de data waarop het model is gebaseerd niet beschikbaar zijn voordat de uitkomsten zijn geobserveerd.
    Mogelijke bronnen: beleidsdocumenten, toetsingplan.

Bestaan

  1. Stel vast dat datgene wat het model voorspelt niet is opgenomen in de voorspellende variabelen.
  2. Stel vast dat geen afgeleide van hetgeen voorspeld wordt, is opgenomen in de voorspellende variabelen.
    Mogelijke bronnen: toetsingsrapportages, monitoringsactiviteiten, code.