Monitor regelmatig op veranderingen in de data. Bij veranderingen evalueer je de prestaties en output van het algoritme.
mon-04Monitoring en beheerOntwikkelaarDataTechnische robuustheid en veiligheid
Maatregel
Monitor regelmatig op veranderingen in de inputdata. Bij geconstateerde veranderingen evalueer je de prestaties en de output van het algoritme.
Toelichting
De inputdata kan voortdurend veranderen. Dat kan komen doordat de context waarin het algoritme wordt gebruikt verandert, of door een technische fout wanneer de data bijvoorbeeld niet goed is ingelezen of aangeleverd. Het te laat opmerken van zo'n verandering kan grote gevolgen hebben. Daarom is het belangrijk om regelmatig te controleren en evalueren of:
- de data van voldoende kwaliteit is voor de beoogde toepassing
- of het algoritme nog presteert in lijn met de vastgestelde doelen
- de gegevens op de juiste en volledige manier worden verwerkt.
Zeker wanneer er gebruikt wordt gemaakt van informatie van derden, is het belangrijk om regelmatig te controleren of er veranderingen in de data zijn. Goede monitoring op datakwaliteit zorgt ervoor dat je voldoende controle hebt over de kwaliteit van de data, zelfs als je hiervoor afhankelijk bent van andere partijen.
Bijbehorende vereiste(n)
Risico
Door veranderingen in de data presteert het model niet meer zoals verwacht.
Bronnen
- Onderzoekskader Auditdienst Rijk, DM.8
- Toetsingskader Algoritmes Algemene Rekenkamer, 1.02, 1.08, 2.06, 2.08, 2.13
Voorbeeld
Heb jij een goed voorbeeld? Laat het ons weten!