Garbage In - Garbage Out - Garbage Lost

In dit artikel:

De invoering van arbeidsmarktsoftware van 8Vance bij UWV duurt al drie jaar en heeft nog geen werkende oplossing opgeleverd. Volgens de auteur ligt de oorzaak mogelijk niet alleen bij de software, maar vooral bij de kwaliteit van de gegevens die UWV aan 8Vance levert. Het artikel richt zich met name op cv- en persoonsdata van werkzoekenden.

UWV gebruikt al jaren de systemen Werk.nl, Sonar en WBS, elk met een eigen database en een eigen toepassing van het matchingsysteem Elise. Werk.nl is vooral bedoeld voor zelfredzame werkzoekenden; Sonar en WBS voor mensen die begeleiding van UWV nodig hebben. UWV besloot vóór de aanbesteding van 8Vance de gegevens uit deze systemen samen te brengen in een nieuwe Geconsolideerde Database, onderdeel van de Arbeidsbemiddeling- en Re-integratiedatabase (ABR). Die database moest via koppelingen 8Vance voeden en resultaten terugsturen naar de bestaande systemen.

Volgens de auteur heeft deze tussenlaag de gegevenshuishouding onnodig complex en kwetsbaar gemaakt. De ABR-database is inmiddels bestuurlijk opgeleverd, maar wordt niet gebruikt. De bouwkosten bedragen officieel zeven miljoen euro. Toezichthouder AcICT heeft bovendien vraagtekens gezet bij de noodzaak en meerwaarde van de database. UWV koos voor bijna directe synchronisatie via berichten en meerdere koppelmodules, terwijl eenvoudiger batchverwerking volgens de toezichthouder mogelijk was geweest. De auteur stelt dat fouten in zulke ‘fire-and-forget’-koppelingen ongemerkt tot dataverlies kunnen leiden.

De kwaliteit van de brondata verschilt sterk per systeem. Werk.nl-gegevens worden grotendeels door gebruikers zelf onderhouden en zijn volgens de auteur doorgaans volledig, actueel en consistent. De gegevens in Sonar, een sterk aangepast oud pakket, zouden daarentegen vaak onvolledig, verouderd of onjuist zijn. Ook ontbreekt volgens het artikel een goed datamanagement, waardoor verschillende en overlappende coderingen naast elkaar bestaan. Het overbrengen van zulke ongestructureerde gegevens naar een nieuwe, strengere database is daardoor technisch riskant: informatie kan verloren gaan of de nieuwe database kan dezelfde problemen als de oude kaartenbak overnemen.

De auteur stelt dat 8Vance, zelfs als de software technisch goed werkt, geen betrouwbare matches kan produceren met corrupte of achterhaalde gegevens. Een pilot in februari met persoonsdata uit WBS leverde volgens het artikel dramatische resultaten op, maar dat kan mede door de slechte data zijn veroorzaakt. Het oorspronkelijke plan om 8Vance eerst met de relatief betrouwbare Werk.nl-data te testen, ging volgens de auteur door interne problemen bij UWV niet door. Daarmee is ook niet aangetoond of de software de grote gebruikersaantallen en benodigde responstijden aankan.

Als mogelijk vervolgscenario noemt de auteur dat UWV Elise niet volledig uitfaseert en 8Vance vooral binnen de Sonar/WBS-omgeving blijft gebruiken. Dat zou het project politiek minder zichtbaar maken, maar volgens hem weinig opleveren voor hulpbehoevende werkzoekenden en belastingbetalers. Zolang Werk.nl buiten beeld blijft, kan de slechte kwaliteit van Sonar-data bovendien verborgen blijven. De auteur betwijfelt daarom of UWV met 8Vance geen miskoop heeft gedaan, maar benadrukt dat de dataproblemen een belangrijke verklaring kunnen zijn voor het uitblijven van resultaten.