De vraag
De opdracht was om te classificeren of iemand op een afbeelding een sjaal draagt. Die eenvoudige vraag wordt minder eenvoudig wanneer visueel vergelijkbare kleding in de voorbeelden voorkomt.
De aanpak
De analyse richtte zich op het consequent labelen van voorbeelden, waaronder visueel vergelijkbare kleding zoals een hijab. Het ging om een consistente visuele categorie, niet om conclusies over iemands identiteit, geloof of achtergrond.
Tekstuitleg bij de infographic
Elke afbeelding wordt vergeleken met de categoriedefinitie. Duidelijk passende en niet-passende voorbeelden krijgen een consistent label. Visueel vergelijkbare kleding vraagt om herbeoordeling van de definitie. Het gaat om kleding, niet om de identiteit of overtuigingen van de persoon.
De uitdaging
Verschillende interpretaties van labels kunnen een dataset intern inconsistent maken voordat de modeltraining begint.
Wat het opleverde
Een concrete les in datasetontwerp en ambiguïteit bij classificatie. Het oorspronkelijke notebook kan later worden toegevoegd; zonder dat materiaal worden geen modelprestaties gepresenteerd.
Inzichten
Leg vast wat wel en niet binnen een label valt en beoordeel moeilijke voorbeelden voordat je de trainingsset uitbreidt.