Het menselijk oordeelsvermogen is notoir slecht in het inschatten van risico’s, vooral als het om zeldzame gebeurtenissen gaat. Dit is niet alleen een gril van de psychologie; het is een wiskundige realiteit die bekend staat als de vals-positieve paradox, waarbij onze hersenen consequent de waarschijnlijkheid overschatten dat er iets gebeurt, simpelweg omdat we ons op de verkeerde cijfers concentreren. Van medische tests tot veiligheidstoezicht: deze vooringenomenheid leidt tot gebrekkige beslissingen met gevolgen in de echte wereld.
Het probleem met percentages
Het kernprobleem ligt in de manier waarop we nauwkeurigheid versus prevalentie interpreteren. Een test kan 99% nauwkeurig zijn, maar als de aandoening waarop wordt getest uiterst zeldzaam is, zullen de meeste positieve resultaten vals zijn. Neem een ziekte die één op de duizend mensen treft. Zelfs met een bijna perfecte test zullen er voor elk echt positief resultaat grofweg tien valse tests zijn. Dit is geen mislukking van de test; het is een statistische onvermijdelijkheid.
De paradox ontstaat doordat onze geest vasthoudt aan het hoge nauwkeurigheidspercentage (99%) en het kleine basispercentage (1/1.000) negeert. Wij fixeren ons op het testresultaat – een positieve bevinding – in plaats van op de bredere context. Daarom heeft een positief medisch testresultaat, ondanks de betrouwbaarheid ervan, in dit scenario slechts een kans van 9% om daadwerkelijk op ziekte te wijzen.
Implicaties in de echte wereld
De vals-positieve paradox is niet alleen theoretisch. Het verklaart waarom massale screeningen op zeldzame ziekten vaak niet effectief zijn. Het aantal valse alarmen overtreft de echte gevallen, wat leidt tot onnodige angst, dure vervolgprocedures en mogelijke schade door een verkeerde diagnose.
De rechtshandhaving kampt met hetzelfde probleem. Gezichtsherkenningssoftware genereert, zelfs als deze zeer nauwkeurig is, een stortvloed aan valse positieven wanneer deze zonder onderscheid wordt toegepast. In Cardiff, tijdens de Champions League-finale van 2017, signaleerde een systeem dat 170.000 fans scande 2.470 potentiële criminelen, van wie slechts 3% daadwerkelijk werd gezocht. Het systeem werkte zoals bedoeld: het weerspiegelde eenvoudigweg het lage basispercentage criminelen in de menigte.
Het gevaar van datamining
Hetzelfde principe is van toepassing op inspanningen op het gebied van terrorismebestrijding. Het doorzoeken van telefoongegevens en sociale media op patronen die wijzen op terroristische activiteiten levert een soortgelijk resultaat op. Terroristische complotten zijn zeldzaam, waardoor valse positieven veel vaker voorkomen dan daadwerkelijke bedreigingen. Beveiligingsexpert Bruce Schneier schat dat voor elke echte terrorist die door dergelijke programma’s wordt ontdekt, tientallen miljoenen onschuldige mensen als verdacht worden aangemerkt, waardoor middelen worden verspild en de privacy wordt geschonden.
Context is alles
Het belangrijkste uitgangspunt is niet om het testen of toezicht helemaal achterwege te laten. In plaats daarvan gaat het erom de afwegingen te begrijpen. Nauwkeurige tests zijn waardevol, maar alleen als ze worden toegepast op populaties waar de aandoening redelijk vaak voorkomt. Artsen geven terecht prioriteit aan het testen van mensen met symptomen, omdat dit de statistische kansen verschuift ten gunste van een echt positief resultaat.
De vals-positieve paradox leert ons resultaten te contextualiseren. Nauwkeurigheid alleen doet er niet toe; de waarschijnlijkheid van de gebeurtenis zelf is cruciaal. Bij het doornemen van probabilistische vragen zijn de meest opvallende details niet altijd de meest statistisch relevante.
Uiteindelijk vereist een rationele risicobeoordeling dat wordt erkend dat zelfs zeer betrouwbare systemen meer ruis dan signaal zullen produceren wanneer ze worden toegepast op uiterst zeldzame gebeurtenissen. Het negeren van deze realiteit leidt tot verspilling van middelen, vals alarm en gebrekkige besluitvorming.
