Bronnenkritiek in gendernieuws: onderzoek en cijfers kritisch lezen

Achter elk cijfer in een nieuwsbericht zit een bron: een studie, een rapport, een organisatie. De kwaliteit van dat cijfer hangt volledig af van de kwaliteit van die bron. Wie leert doorvragen — waar komt dit vandaan, hoe goed is het, wie had er belang bij — doorziet veel gendernieuws in één oogopslag. Dit is een praktische gids in bronnenkritiek.

Niet elk onderzoek is gelijk

De grootste denkfout van de leek is dat onderzoek toont dat een sluitend argument is. Onderzoek verschilt enorm in kwaliteit. Een kleine vragenlijststudie zonder controlegroep is iets heel anders dan een systematische review van tientallen studies. In het GRADE-systeem voor het beoordelen van bewijs begint bewijs uit gerandomiseerde studies als bewijs van hoge kwaliteit en bewijs uit observationele studies als bewijs van lage kwaliteit; ervaringen van deskundigen en losse klinische waarnemingen gelden er als bewijs van zeer lage kwaliteit (bron). Een nieuwsbericht dat een enkele, zwakke studie presenteert als bewijs, misleidt — ook als het de studie correct citeert.

Juist de Cass Review is hier leerzaam. Onderzoekers van de University of York voerden daarvoor systematische reviews uit. Van de 50 studies naar puberteitsremmers bij jongeren beoordeelden zij er één als van hoge kwaliteit, 25 als matig en 24 als laag (bron); van de 53 studies naar hormonen één als hoog, 33 als matig en 19 als laag (bron). Beide reviews concluderen dat onderzoek van hoge kwaliteit ontbreekt. Dat betekent niet dat de behandeling per se niet werkt, maar wel dat de reviews over het effect op genderdysforie geen conclusies konden trekken. Wie dat weet, leest zinnen als studies tonen aan dat behandeling helpt met de juiste scepsis.

Vier vragen bij elk cijfer

Je hebt geen methodologiediploma nodig om cijfers te wegen. Vier vragen brengen je ver. Ten eerste: wie heeft dit onderzocht, en had die er belang bij? Onderzoek gefinancierd of uitgevoerd door een partij met een agenda verdient extra scepsis — niet automatisch afwijzing, wel argwaan. Ten tweede: hoe groot en hoe representatief was de groep? Een bevinding onder vijftig zelfgeselecteerde deelnemers zegt iets anders dan een register van duizenden.

Ten derde: is er een controlegroep en een lange follow-up? Zonder vergelijking en tijd is een resultaat lastig te duiden. En ten vierde: is dit gepubliceerd en beoordeeld door vakgenoten, of is het een persbericht? Het verschil tussen een peer-reviewed artikel en een gladde samenvatting van een belangenorganisatie is groot, ook al klinken beide gezaghebbend. Deze vragen horen bij de leeshouding die we bepleiten in ons stuk over framing.

De keten van vertekening

Tussen een studie en de krantenkop zitten meerdere schakels, en bij elke schakel kan vertekening optreden. De onderzoekers vatten hun bevindingen samen in een abstract; de persafdeling maakt daar een persbericht van; een persbureau schrijft een bericht; en de eindredactie verzint een kop. Een Britse studie naar 462 persberichten die twintig universiteiten in 2011 over biomedisch en gezondheidsonderzoek uitbrachten, vond dat 40 procent een advies bevatte dat verder ging dan het onderzoek zelf en 33 procent een overdreven oorzakelijke bewering. Stond zo'n overdreven oorzakelijke bewering in het persbericht, dan stond ze ook in 81 procent van de nieuwsberichten; overdreef het persbericht niet, dan was dat 18 procent (bron).

Voor de lezer betekent dit: een kop of nieuwsbericht is niet de studie zelf. Wie iets echt wil weten, klikt door naar de studie of het rapport zelf, of ten minste naar een samenvatting die dicht bij de bron zit. Dat kost moeite, maar het is het enige echte tegengif tegen de vertekening die onderweg ontstaat. Onafhankelijke platforms die primaire bronnen ontsluiten, zoals transgendercheck.nl, kunnen daarbij helpen.

Belangen zijn overal, en dat is niet erg

Bronnenkritiek betekent niet dat je iedereen met een belang wantrouwt en niemand gelooft. Iedereen heeft belangen; volledige neutraliteit bestaat niet. Het punt is die belangen te kennen en mee te wegen, niet om ze als diskwalificatie te gebruiken. Een belangenorganisatie kan gelijk hebben; een onafhankelijke onderzoeker kan zich vergissen. Wat telt is de kwaliteit van het bewijs, niet alleen de identiteit van de bron.

Dat evenwicht — scepsis zonder cynisme — is de kern van volwassen mediagebruik. Het doel is niet om nergens meer in te geloven, maar om te weten hoe zeker je iets kunt weten, en op grond waarvan. Dat maakt je niet moeilijker te overtuigen door de feiten, maar juist makkelijker — en moeilijker te sturen door de verpakking.

Een gewoonte, geen eenmalige controle

Bronnenkritiek is geen truc die je één keer toepast, maar een gewoonte. Bij elk opvallend cijfer, elke stellige kop, elke studie toont-formulering kun je even pauzeren en de vier vragen stellen. In het begin kost dat aandacht; na verloop van tijd wordt het automatisch. En dan lees je gendernieuws — en al het andere nieuws — met een scherpte die geen enkel frame kan omzeilen.