Wims uitleg
Waarom de methode van 21minuten.nl ondeugdelijk is
Door Wim van Leeuwen
 
Opinieonderzoek 21minuten.nl gebruikt een zelfselecte steekproef. Over dit type steekproef hebben onderzoekers geen controle. Iedereen die dat wil kan de vragenlijst invullen. Daardoor is er risico dat de uitkomsten vertekend zijn. De opinies van de zelfbenoemde respondenten hoeven niet in overeenstemming te zijn met die van alle Nederlanders. Hoe de vertekening er precies uitziet, is niet te bepalen. En als je niet weet hoe de vertekening in elkaar zit, kan je hem niet corrigeren. Je kunt geen reparatie uitvoeren als je niet exact weet wat er niet goed is. Elke poging tot correctie kan niet meer zijn dan een gok. Kortom, een zelfselecte steekproef kan een onbepaalbare en daardoor oncorrigeerbare vertekening opleveren. Vanwege die mogelijkheid valt het gebruik maken van een zelfselecte steekproef in de categorie ondeugdelijke onderzoeksmethoden.
 
De onderzoekers van 21minuten.nl erkennen dat hun zelfselecte steekproef vertekend is. Zij denken met een weging een volledige reparatie te hebben bereikt. Maar hun reparatie is slechts gedeeltelijk. Door de weging is de zelfselecte steekproef weliswaar op een aantal kenmerken in orde gebracht, maar dat geeft geen enkele garantie dat de vertekening ook bij alle andere uitkomsten is gecorrigeerd.
 
Er is in theorie wel een manier om door weging alle uitkomsten te corrigeren, maar die is niet aan te bevelen. Zie hiervoor het artikel Volledige transplantatie van uitkomsten is geen goed idee.

Maandag 7 april 2008 (c) Wim van Leeuwen, Amsterdam
Onderzoeksrecensent.nl