Wims verbazing
Weet Paul Schnabel wat goed opinieonderzoek is?
Onderzoeksrecensent Wim van Leeuwen vraagt zich af of iemand die 21minuten.nl aanbeveelt de juiste persoon is om te spreken over goed onderzoek
  
Op 9 april aanstaande vindt de oprichtingsbijeenkomst plaats van het Nederlandstalig Platform voor Survey-Onderzoek (NPSO). De naam van deze nieuwe club heeft iets tegenstrijdigs. Want wat is er Nederlandstalig aan het Engelse woord survey? Als de term 'survey-onderzoek' in de naam wordt vervangen door 'steekproefonderzoek' zijn we van die tegenstrijdigheid af en kan de afkorting NPSO behouden blijven. Maar goed, het NPSO luistert de oprichtingsbijeenkomst op met een symposium over 'Wat is goed survey-onderzoek?'. Dat is een belangrijk onderwerp. De openingslezing wordt gehouden door Paul Schnabel.
 
Paul Schnabel?
Paul Schnabel is directeur van het Sociaal en Cultureel Planbureau (SCP). Het SCP doet veel steekproefonderzoek. Het zou dus fijn zijn als de directeur daar verstand van heeft. Maar heeft hij dat wel? Paul Schnabel zit ook in het Comité van Aanbeveling van 21minuten.nl. Kennelijk denkt hij dat het wel goed zit met dit opinieonderzoek. Echter, 21minuten.nl gebruikt een zelfselecte steekproef. Elke onderzoeker hoort te weten dat een zelfselecte steekproef over het algemeen een slechte steekproef is. Desondanks beveelt Paul Schnabel dit onderzoek aan. Er is door 21minuten.nl een parallel onderzoek gehouden met dezelfde vragenlijst waarvan de uitkomsten geheim zijn gehouden. Keurt Paul Schnabel dit goed? Is hij het met de onderzoekers van 21minuten.nl eens als die beweren dat de onzekerheidsmarges van een zelfselecte steekproef klein zijn? Statistisch gezien bestáán die marges helemaal niet. Ze zijn niet te bepalen.
 
Geen antwoord op kritische vragen
Je zou van iemand die een onderzoek aanbeveelt misschien verwachten dat hij kritische vragen zou beantwoorden. Maar nee. Op de open brief in STAtOR heeft Paul Schnabel niet gereageerd. Wel 21minuten.nl aanbevelen, niet reageren op kritiek en nu een zaal vol methodologen, statistici en onderzoekers toespreken over de vraag wat goed onderzoek is. Als dat maar goed gaat.

Woensdag 2 april 2008 (c) Wim van Leeuwen, Amsterdam
Onderzoeksrecensent.nl