Wat zijn goede peilingen? Jelke Bethlehem Centraal Bureau voor de Statistiek Sector Methodologie

Peilingen, polls, enquêtes, surveys, … Verschillende woorden voor hetzelfde begrip: Onderzoek van een groep personen. Aan een kleine selectie (steekproef) uit de groep worden vragen gesteld. De uitkomsten worden gegeneraliseerd naar de hele groep. Kan dat zomaar? Ja, als het onderzoek goed is opgezet. Nee, als het onderzoek slecht is opgezet. Scheidt daarom het kaf van het koren

Wat is een goede peiling? Voorwaarden De steekproef moet worden geloot uit de groep. Iedereen in de groep moet dezelfde kans op selectie hebben. Alleen dan … Kunnen betrouwbare (zuivere) schattingen worden berekend. Kunnen de onzekerheidmarges in de uitkomsten worden berekend.

Wat is een goede peiling? Principes van de kanssteekproeven Sinds 1934 de basis voor goed survey-onderzoek. Goede, inzichtelijke onderzoeksrapportage. Nieuwe ontwikkeling: online-peilingen Instrument om eenvoudige, snel en goedkoop veel gegevens te verzamelen. Problemen met deze peilingen Niet iedereen heeft Internet. Zelfselectie van respondenten. Geen representatieve steekproef. Het is vaak niet duidelijk hoe het onderzoek is uitgevoerd.

Voorbeeld 1: De maagden van Girlscene

Voorbeeld 1: De maagden van Girlscene Vragen Hoe is de steekproef geselecteerd? Antwoord: zelfselectie. Konden personen van buiten de doelgroep meedoen? Antwoord: Ja. Konden personen meer dan 1 keer meedoen? Antwoord: Ja. Conclusie Geen representatieve steekproef.

Voorbeeld 2: De peiling van de ANWB

Voorbeeld 2: De peiling van de ANWB De media

Voorbeeld 2: De peiling van de ANWB De media

Voorbeeld 2: De peiling van de ANWB De media

Voorbeeld 2: De peiling van de ANWB De onderzoekers zelf

Voorbeeld 3: De politieke peilingen Twee voorbeelden. Politieke Barometer (Synovate) Peil.nl (Maurice de Hond) Uitvoering Web panel. Leden geworven via zelfselectie. Weegprocedure om te corrigeren voor selectiviteit. Wegen geen garantie voor succes.

Voorbeeld 3: De politieke peilingen Voorbeeld: CDA Verschillen zijn groter dan onzekerheidmarges Welke peiling is juist?

Checklist Is er een onderzoeksverantwoording? Ja Nee Is duidelijk wat de doelgroep is? Hoe is de steekproef getrokken Geloot uit de hele groep Geloot uit deel van de groep Zelfselectie via Internet

Checklist Is de omvang van de steekproef vermeld? Ja Nee Is het percentage respons hoog? Is er gecorrigeerd voor non-respons?

Checklist Worden er onzekerheidsmarges vermeld? Ja Nee Marges vermelden kan. Geen zinloze discussie.

Tot slot: Internet-peilingen