Enquêtes opstellen voor online onderzoek: zo pakken wij het aan

Een slechte enquête levert ruis op: antwoorden die je niet kunt vertrouwen, uitkomsten die je niet kunt vergelijken en conclusies die je beter niet kunt publiceren. Een goede enquête levert inzichten op waar je iets mee kunt. Bij het opstellen van vragenlijsten voor ons social media onderzoek merken we telkens weer dat het verschil tussen die twee zit in de voorbereiding: weten wat je wilt meten, weten wie je bevraagt en weten welke vragen je vooral niet moet stellen. In dit artikel delen we hoe wij enquêtes opstellen, van de eerste onderzoeksvraag tot de rapportage, met voorbeelden uit het Pondres Social Media Onderzoek en de vragenlijst van smo_12.

Waarom enquêtes de ruggengraat van social media onderzoek vormen

Sociale netwerken laten veel data achter: likes, shares, kliks en scrollgedrag. Die data vertellen wat mensen doen, maar niet waarom ze het doen. Juist dat waarom is vaak de kern van een onderzoeksvraag. Enquêtes zijn daarom onmisbaar in social media onderzoek: ze meten gedrag én mening, en ze geven context bij cijfers die je anders alleen kunt observeren.

Van vragenlijst tot inzicht: de basis

In het Pondres Social Media Onderzoek vragen we respondenten rechtstreeks naar hun gebruik social media: welke platforms ze gebruiken, hoe vaak, hoe lang en met welk doel. Dat levert zelfgerapporteerde data op die we kunnen koppelen aan demografische kenmerken zoals leeftijd, geslacht en opleidingsniveau. Zo ontstaat een beeld dat verder gaat dan een enkele statistiek. De vragenlijst van smo_12 vormde hiervoor de basis en is in latere jaren telkens bijgesteld op basis van wat wel en niet werkte.

Vergelijking met passieve data-analyse

Passieve data-analyse kijkt naar wat er gebeurt op sociale netwerken zonder dat je iemand iets vraagt. Dat is snel en schaalbaar, maar het mist motivatie en beleving. Een enquête kost meer moeite, maar levert antwoorden op vragen die je uit logbestanden nooit kunt halen. In de praktijk werken beide het beste samen: de ene methode verklaart wat de andere constateert.

De belangrijkste stappen bij het opstellen van een enquête

Wij doorlopen bij elke vragenlijst hetzelfde proces. Dat proces is niet ingewikkeld, maar het wordt vaak overgeslagen. Juist dan sluipen er fouten in die achteraf niet meer te repareren zijn.

Doel en doelgroep bepalen

We beginnen altijd met één heldere onderzoeksvraag. Wat willen we precies weten over het gebruik social media, en welke beslissing hangt daarvan af? Daarna bepalen we de doelgroep: wie kan die vraag het beste beantwoorden, en hoe bereiken we die groep? Voor het onderzoek 2012 betekende dat bijvoorbeeld een brede steekproef onder Nederlandse internetgebruikers, met extra aandacht voor jongere respondenten die sociale netwerken intensiever gebruiken.

Vraagtypes en formuleringen

Vervolgens kiezen we per vraag het juiste type. Onze standaardaanpak:

• Meerkeuzevragen voor platformvoorkeur en vaste categorieën;
• Schaalvragen (bijvoorbeeld 1 tot 5) voor houding en tevredenheid;
• Open vragen spaarzaam inzetten, alleen als we echt iets willen uitdiepen;
• Getalvragen voor tijdsbesteding per dag of week.

Bij de formulering letten we op eenvoud: korte zinnen, geen jargon en één onderwerp per vraag. Juist bij vragen over sociale netwerken gaat het snel mis, omdat respondenten verschillende platforms door elkaar halen als je niet expliciet benoemt waar de vraag over gaat.

Testen en valideren

Voordat een vragenlijst live gaat, testen we hem met een kleine groep respondenten. We kijken naar invultijd, onduidelijke vragen en afhaakpunten. Bij het opstellen van vragen voor het onderzoek 2012 kwamen we er zo achter dat een vraag over ‘actief gebruik’ door verschillende mensen anders werd uitgelegd. Dat hebben we opgelost door concreet gedrag te benoemen, zoals plaatsen, reageren en delen.

Vragen die je moet stellen over sociale netwerken

De vragenlijst van smo_12 bevatte een vaste opbouw die we nog steeds gebruiken. We groeperen vragen in drie blokken, zodat respondenten logisch door het onderwerp gaan.

Demografische vragen

We vragen naar leeftijd, geslacht, opleidingsniveau en regio. Deze kenmerken gebruiken we later om resultaten te wegen en te vergelijken. Zonder deze gegevens kun je een verschil tussen jongeren en ouderen niet goed duiden.

Gedragsvragen per platform

Hier meten we het daadwerkelijke gebruik social media. Voorbeelden die wij stellen:

1. Welke sociale netwerken gebruik je momenteel?
2. Hoeveel minuten per dag besteed je gemiddeld aan elk platform?
3. Op welk platform ben je het meest actief, en waarom?
4. Gebruik je sociale netwerken vooral privé, zakelijk of beide?

Attitude- en opinievragen

Tot slot meten we wat mensen vinden: vertrouwen in informatie op sociale netwerken, zorgen over privacy en de mate waarin men zich afhankelijk voelt van bepaalde platforms. Deze vragen geven kleur aan de cijfers en maken rapportages bruikbaarder voor opdrachtgevers.

Fouten die wij vaak zien bij online enquêtes

In de loop der jaren hebben we veel vragenlijsten van anderen gezien, en dezelfde fouten komen steeds terug. Ze zijn eenvoudig te voorkomen, mits je ze op tijd herkent.

Dubbele en suggestieve vragen

Een vraag als ‘Vind je dat sociale netwerken te veel tijd kosten en slecht zijn voor je concentratie?’ meet twee dingen tegelijk en stuurt richting een antwoord. Wij splitsen zulke vragen altijd op en vermijden woorden die al een oordeel bevatten.

Te lange enquêtes en drop-out

Hoe langer de vragenlijst, hoe meer respondenten halverwege afhaken. Bij het Pondres Social Media Onderzoek houden we de invultijd bewust kort en stellen we alleen vragen die direct bijdragen aan de onderzoeksvraag. Alles wat ‘interessant maar niet nodig’ is, gaat eruit.

Slechte routing en logica

Als iemand aangeeft geen gebruik te maken van een platform, mag diegene daar geen vervolgvragen over krijgen. Foutieve routing leidt tot onbruikbare antwoorden en frustratie bij respondenten. Wij testen de logica daarom altijd expliciet door alle denkbare paden te doorlopen.

Van data naar bruikbare inzichten

Een ingevulde vragenlijst is nog geen inzicht. De stap van ruwe data naar rapportage is minstens zo belangrijk als het opstellen van de enquête zelf.

Data opschonen en wegen

We verwijderen onvolledige en tegenstrijdige responses, controleren op snelheidsfraude en wegen de uitkomsten naar de Nederlandse bevolking. Zo voorkomen we dat een oververtegenwoordiging van jonge respondenten het beeld over gebruik social media vertekent.

Rapportage en visualisatie

In de analyse van het Pondres onderzoek presenteren we resultaten per sociale netwerk, per leeftijdsgroep en per jaar, zodat trends zichtbaar worden. Grafieken en tabellen maken de cijfers toegankelijk, maar we voegen altijd een duiding toe: wat betekent dit cijfer nu eigenlijk?

Onze checklist voor een succesvolle enquête

Tot slot de punten die wij bij elke vragenlijst nalopen, of het nu gaat om een herhaling van het onderzoek 2012 of om een hedendaagse toepassing:

• Is de onderzoeksvraag scherp en enkelvoudig?
• Zijn alle vragen kort, concreet en zonder jargon?
• Meet elke vraag precies één ding?
• Zijn instructies voor respondenten duidelijk en consistent?
• Is de routing foutloos getest?
• Blijft de invultijd binnen een acceptabele grens?
• Zijn ethische overwegingen geregeld: anonimiteit, toestemming en datagebruik?

Wie deze checklist consequent doorloopt, voorkomt de meeste problemen voordat ze ontstaan.

Enquêtes opstellen is geen kwestie van één keer goed doen, maar van blijven testen en bijstellen. Zorg dat je onderzoeksvraag helder is voordat je de eerste vraag formuleert, test je vragenlijst met echte respondenten en durf vragen te schrappen. Zo blijft social media onderzoek betrouwbaar, vergelijkbaar en bruikbaar, precies zoals we dat met het Pondres Social Media Onderzoek en de vragenlijst van smo_12 al jaren proberen te doen.

Veelgestelde vragen

Wat is het Pondres Social Media Onderzoek precies?

Het Pondres Social Media Onderzoek is een periodiek Nederlands onderzoek naar het gebruik van sociale netwerken. Respondenten beantwoorden vragen over platformkeuze, tijdsbesteding en houding ten opzichte van social media. De resultaten worden gebruikt door organisaties die hun online strategie willen onderbouwen.

Waarom is smo_12 nog steeds relevant?

De vragenlijst van smo_12 vormde de basis voor latere edities van het onderzoek. Veel vraagformuleringen en de opbouw in demografische, gedrags- en attitudevragen zijn sindsdien in gebruik gebleven, omdat ze betrouwbare en vergelijkbare data opleveren.

Hoe lang mag een online enquête duren?

Wij streven naar een invultijd van ongeveer vijf tot tien minuten. Bij langere enquêtes zien we de drop-out duidelijk toenemen. Stel daarom alleen vragen die direct bijdragen aan je onderzoeksvraag.

Wat is het verschil tussen een enquête en passieve data-analyse?

Een enquête vraagt mensen rechtstreeks naar hun gedrag en mening, terwijl passieve data-analyse alleen observeert wat er op sociale netwerken gebeurt. De combinatie van beide methoden geeft het meest volledige beeld van gebruik social media.

Hoe voorkomen we suggestieve vragen?

Door vragen neutraal te formuleren, geen oordeel in de vraag te verwerken en elke vraag op één onderwerp te richten. Test de vragenlijst vervolgens met een kleine groep respondenten en vraag expliciet of vragen sturend overkomen.