Een goede vragenlijst maken lijkt eenvoudig, maar er komt meer bij kijken dan je denkt. Je wilt duidelijke antwoorden, betrouwbare data én dat mensen je vragenlijst ook echt invullen. In deze blog lees je praktische tips over het opstellen, testen en verspreiden van een vragenlijst. Zo haal je het meeste uit je onderzoek!
Een vragenlijst moet niet te lang zijn. Respondenten haken snel af als het invullen te veel tijd kost. Richt je daarom op de kern: stel alleen vragen die echt nodig zijn voor je onderzoek. Een lengte van drie tot vier A4’tjes is meestal voldoende. Dat komt overeen met een invultijd van maximaal vijf minuten. Door deze beperking dwing je jezelf om prioriteiten te stellen. Vermijd overbodige vragen en beperk het aantal open vragen. Deze gebruik je alleen als ze echt iets toevoegen.
De manier waarop je een vraag stelt, bepaalt of je bruikbare antwoorden krijgt. Gebruik eenvoudige taal die past bij je doelgroep. Vermijd vakjargon of ingewikkelde woorden. Zorg dat elke vraag maar op één manier te interpreteren is. Vage termen zoals “vaak” of “soms” kun je beter vervangen door concrete tijdsaanduidingen of aantallen. Ook dubbele vragen of vragen met ontkenningen zorgen voor verwarring. Houd je vragen kort en duidelijk, en wees consequent in de manier waarop je antwoordopties aanbiedt.
Open vragen zijn ideaal als je op zoek bent naar meningen, motivaties of ideeën. Ze geven ruimte voor nuance, maar kosten meer tijd om te beantwoorden én te analyseren. Gesloten vragen zijn ideaal voor het verzamelen van kwantitatieve data. Ze zorgen voor snelle, vergelijkbare antwoorden en zijn eenvoudig te analyseren. Een combinatie werkt vaak het best: begin met een gesloten vraag en geef daarna ruimte voor toelichting. Zo krijg je zowel overzicht als diepgang in je data.
Er zijn veel vormen van gesloten vragen die je kunt gebruiken, afhankelijk van wat je wilt meten. De meest gebruikte zijn meerkeuzevragen, waarbij respondenten één of meerdere opties kunnen kiezen. Voeg eventueel een optie toe als “Anders, namelijk…” om ruimte te geven voor alternatieve antwoorden.
Daarnaast zijn er matrix- of gridvragen, waarmee je meerdere stellingen tegelijk kunt toetsen met dezelfde antwoordopties, zoals “helemaal oneens” tot “helemaal eens”. Sliders zijn handig voor beoordelingen op een schaal, bijvoorbeeld van 1 tot 10. Je kunt ook vragen naar percentages of respondenten punten laten verdelen over verschillende opties. Hiermee krijg je inzicht in voorkeuren of prioriteiten. Rankingvragen zijn weer geschikt om onderdelen op volgorde van belangrijkheid te laten zetten. Maar let op, maak het niet te complex voor je respondenten. Als het te lastig wordt een vraag te beantwoorden of te veel tijd kost, haken ze af.
Bij het maken van gesloten vragen is het belangrijk dat de antwoordopties elkaar uitsluiten en logisch geordend zijn. Zorg voor consistentie in de richting van je antwoordschalen. Wissel niet tussen positief en negatief geformuleerde schalen, want dat kan verwarrend zijn voor de respondent. Kies ook een schaalgrootte die past bij je doel: een 5-puntsschaal is overzichtelijk, terwijl een 10-puntsschaal meer nuance biedt.
Bied daarnaast altijd de mogelijkheid om geen antwoord te geven, bijvoorbeeld met “weet ik niet” of “niet van toepassing”. Zo voorkom je dat mensen een willekeurig antwoord kiezen als ze het eigenlijk niet weten. Door goed na te denken over de vorm en inhoud van je gesloten vragen, verhoog je de kwaliteit van je data én de gebruiksvriendelijkheid van je vragenlijst.
Voordat je de vragenlijst breed uitzet, is het belangrijk om deze te testen. Laat mensen uit je doelgroep de vragenlijst invullen en vraag wat ze ervan vonden. Zijn de vragen duidelijk? Begrijpen ze wat er bedoeld wordt? Hoe lang deden ze erover? Analyseer ook de data uit deze testfase: zijn alle velden goed ingevuld en kun je met de antwoorden je onderzoeksvragen beantwoorden? Als je na de test aanpassingen doet, is het verstandig om opnieuw te testen met een frisse groep respondenten.
De manier waarop je je vragenlijst verspreidt, heeft invloed op wie je bereikt. Heb je e-mailadressen van je doelgroep, dan kun je unieke links sturen. Zo zie je precies wie wel of niet heeft gereageerd en kun je gerichte herinneringen sturen. Heb je geen adressen, dan kun je een algemene link delen via sociale media of WhatsApp. Dat is laagdrempelig, maar je hebt minder controle over wie de vragenlijst invult en hoe vaak. Kies de methode die het beste past bij je doelgroep en doelstelling.
Als je persoonsgegevens gebruikt, zoals e-mailadressen, moet je rekening houden met de privacywetgeving (AVG). Controleer altijd of je deze gegevens mag gebruiken voor je onderzoek. Op internet is veel informatie te vinden over hoe je hier zorgvuldig mee omgaat.
Over inventarisatie-onderzoek is niet erg veel informatie te vinden. In deze blog beschrijven we in het kort wat inventarisatie-onderzoek nu eigenlijk is en wanneer het zinvol is om het in te zetten.
Wil je meer weten over de verschillende soorten onderzoek die in je in kunt zetten en waar je op moet letten bij de keuze van een onderzoeksmethode, lees dan de volgende blogs:
overzicht van verschillende onderzoeksmethoden
Waar let je op bij de keuze van een onderzoeksmethode?
Met inventarisatie-onderzoek wordt de stand van zaken op een bepaald gebied in kaart gebracht. Het wordt vaak gezien als een soort vooronderzoek waarbij je eerst de situatie in beeld brengt voordat je start met het daadwerkelijke onderzoek. Ook wordt het ingezet om een bepaalde activiteit meer kans van slagen te geven doordat je vooraf informatie hebt verzameld. Inventarisatie-onderzoek valt onder descriptief (beschrijvend) of exploratief (verkennend) onderzoek.
Bij iedere onderzoeksvraag hoort een eigen manier van onderzoeken. Bij de ene onderzoeksvraag is het antwoord het beste te vinden door het doen van kwalitatief onderzoek en bij de andere vraag past kwantitatief onderzoek juist beter. Maar wat houden kwalitatief en kwantitatief onderzoek nu precies in? En wanneer kies je voor een kwalitatieve methode en wanneer voor een kwantitatieve? Of maak je een combinatie?
Kwalitatief onderzoek is gericht op het verkrijgen van informatie over wát er leeft en waaróm. Het geeft diepgaande informatie door in te gaan op achterliggende motieven, meningen, gedachtes, wensen en behoeften van de onderzoeksgroep. is kwalitatief onderzoek de beste methode. Typische vragen voor kwalitatief onderzoek zijn vragen die beginnen met Waarom en Hoe.
Voorbeelden van onderzoeksvragen die door middel van kwalitatief onderzoek beantwoord worden:
De volgende methoden zijn passend voor kwalitatief onderzoek:
Kwantitatief onderzoek is gericht op hoeveelheid. Het geeft je cijfermatige resultaten over een bepaalde groep. Denk hierbij aan: 73% van de deelnemers heeft iets geleerd, gemiddeld krijgen we een rapportcijfer van 7,6 van onze bezoekers of 65% van de leerlingen is van mening veranderd. Typische vragen voor kwantitatief onderzoek zijn vragen die beginnen met hoeveel of in hoeverre.
Voorbeelden van onderzoeksvragen die door middel van kwantitatief onderzoek beantwoord worden:
Vaak wordt voor kwantitatief onderzoek gekozen om inzicht te krijgen in de gevolgen van een programma. Bijvoorbeeld als je verandering in attitude/houding aan wilt tonen naar aanleiding van een activiteit, project of programma. Of als je significante verschillen aan wilt kunnen tonen en deze wil generaliseren naar de massa. Ook voor het doen van cijfermatige uitspraken over een bepaalde doelgroep, kies je voor kwantitatief onderzoek.
Om betrouwbare uitspraken te kunnen doen in een kwalitatief onderzoek moet je onderzoek onder andere representatief zijn. Hiervoor heb je een minimaal aantal deelnemers nodig binnen je doelgroep die hun mening geven. Hiervoor kun je een steekproef trekken. Wanneer deze steekproef een bepaalde omvang en kenmerken heeft (afhankelijk van de onderzoeksvraag), kunnen uitspraken gegeneraliseerd worden naar de hele doelgroep.
De volgende methoden zijn passend voor kwalitatief onderzoek:
Voor de verwerking van kwantitatieve data heb je excel of SPSS nodig, waarmee je allerlei berekeningen kunt maken.
Kwalitatief en kwantitatief onderzoek zijn niet per definitie op zichzelf staand. Kwantitatief en kwalitatief onderzoek kunnen aanvullend zijn op elkaar. Zo kun je kwalitatief onderzoek doen om te komen tot een goede vragenlijst die je breder uitzet. Ook kun je de uitkomsten van een kwalitatief onderzoek interpreteren met kwalitatief onderzoek.
Voor meer inspiratie op het gebied van mogelijke onderzoeksmethoden, kun je kijken bij mijn blog: Een overzicht van verschillende onderzoeksmethoden.
Wanneer je interviews afneemt kun je veel te weten komen. Je verzamelt voornamelijk kwalitatieve data. (Er zijn enkele trucjes om ook kwantitatieve data te verzamelen.) Nog voordat je interview start, is het van belang dat je je interviewvragen goed gedefinieerd hebt. Want vragen stellen doe je niet voor de lol: ze moeten uiteindelijk antwoord geven op de hoofdvraag van je onderzoek. Daarom geef ik je tips hoe je je interviewvragen zo goed mogelijk vormgeeft:
Tot slot wil ik je meegeven dat het belangrijk is om objectief te blijven tijdens het interview. Je eigen mening speelt hierin geen rol. Zorg ervoor dat de geïnterviewde zijn eigen verhaal kan vertellen.
Meer tips om je interview goed voor te bereiden? Lees dan mijn blog ’10 tips om een interview voor te bereiden’ of ’15 tips voor een goed interview’.
Stel je wilt een onderzoek doen onder een doelgroep die uit wel 10.000 mensen bestaat, moet je dan alle 10.000 mensen spreken om tot de juiste resultaten te komen? Zeker niet, slechts een deel van de onderzoekspopulatie hoeft mee te doen aan jouw onderzoek om tot representatieve resultaten te komen. Ik vertel je wat representativiteit inhoudt en wanneer iets representatief is.
Representativiteit houdt de mate in waarin de respondenten uit een steekproef een goede afspiegeling vormen van de doelgroep van je onderzoek. Je onderzoek is hierdoor representatief, wat betekent dat de eindconclusie van je onderzoek kloppend is voor ‘iedereen’ in je onderzoekspopulatie.
Een steekproef
Wanneer je een onderzoekspopulatie van 10.000 mensen hebt, zal je uiteindelijk 400 mensen moeten spreken om tot de mening van de grotere groep te komen. Dit houdt niet in dat je maar 400 mensen hoeft te benaderen. Je hebt te maken met een responspercentage. Dit is het percentage mensen dat meedoet aan je onderzoek. Je responspercentage is afhankelijk van het onderwerp dat je onderzoekt, hoe gemakkelijk en leuk het is om mee te doen aan jouw onderzoek en wat mensen ervoor terug krijgen. Ik ga vaak uit van 30% omdat ik vaak naar leuke onderwerpen onderzoek mag doen en inmiddels ervaring heb met het gemakkelijk maken van meedoen aan een onderzoek en ik de opdrachtgever vraag voor een leuk cadeautje voor de mensen die meedoen met het onderzoek. Tips om je respons te verhogen
Doordat niet iedereen mee zal doen aan je onderzoek zal je dus een grotere steekproef moeten trekken. Als je 400 respondenten nodig hebt en je uitgaat van een responspercentage van 30% heb je een steekproef van 400/30%=1.333 mensen nodig trekken.
Wanneer je een onderzoek doet moet je er rekening mee houden dat hoe kleiner de onderzoekspopulatie wordt, hoe groter het aantal respondenten wordt om tot representatieve eindresultaten te komen. Soms is echter de input die respondenten geven waardevoller dan de hoeveelheid mensen die meedoen. Je hebt het dan over kwalitatief onderzoek. In sommige gevallen kan het belangrijker zijn om te focussen op de resultaten van het onderzoek dan de representativiteit. Lees hierover meer in mijn blog ‘Kwalitatief en kwantitatief onderzoek: wat is wat?’.
Wil je weten hoeveel respondenten je nodig hebt voor jouw onderzoekspopulatie: ga dan naar een steekproefcalculator. Vaak geven deze ook meteen aan hoeveel mensen je moet benaderen in je steekproef.
Als je een representatieve mening van een bepaalde groep Nederlanders nodig hebt, bijvoorbeeld vrouwen tussen de 35 en 60 jaar maar ook ouders van kinderen op de basisschool of inwoners van Amsterdam, kun je kiezen voor een vragenlijst onder een panel.
Een panel wordt gevormd door een representatieve groep Nederlanders die aangegeven heeft dat ze regelmatig willen meedoen aan een onderzoek. Vaak worden deze panels beheerd door marktonderzoekbureaus, maar ook door andere onderzoekbureaus. Je koopt een aantal vragen en respondenten in. De panelbeheerder legt de panelleden een digitale vragenlijst voor. Meestal wordt er binnen een aantal weken een databestand opgeleverd met een weegfactor. Je kunt dan snel met de uitkomsten van het onderzoek aan de slag.
Het kan interessant zijn om gedurende het jaar een aantal keer een panelonderzoek te doen. Als je vaker data verzamelt, kun je vergelijkingen gaan maken bijvoorbeeld over een verandering van houding of bekendheid met een bepaald product of dienst. Als je in dat jaar aanpassingen doet, kan je zien wat de resultaten hiervan zijn.
Tips:
Het is niet altijd nodig om zelf data te verzamelen. Je kunt ook gebruik maken van bestaande bronnen. Denk hierbij aan databestanden die je kunt kopen bij bijvoorbeeld SCP of CBS, maar ook aan je eigen administratie of kassaregistratiesysteem. Je maakt gebruik van bestaande databestanden als je meer wilt weten over een bepaald onderwerp waar landelijk gegevens over worden verzameld of als je kwantitatieve data wilt over je eigen organisatie. Er wordt al veel data verzameld. Maak daar slim gebruik van.
Kijk hier voor een overzicht van verschillende onderzoeksmethoden
Click on the flag to read this article in English
De juiste keuze en opmaak voor grafieken en diagrammen zorgt ervoor dat de onderzoeksresultaten gelezen en begrepen worden. Probeer dus altijd te bedenken wat de belangrijkste boodschap is die je wilt overbrengen en of de grafiek deze boodschap ook daadwerkelijk overbrengt. Vooral bij kwantitatief onderzoek is het zaak om de juiste grafieken en opmaak te kiezen die de data goed weergeven. Ik geef een aantal tips:
Wanneer welke grafiek?
Een onderzoeksmethode is de manier waarop je data verzamelt voor je onderzoek. Er zijn legio manieren om dit aan te pakken. Voor welke onderzoeksmethode je kiest is voornamelijk afhankelijk van de onderzoeksvragen. De praktijk waarmee je te maken hebt, heeft ook invloed.
Het aanbod van onderzoeksmethoden is groot waardoor je soms door de bomen het bos niet meer ziet. Daarom geef ik je in deze blog een handig overzicht met verschillende onderzoeksmethoden. Bij een aantal onderzoeksmethoden vind je een link naar een blog met meer informatie.
In dit overzicht maak ik onderscheid tussen kwantitatieve en kwalitatieve onderzoeksmethoden. Bij kwalitatieve onderzoeksmethoden kijk je naar het hoe en waarom en duik je de diepte in. Bij kwantitatieve onderzoeksmethodes draait het om cijfers en feiten die je met elkaar kunt vergelijken. Wil je hier meer over weten? In mijn blog ‘Keuze: kwalitatief onderzoek of kwantitatief onderzoek’ vind je informatie over het verschil tussen deze twee soorten onderzoek.
De non-profit sector, waaronder de cultuursector, maakt steeds meer kennis met het gebruiken van big data om bezoekers of deelnemers (beter) te bereiken. In het bedrijfsleven wordt al langer gewerkt met big data om het koopgedrag van consumenten te achterhalen. Dit wordt gedaan door online (koop)gedrag precies te volgen en hierop in te spelen. Daarnaast kan klantgedrag gevolgd worden over tijd, doordat mensen een uniek klantnummer of IP-adres hebben. Je krijgt dan inzicht in herhaalbezoeken van bezoekers. Bedrijven krijgen met big data ook inzicht in hun doelgroepen qua leeftijd, geslacht, economische situatie etc. Deze informatie kunnen zij inzetten voor marketingdoeleinden.
Big data zijn databestanden die te groot zijn om met reguliere systemen onderhouden te worden. Het gaat over data die worden opgeslagen door het internet, doordat mensen zelf steeds meer informatie opslaan in de vorm van bestanden, gegevens, foto’s en video’s. Maar ook omdat er steeds meer data automatisch wordt opgeslagen (bijvoorbeeld door online cookies). Ook ticketingsystemen van een museum, bioscoop of theater zijn een bron voor big data.
Big data kan dus veel inzichten verschaffen waarmee je jouw doelgroep (beter) kunt bereiken. Toch zitten er ook wat haken en ogen aan het gebruik van big data:
Door deze onzekerheden en kostbaarheid lijkt het analyseren van big data (nog) een lastige onderzoeksmethode voor de kleine en middelgrote organisaties in de non-profitsector. Toegankelijkere methoden om inzicht te krijgen in je doelgroep zijn bijvoorbeeld observeren, tracking, (groeps-)interviews, scheurkaartjes of vragenlijsten.
Ben je cursist? Log hier in op de Academie voor Onderzoek