Hoe een vragenlijst te testen

Als u een grote enquête of vragenlijst uitvoert voor een onderzoeksstudie of paper, moet u uw vragenlijst op een kleinere schaal voorbereiden om te controleren of deze voor uw doeleinden zal werken. Om een ​​vragenlijst te testen of voor te bereiden, kies je een representatief voorbeeld van je grotere onderzoeksgroep en laat je ze de vragenlijst invullen. Dan kunt u waar nodig verbeteringen aanbrengen op basis van hun feedback.^[1]

Deel een van de drie:
Het monster selecteren

1. 1 Identificeer uw doelgroep. Idealiter zou de steekproef die u gebruikt om uw vragenlijst te testen lid moeten zijn van dezelfde groep die u voor de volledige studie wilt bereiken. Bepaal uw doelgroep op basis van leeftijd, geslacht, geografische locatie en andere factoren die relevant zijn voor uw studie.^[2]
   • Identificeer factoren die waarschijnlijk van invloed zullen zijn op het vermogen van mensen om de instructies en de vragen zelf te begrijpen. Zelfs als het opleidingsniveau van een respondent bijvoorbeeld niet relevant is voor uw algehele studie, zal dit van invloed zijn op hoe zij de geschreven taal kunnen lezen en begrijpen.
2. 2 Kies 5 tot 10 personen om te testen. Uw steekproef hoeft niet enorm groot te zijn om een ​​goed beeld te krijgen van de vraag of de vragenlijst en uw methoden voor het beheer van de vragenlijst effectief zullen zijn.^[3]
   • De grootte van uw steekproef kan meer afhankelijk zijn van de diversiteit van uw doelgroep dan de omvang ervan. Misschien wilt u een grotere steekproef als uw doelgroep bijvoorbeeld immigranten uit verschillende landen omvat.
3. 3 Zoek naar soortgelijk gesitueerde mensen. In sommige gevallen is het niet mogelijk om een ​​voorbeeldgroep rechtstreeks uit de feitelijke doelgroep voor uw studie te halen. Bekijk de beschrijving van uw doelgroep en zoek naar vergelijkbare mensen.^[4]
   • Stel dat u een vragenlijst hebt voor fabrieksmedewerkers in een specifiek geografisch gebied, maar u hebt niet de tijd of de middelen om daar naartoe te gaan voor een pilot. Je zou fabrieksarbeiders van vergelijkbare leeftijd en achtergrond kunnen hebben die toevallig bij een dichtere fabriek werken om je pilottest uit te voeren.
4. 4 Dek het bereik van uw doelgroep af. Vooral als u een groot onderzoek uitvoert, wilt u ervoor zorgen dat elke subgroep van uw algehele doelgroep de kans heeft om deel te nemen aan de pilot. Je wilt ervoor zorgen dat verschillende subgroepen de vragen nog steeds op dezelfde manier begrijpen.^[5]
   • Als u bijvoorbeeld 15-25-jarigen test, hebt u ten minste één tester nodig die 15 of 16 jaar oud is, en ten minste één tester die 24 of 25 is. De rest van uw pilottester kan in het midden vallen.
   • Als uw doelgroep een aantal mensen omvat die geen moedertaalsprekers in het Engels zijn, moet u ervoor zorgen dat uw pilotvoorbeeld ten minste een of twee personen bevat waarvoor Engels niet de eerste taal is.
   • Als mensen in uw doelgroep een verschillende opleiding hebben, zorg er dan voor dat uw steekproef bestaat uit mensen met minder opleiding en mensen met een hogere opleiding.
5. 5 Doe zo veel als je kunt. U heeft misschien niet de tijd of de middelen om een ​​grotere pilot van uw vragenlijst uit te voeren voordat u deze voor uw studie gaat gebruiken. Wanneer de tijd of middelen beperkt zijn, moet u alsnog proberen de vragenlijst door te nemen met ten minste één persoon.^[6]
   • Wanneer u de initiële planning voor uw project uitvoert, neemt u een pilot op in uw planning en in uw budget. Zelfs als je beperkte middelen hebt om te binden, kan het voltooien van een pilot je project veel geld besparen door fouten bloot te leggen waardoor de uiteindelijke vragenlijst zou mislukken.

Tweede deel van de drie:
De vragenlijst invullen

1. 1 Train uw gegevensverzamelaars. Als u een vragenlijst gaat testen, is het belangrijk dat de vragenlijst op dezelfde manier wordt beheerd als u van plan bent deze aan de doelgroep toe te vertrouwen.^[7]
   • Als je mensen hebt die je helpen, zorg er dan voor dat ze allemaal de vragenlijst voor de piloot verspreiden en verzamelen met dezelfde methoden die je in de echte studie zult gebruiken. Dit zorgt ervoor dat de resultaten van de pilot niet worden beïnvloed door een andere manier van bezorgen of verzamelen.
   • Misschien wilt u uw gegevensverzamelaars een praktijktest geven voordat u de pilot voltooit, om er zeker van te zijn dat iedereen volledig is opgeleid en niet afwijkt van hun instructies.
2. 2 Nodig testers een voor een uit. Wanneer u een vragenlijst bestuurt, zult u niet veel testers in uw steekproef hebben. Als ze de vragenlijst apart nemen, heb je de mogelijkheid om je op elk individu te concentreren.^[8]
   • Individuele tests stellen u ook in staat om elk lid van de steekproefgroep onmiddellijk na het invullen van uw vragenlijst te interviewen, zodat zij over de ervaring kunnen praten terwijl deze nog relatief vers in hun geheugen zit.
3. 3 Observeer de testers die de vragen beantwoorden. Terwijl u uw pilottesters rechtstreeks zult vragen naar hun ervaring met het invullen van uw vragenlijst, krijgt u veel ongecensureerde informatie over het bestuderen van hun lichaamstaal.^[9]
   • U kunt iemand in de kamer hebben om direct te observeren of u kunt toezicht houden op gesloten televisiecircuits. Als iemand in de kamer aanwezig is, let dan op het effect dat zijn aanwezigheid kan hebben op de mensen die op de vragenlijst reageren.
   • Als er niemand in de kamer met uw werkelijke onderwerpen is wanneer zij de vragenlijst beantwoorden, zou u niemand in de kamer moeten hebben met uw piloottesters. Stel een camera met gesloten circuit in om testers op te nemen als antwoord op de vragenlijst.
4. 4 Vraag testers hardop te denken. Een van de dingen die u zoekt wanneer u een vragenlijst bestuurt, is of uw respondenten de instructies die u heeft gegeven, zullen kunnen volgen. Als testers hardop denken, kun je zien waar instructies verwarrend zijn.^[10]
   • Vooral als je kijkt naar gesloten televisiecircuits en een audiofeed hebt, kunnen de pilottesters zeggen wat ze denken dat je veel waardevolle informatie kunt geven.Dit geldt met name omdat testers zich na het afronden van de oefening mogelijk niets herinneren dat belangrijk voor je was geweest om te weten.
5. 5 Vraag om aanvullende feedback. Zo snel mogelijk nadat elke monstertester uw vragenlijst heeft ingevuld, gaat u zitten en neemt u een interview met hen om meer te weten te komen over hun ervaring met het beantwoorden van uw vragenlijst.^[11]
   • Vraag hen specifiek naar eventuele vragen die hen in de war brachten of hun problemen opleverden. Als er vragen zijn die ze niet hebben beantwoord, vraag hen waarom. Als ze in de war waren over een vraag of instructie, vraag hen dan wat ze dachten dat het zei of bedoelde.
   • Als je via een video met een gesloten circuit observeert, vraag je je testers wat de lichaamstaal is die je hebt opgemerkt toen ze reageerden op je vragenlijst. U zou bijvoorbeeld kunnen zeggen: "Ik heb gemerkt dat u hier ongeveer een minuut de vragenlijst hebt ingeklapt en naar de deur hebt gekeken. Kunt u mij vertellen wat u hier dacht?"

Derde deel van de drie:
De resultaten implementeren

1. 1 Voer de antwoorden op de pilootvragenlijst in. Zodra al uw pilottesters uw vragenlijst hebben ingevuld, voert u de gegevens in een computerprogramma of een spreadsheet in precies zoals u van plan bent te doen voor de volledige studie.^[12]
   • Met dit proces kunt u ook mogelijke problemen vinden met de methoden die u wilt gebruiken om uw gegevens te interpreteren en analyseren.
   • Gebruik dezelfde analysemethoden en dezelfde interpretatie om de piloot exact hetzelfde te behandelen als de volledige studie.
2. 2 Analyseer de resultaten. Een deel van de waarde van een pilotstudie is dat je kunt zien of het volledige project het waard is om te doen. Op basis van uw analyse van de gegevens die in de pilotstudie zijn verzameld, kunt u er vaak achter komen of het zelfs de moeite waard is de vragenlijst aan de volledige doelgroep aan te bieden.^[13]
   • De resultaten van zelfs een kleine groep respondenten kunnen u een goed idee geven of de vragenlijst effectief zal zijn in het vervullen van de doelen of de intentie van uw algehele studie.
3. 3 Identificeer fouten in de basisformattering of gegevensinvoer. Als een paar mensen op uw vragenlijst reageren, kan dit de aandacht vestigen op fouten die een vraag moeilijk te begrijpen of te beantwoorden maken. Deze basisfouten zijn relatief eenvoudig op te lossen.^[14]
   • De kolommen voor sommige antwoorden kunnen bijvoorbeeld verkeerd zijn uitgelijnd, zodat uw respondenten niet kunnen achterhalen welke plaats ze moeten markeren voor de gewenste optie. Dit kan eenvoudig worden gecorrigeerd.
4. 4 Logistieke uitdagingen aanpakken. De piloot kan problemen ontdekken met de methoden die u wilt gebruiken om de vragenlijst te verspreiden, beheren of verzamelen. U hebt de mogelijkheid om eventuele inefficiënties die aanzienlijke problemen kunnen veroorzaken te corrigeren zodra u de volledige studie start.^[15]
   • Stel dat u bijvoorbeeld niet wilt dat respondenten die uw vragenlijst hebben ingevuld met anderen spreken die nog wachten om het af te maken. Tijdens de pilot kunt u ervoor zorgen dat respondenten de manier waarop u van plan bent om te doen tijdens het volledige onderzoek, binnengaan en verlaten om ervoor te zorgen dat hun paden elkaar niet kruisen.
5. 5 Juiste problematische vragen. Als gevolg van de pilot kunt u mogelijk vragen opmerken die verwarrend of zelfs beledigend zijn voor respondenten. Als je de pilot doet, kun je deze vragen oplossen, zodat ze je doelen beter kunnen bereiken.^[16]
   • Als de piloot heeft onthuld dat een vraag overbodig, overtollig of overdreven moeilijk is, wilt u deze mogelijk negeren.^[17]
6. 6 Voer een tweede piloot uit. Als de piloot slechts kleine fouten heeft ontdekt, kunt u deze meestal verhelpen en doorgaan naar de volledige studie. Als na de pilot echter belangrijke wijzigingen nodig waren, wilt u wellicht een tweede pilot voor de herziene vragenlijst.^[18]
   • Als u weinig tijd en middelen heeft, kunt u een kleinere, meer informele pilot doen om de vragenlijst een testrun te geven.