Betrouwbaarheid en validiteit zijn begrippen die worden gebruikt om de kwaliteit van onderzoek te evalueren. Ze geven aan hoe goed een methode, techniek of test iets meet. Betrouwbaarheid gaat over de consistentie van een meting, en validiteit gaat over de nauwkeurigheid van een meting.
Het is belangrijk om rekening te houden met betrouwbaarheid en validiteit als je je onderzoeksopzet maakt, je methoden plant, en je resultaten opschrijft, vooral bij kwantitatief onderzoek.
| Betrouwbaarheid | ||
|---|---|---|
| Wat zegt het je? | De mate waarin de resultaten kunnen worden gereproduceerd wanneer het onderzoek onder dezelfde omstandigheden wordt herhaald. | De mate waarin de resultaten werkelijk meten wat ze verondersteld worden te meten. |
| Hoe wordt het beoordeeld? | Door na te gaan hoe consistent de resultaten zijn over de tijd, over verschillende waarnemers en over onderdelen van de test zelf. | Door na te gaan hoe goed de resultaten overeenkomen met gevestigde theorieën en andere metingen van hetzelfde concept. |
| Hoe verhouden ze zich tot elkaar? | Een betrouwbare meting is niet altijd geldig: de resultaten zijn misschien reproduceerbaar, maar niet per se juist. | Een geldige meting is over het algemeen betrouwbaar: als een test nauwkeurige resultaten oplevert, moeten die reproduceerbaar zijn. |
Betrouwbaarheid vs validiteit
Betrouwbaarheid en validiteit zijn nauw verwant, maar ze betekenen verschillende dingen. Een meting kan betrouwbaar zijn zonder geldig te zijn. Maar als een meting valide is, is hij meestal ook betrouwbaar.
Wat is betrouwbaarheid?
Betrouwbaarheid heeft betrekking op de consistentie waarmee een methode iets meet. Als hetzelfde resultaat consequent kan worden bereikt door dezelfde methoden onder dezelfde omstandigheden toe te passen, wordt de meting als betrouwbaar beschouwd.
Wat is validiteit?
Validiteit heeft betrekking op hoe nauwkeurig een methode meet wat deze beoogt te meten. Als onderzoek een hoge validiteit heeft, betekent dit dat het resultaten oplevert die overeenkomen met echte eigenschappen, kenmerken en variaties in de fysieke of sociale wereld.
Een hoge betrouwbaarheid is één indicator dat een meting valide is. Als een methode niet betrouwbaar is, is ze waarschijnlijk niet geldig.
Als de thermometer elke keer een andere temperatuur aangeeft, ook al heb je de omstandigheden zorgvuldig gecontroleerd om ervoor te zorgen dat de temperatuur van het monster hetzelfde blijft, dan werkt de thermometer waarschijnlijk niet goed, en zijn de metingen dus niet geldig.
Betrouwbaarheid alleen is echter niet genoeg om validiteit te garanderen. Zelfs als een test betrouwbaar is, kan het zijn dat hij de werkelijke situatie niet nauwkeurig weergeeft.
Validiteit is moeilijker te beoordelen dan betrouwbaarheid, maar is des te belangrijker. Om bruikbare resultaten te verkrijgen, moeten de methoden die je gebruikt om je gegevens te verzamelen, valide zijn: het onderzoek moet meten wat het beweert te meten. Dit zorgt ervoor dat je bespreking van de gegevens en de conclusies die je trekt ook valide zijn.
Hoe worden betrouwbaarheid en validiteit beoordeeld?
Betrouwbaarheid kan worden geschat door verschillende versies van dezelfde meting met elkaar te vergelijken. Validiteit is moeilijker te beoordelen, maar kan worden geschat door de resultaten te vergelijken met andere relevante gegevens of theorie. Methoden voor het schatten van betrouwbaarheid en validiteit worden meestal opgesplitst in verschillende typen.
Typen betrouwbaarheid
Verschillende typen betrouwbaarheid kunnen worden geschat met behulp van verschillende statistische methoden.
| Type betrouwbaarheid | Wat wordt er beoordeeld? | Voorbeeld |
|---|---|---|
| Test-hertest | De consistentie van een meting over de tijd: krijg je dezelfde resultaten als je de meting herhaalt? | Een groep deelnemers vult een vragenlijst in om persoonlijkheidskenmerken te meten. Als ze de vragenlijst dagen, weken of maanden na elkaar herhalen en dezelfde antwoorden geven, duidt dit op een hoge test-hertestbetrouwbaarheid. |
| Interrater | De consistentie van een meting tussen beoordelaars of waarnemers: krijg je dezelfde resultaten als verschillende mensen dezelfde meting uitvoeren? | Op basis van een checklist met beoordelingscriteria komen vijf beoordelaars met wezenlijk verschillende resultaten voor eenzelfde studentenproject. Dit wijst erop dat de beoordelingschecklist een lage interbeoordelaarsbetrouwbaarheid heeft (bijvoorbeeld omdat de criteria te subjectief zijn). |
| Interne consistentie | De consistentie van de meting zelf: krijg je dezelfde resultaten uit verschillende onderdelen van een test die zijn ontworpen om hetzelfde te meten? | Je ontwerpt een vragenlijst om het gevoel van eigenwaarde te meten. Als je de resultaten willekeurig in twee helften splitst, zou er een sterke correlatie moeten zijn tussen de twee reeksen resultaten. Als de twee resultaten erg verschillen, duidt dat op een lage interne consistentie. |
Typen validiteit
De validiteit van een meting kan worden geschat op basis van drie belangrijke typen bewijs. Elk type kan worden geëvalueerd aan de hand van het oordeel van deskundigen of statistische methoden.
| Type validiteit | Wat wordt er beoordeeld? | Voorbeeld |
|---|---|---|
| Constructie | Het aansluiten van een maat bij bestaande theorie en kennis van het te meten concept. | Een vragenlijst voor zelfwaardering zou kunnen worden beoordeeld door andere eigenschappen te meten waarvan bekend is of verondersteld wordt dat ze verband houden met het begrip zelfwaardering (zoals sociale vaardigheden en optimisme). Een sterke correlatie tussen de scores voor zelfwaardering en de bijbehorende eigenschappen zou wijzen op een hoge constructvaliditeit. |
| De mate waarin de meting alle aspecten van het te meten concept bestrijkt. | Een test die tot doel heeft het niveau Spaans van een klas leerlingen te meten, bevat lees-, schrijf- en spreekonderdelen, maar geen luistercomponent. Deskundigen zijn het erover eens dat luistervaardigheid een essentieel aspect is van taalvaardigheid, dus de toets mist inhoudsvaliditeit voor het meten van het algehele niveau van vaardigheid in het Spaans. | |
| Criterium | De mate waarin het resultaat van een meting overeenkomt met andere geldige metingen van hetzelfde concept. | Een enquête wordt gehouden om de politieke opvattingen van kiezers in een regio te meten. Als de resultaten nauwkeurig de latere uitkomst van een verkiezing in die regio voorspellen, geeft dit aan dat de enquête een hoge criteriumvaliditeit heeft. |
Om de validiteit van een oorzaak-gevolgrelatie te beoordelen, moet je ook kijken naar de interne validiteit (de opzet van het experiment) en de externe validiteit (de generaliseerbaarheid van de resultaten).
Hoe zorg je voor validiteit en betrouwbaarheid in je onderzoek
De betrouwbaarheid en validiteit van je resultaten hangt af van het maken van een sterke onderzoeksopzet, het kiezen van geschikte methoden en steekproeven, en het zorgvuldig en consequent uitvoeren van het onderzoek.
Validiteit
Als u scores of beoordelingen gebruikt om variaties in iets te meten (zoals psychologische eigenschappen, niveaus van bekwaamheid of fysieke eigenschappen), is het belangrijk dat uw resultaten de werkelijke variaties zo nauwkeurig mogelijk weerspiegelen. Over de validiteit moet al in het allereerste stadium van uw onderzoek worden nagedacht, wanneer u beslist hoe u uw gegevens gaat verzamelen.
- Kies de juiste meetmethoden
Zorg ervoor dat uw methode en meettechniek van hoge kwaliteit zijn en dat ze precies meten wat u wilt weten. Ze moeten grondig worden onderzocht en gebaseerd zijn op bestaande kennis.
Voor het verzamelen van gegevens over een persoonlijkheidskenmerk zou u bijvoorbeeld een gestandaardiseerde vragenlijst kunnen gebruiken die betrouwbaar en valide wordt geacht. Als u uw eigen vragenlijst ontwikkelt, moet deze gebaseerd zijn op gevestigde theorieën of bevindingen van eerdere studies, en moeten de vragen zorgvuldig en nauwkeurig worden geformuleerd.
- Gebruik geschikte steekproefmethoden om uw proefpersonen te selecteren
Om valide generaliseerbare resultaten te produceren, moet u de populatie die u onderzoekt duidelijk definiëren (bijvoorbeeld mensen uit een specifieke leeftijdscategorie, geografische locatie of beroepsgroep). Zorg ervoor dat u voldoende deelnemers hebt en dat ze representatief zijn voor de populatie.
Betrouwbaarheid
Betrouwbaarheid moet tijdens het hele proces van gegevensverzameling in aanmerking worden genomen. Wanneer u een instrument of techniek gebruikt om gegevens te verzamelen, is het belangrijk dat de resultaten nauwkeurig, stabiel en reproduceerbaar zijn.
- U past uw methoden consistent toe
Plan uw methode zorgvuldig om ervoor te zorgen dat u bij elke meting dezelfde stappen op dezelfde manier uitvoert. Dit is vooral belangrijk als er meerdere onderzoekers bij betrokken zijn.
Bij interviews of observaties moet u bijvoorbeeld duidelijk definiëren hoe specifieke gedragingen of reacties worden geteld, en ervoor zorgen dat vragen telkens op dezelfde manier worden geformuleerd.
- Standaardiseer de omstandigheden van uw onderzoek
Wanneer u uw gegevens verzamelt, moet u de omstandigheden zo consistent mogelijk houden om de invloed van externe factoren die tot variatie in de resultaten kunnen leiden, te beperken.
Zorg er bijvoorbeeld bij een experimentele opzet voor dat alle deelnemers dezelfde informatie krijgen en onder dezelfde omstandigheden worden getest.
Waar schrijf je over betrouwbaarheid en validiteit in een scriptie
Het is gepast om betrouwbaarheid en validiteit te bespreken in verschillende onderdelen van je scriptie of dissertatie. Als je laat zien dat je er rekening mee hebt gehouden bij het plannen van je onderzoek en het interpreteren van de resultaten, wordt je werk geloofwaardiger en betrouwbaarder.
| Onderdeel | Bespreken |
|---|---|
| Literatuurreview | Wat hebben andere onderzoekers gedaan om methoden te bedenken en te verbeteren die betrouwbaar en valide zijn? |
| Methodologie | Hoe hebt u uw onderzoek gepland om de betrouwbaarheid en validiteit van de gebruikte maatregelen te waarborgen? Denk hierbij aan de gekozen steekproefset en -grootte, steekproefvoorbereiding, externe condities en meettechnieken. |
| Als je betrouwbaarheid en validiteit hebt berekend, vermeld deze waarden dan naast je belangrijkste resultaten. | |
| Discussie | Dit is het moment om het te hebben over hoe betrouwbaar en valide je resultaten eigenlijk waren. Waren ze consistent, en gaven ze de werkelijke waarden weer? Zo nee, waarom niet? |
| Conclusie | Als betrouwbaarheid en validiteit een groot probleem waren voor je bevindingen, kan het nuttig zijn om dat hier te vermelden. |