kwaliteit van onderzoek Flashcards
Kwantitatief onderzoek
Interne validiteit
Een onderzoek is intern valide als je vanuit de gekozen onderzoekmethodes de juiste conclusies kunt trekken. Bedreigingen: 1. In het design van je studie 2. In de populatie en steekproef 3. In het uitvoeren van de interventie 4. In de dataverzameling 5. In de data analyse
bedreigingen in het design. Wat doe je er aan
Je kiest een zo krachtig mogelijk design binnen de context van je onderzoeksvraag en je mogelijkheden
Ad. 2: bedreiging vanuit je participanten
• Onderzoekspopulatie is niet representatief voor de populatie
• Onderzoekspopulatie is te klein en daardoor is je studie
under-powered.
• SELECTIEBIAS
Type steekproef!!!
– Bij voorkeur aselect en gerandomiseerd
• Random toewijzing aan de controle en experimentele conditie
• Power berekening
Ad. 3: bedreiging vanuit de uitvoering van
de interventie
• Reactie van de participant/therapeut op het in een studie
zitten
• Verwachtingen van de onderzoeker en verlies van
onafhankelijkheid
• Novelty effect
• Compenseren voor het mogelijk gemis bij controlegroep
• Behandel-contaminatie / problemen met modelgetrouwe
uitvoering
wat kan je doen??
Blinderen van respondent/
onderzoeksmedewerker /
behandelaar
• Modelgetrouwheidsmetingen
• Peer debriefing (collega’s)
Ad. 4: bedreiging vanuit de dataverzameling
• Keuze van meetinstrumenten
• Onvoldoende verdiepen in de klinimetrische eigenschappen
van de instrumenten
• INFORMATIEBIAS
Eigenschappen van meetinstrumenten
• Hoe betrouwbaar is het instrument?
• Hoe valide is het instrument?
• Hoe hanteerbaar is een instrument?
Daarnaast:
• Is het instrument beschikbaar (taal, mogelijke kosten,
afspraken met ontwikkelaars/eigenaars,…)?
Validiteit van het meetinstrument
• Meet je wat je wil meten?
– bij experimenteel onderzoek: de mate waarin het
manipuleren van de onafhankelijke variabele
verantwoordelijk is voor variatie op de afhankelijke
variabele en niet wat anders…
Soorten validiteit van het meetinstrument
- Face validiteit (eye ball method)
- Content validiteit (inhoudsvaliditeit)
- Construct validiteit (theorie)
- Criterium validiteit (gouden standaard)
- Predictieve validiteit (voorspellend vermogen)
Betrouwbaarheid van het meetinstrument
Test-hertest betrouwbaarheid
• Interbeoordelaarsbetrouwbaarheid
• Interne consistentie
Een niet betrouwbaar instrument is een ernstige bedreiging
voor de interne validiteit van het onderzoek
Ad. 5: bedreiging vanuit de data-analyse
Juistheid van de data-invoer • Uitbijters/ Outliers • Juistheid van de statistische toetsen • Wel/niet afronden van de gehele interventie… wat doe je er aan? • Controle van de data-invoer • Frequentieverdeling maken (normaalverdeling) • Geen concessies • Intention to treat analyse
Externe validiteit en bedreigingen
Of generaliseerbaarheid van je resultaten
• De mate waarin je kan verantwoorden dat je resultaten
gelden voor een grotere groep dan je onderzoekspopulatie
Bedreigingen van externe validiteit
• RCT op specifieke deelpopulatie:
– vb. gezonde niet rokende blanke mannen tussen 21 en 35
• Interactie tussen resultaten en variatie in de uitvoering
– Mentalisation based treatment werkt vooral als Bateman
het geeft…
Wat doe je eraan?
• Zorgen voor een representatieve steekproef
• Replicatiestudies
• Meta-analyses
• Kwalitatief onderzoek
–Trustworthiness
Validiteit en betrouwbaarheid? bij kwalitatief onderzoek
Validiteit en betrouwbaarheid?
• Geen instrumenten maar interviews, topiclijsten
… de onderzoeker als instrument
• Onderscheid in:
– Juistheid van de data-verzamelmethode
– Juistheid van de onderzoeksstrategie
Geldigheid van de analyse en de geldigheid van de interpretatie van de onderzoeker. De adequaatheid van de analyse en van de interpretatie bepaalt de juistheid van de conclusies
Trustworthiness
Construct Kwantitatief Kwalitatief Truth value geloofwaardigheid Internal validity Credibility Consistency duurzaamheid Reliability Dependability Neutrality Objectivity Confirmability Applicability overdraagbaarheid External validity Transferabilit
