4. Psychologické testy + metaanalýza Flashcards
(18 cards)
Psychologický test definícia
…štandardný a objektívny proces stimulácie, registrácie a vyhodnocovania vybraných aspektov správania a prežívania..
Štandardnosť a objektivita
Štandardnosť - rovnaký prístup pri zadávaní, registrovaní, vyhodnocovaní a interpretovaní výsledkov
Objektivita - vtedy, keď administrátor nemá vplyv na to, aké skóre bude prisúdené
Reliabilita
Spoľahlivosť - Opakovateľnosť
Meria test to, čo by mal merať?
(test-retest ; vnút. konzistentnosť - Cronbachovo alfa)
Potenciálne chyby v reliabilite meracích testov (2)
- Systematická chyba - pohybuje sa vždy jedným smerom a nadobúda vždy (približne) rovnakú hodnotu (Teplomer, ktorý by vždy meral o 5°C viac)
- Nesystematická chyba - hodnoty variujú aj pri nemeniacej sa veličine (rôzne výsledky pri test-retest); odhadujeme reálnu hodnotu
Určovanie reliability (4 testy)
- Test-retestový odhad reliability: miera zhody výsledkov pri opakovaných meraniach rovnakých osôb rovnakým testom; len ak predpokladáme stabilitu; čím vyšší koeficient, tým vyššia spoľahlivosť
- Paralelná forma odhadu reliability - korelácia nameraných hodnôt s hodnotami nameraným iným - ekvivalentným nástrojom
- Split-half reliabilita - Rozdelenie testu na časti - ak je test reliabilný, musia byť reliabilné aj jeho časti; dve polovice testu by mali byť cca. rovnaké; iba keď sú položky homogénne
- Odhad vnútornej konzistencie testu - na úrovni jednotlivých položiek; Cronbachovo alfa - merajú všetky časti rovnako spoľahlivo ako celý test?
Validita testu
Meria test to, čo sme chceli merať?
- miera zhody medzi nameranými výsledkami a tým, čo sme chceli merať
- podmienkou validity testu je jeho reliabilita
Validizácia
proces, ktorým overujeme, vyhodnocujeme a optimalizujeme validitu testu
Obsahová validita
Do akej miery obsah testu zodpovedá vlastnosti, ktorá má byť meraná?
- Reprezentatívnosť jednotlivých položiek tvoriacich test
- skupina expertov posudzuje test ako celok i položku po položke
Index obsahovej validity CVR (content validity ratio)
Experti posudzujú, či položka vo vzťahu k meranej kvalite odráža túto kvalitu: a) v podstatnej miere, b) ako užitočnú, ale nie podstatnú, c) nepodstatnú
- ak je CVR 0 a viac, má uspokojivú obsahovú validitu
Kritériová validita
Aká veľká je zhoda medzi stanovenými kritériami a výsledkami v teste?
Hodnotí, ako dobre tvoj test súvisí s konkrétnym praktickým výsledkom – nie iným testom.
- Slúži často na predikciu správania, výkonu, výsledkov.
- Funguje v praxi
úroveň kritériovej validity bude závisieť na reliabilite testu aj na reliabilite kritérií
PR: Test výberu zamestnanca vs. výkon zamestnancov
3 podoby kritériovej validity
- Súbežná validizácia - keď meriame kvalitu testom a v rovnakom čase aj vybranými kritériami
- Prediktívna validita - chceme testom predpokladať niečo, čo nastane; ak je vysoká zhoda, je vysoká prediktívna validita (test výberu zamestnanca vs. neskorší výkon)
- Postdiktívna/retrospektívna validita – test sa porovnáva s už existujúcim výsledkom/kritériom z minulosti. (pr. test impulzivity sa porovnáva s údajmi o minulých dopravných priestupkoch).
Konštruktová validita a jej 3 etapy
Overuje, či test naozaj meria ten psychologický konštrukt, ktorý má.
- Formulovanie daného konštruktu - ako ho merať?
- Hľadanie vhodných kritérií - odvodené priamo z teórie
- Empirické preskúmanie teoretických predikcií
Rozdelenie psychologických testov podľa Cronbacha (2)
Testy schopností a testy osobnosti
Otázka metaanalýzy
Čo je to metaanalýza?
Skúmal už niekto to, čo chceme skúmať?
Integrovanie výsledkov veľkého množstva štúdií - prekonať prípadne rozpory v zisteniach a dojsť k syntetizujúcemu záveru
Postup metaanalitického skúmania (4)
- Definovanie premenných (a vzťahu medzi nimi)
- Výber štúdií, ktoré zahrnieme do metaanalýzy (len tie, ktoré obsahujú daný vzťah)
- Prevedenie rôznych štatistických ukazovateľov na spoločnú väčšinu (rôzne druhy analýz treba integrovať - index veľkosti vplyvu [Cohenovo d, koeficient r])
- Výpočet priemernej hodnoty veľkosti vplyvu
Konštruktová validita zahŕňa spôsoby overovania: (3)
- Konvergentná validita: mal by silno korelovať s iným testom sebaúcty
- Diskriminačná/diferenciálna validita: nemal by silno korelovať s testom úzkosti (dokáže rozlíšiť medzi odlišnými konštruktmi?)
- Faktorová analýza: odhalí, či sa otázky zoskupujú tak, ako predpokladáš (napr. pozitívna a negatívna sebaúcta)
Faktorová analýza + 2 typy
Faktorová analýza – spôsob, ako zistiť, ktoré otázky v dotazníku “držia spolu” a tvoria spoločné skryté dimenzie (faktory) – test nemeria jednotný konštrukt, ale má viacero dimenzií (pr. Big Five).
a) Exploratívna FA – zisťujeme, koľko faktorov tam je
b) Konfirmatívna FA – overujeme teóriu
Inkrementálna validita
Skúma, do akej miery nový test alebo premenná prispieva k predikcii výsledku nad rámec toho, čo už vieme pomocou existujúcich testov.
Zlepšuje nový test predpovedanie niečoho, aj keď už máme iné testy?