Brainscape's Knowledge GenomeTM


Top Flashcards (Certified)
All Flashcards

Psichometrika > Validumas > Flashcards

Validumas Flashcards

1
Q

Kas yra konstruktas?

A

Bet kas, kas sukuriama žmogaus proto, bet negali būti tiesiogiai matuojama/stebima.

Testo matavimo kontekste - tai išvada, daroma pasitelkus testu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Kas yra validumas? Keli apibrėžimai

A

Laipsnis, kuriuo testas matuoja tai, ką numatyta išmatuoti.

Laipsnis, kuriuo teorija ir empiriniai įrodymai:
- Pagrindžia tam tikrą testo įverčio interpretaciją

(Pvz.: ar tikrai IQ prognozuoja studijų sėkmę?)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Kokia formuluotė tinkamesnė? Kodėl?

” Testas - validus”

“Testo įverčio interpretacija - validi”

A

“Testo įverčio interpretacija - validi”

Nes validumas neturėtų būti atsiejamas nuo konteksto. Jei sakome, kad testas validus, tai suponuoja, kad jis validus naudojant bet kokiame kontekste.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Kas yra validumo tikrinimas?

A

Procesas, atspindintis nuolatines pastangas (testo kūrėjų, mokslinikų ir naudotojų) rinkti įrodymus, grindžiančius siūlomas testo įverčių interpretacijas

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Kokie yra nevalidumo šaltiniai?

A

Testu matuojama tik dalis norimo matuoti konstrukto (pvz.: tiria IQ, bet neištiria neverbalinių gebėjimų, tik verbalinius)

Testu matuojami gebėjimai/savybės, nesusiję su norimu matuoti konstruktu (pvz.: tiria neurotiškumą, bet kartu išmatuoja ir ekstraversiją)

Testuojamojo ypatumai, keičiantys/ribojantys galimus atsakymus (Pvz.: dėl nerimo prasčiau atlieka IQ testą)

Testo administravimas ir įverčių skaičiavimas (Pvz.: administruoja ne pagal reikalavimus)

Testo standartizcinė imtis (pvz.: nereprezentatyvi, maža)

Tiriamojo išmokimas

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Koks santykis tarp validumo ir patikimumo?

A

Patikimumas - būtina validumo sąlyga (jei nepatikimas - nevalidus) (pvz.: jei gaunami vis kitokie rezultatai, tai turbūt nebus tinkamai matuojamas konstruktas)

Patikimumas - nėra pakankama validumo sąlyga (gali patikimai matuoti ne tai, ką reikia)

Pvz.: matuojama galvos apimtis kaip intelekto matavimas - tiksliai (patikimai), bet neatspindi intelekto (nevalidi)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Kokie validumo tipai pagal tradicinį požiūrį?

A

Turinio validumas
Kriterinis validumas
Konstrukto validumas

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Kas yra turinio validumas? Kokios jo dalys?

A

Kiek tinkamai testo turinys reprezentuoja matuojamą konstruktą:
- Turinio aprėptis: ar aprėpia visą konstruktą (pvz.: ar matuoja visas intelekto dimensijas?)
- Užduočių relevantiškumas: ar iš viso matuoja reikiamą konstruktą (pvz.: ar iš viso matuoja intelektą)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Kas yra kriterinis validumas?

A

Kiek asmens testo įvertis yra susijęs su kitais jo veiklos rodikliais (t.y., kriterijumi)

Ryšių tarp testo įverčių ir kriterijaus įvertinimas.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Kas yra konstrukto validumas?

A

Kiek remiantis testo įverčiais galime daryti pagrįstas išvadas apie matuojamo konstrukto išraišką

(Pvz.: ar depresijos skalės aukšti įverčiai rodo, kad žmogui depresija)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Kokia šiuolaikinė validumo struktūros samprata?

A

Validumas yra nedalomas - nėra skirtingų validumo tipų.

Yra tik validumo įrodymo tipai.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Kokie validumo įrodymo tipai pagal šiuolaikinį požiūrį? Kokius tradicinius validumo tipus jie atitinka?

A

Remiantis:
- Testo turiniu (turinio validumas)
- Atsakymo proceso analize (turinio ir konstrukto validumas)
- Vidine struktūra (konstrukto validumas)
- Ryšiais su kitų testų įverčiais (konstrukto validumas)
- Ryšiais su kitais kintamaisiais (kriterinis validumas)
- Testo įverčių skirtingose grupėse palyginimas (konstrukto validumas)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Kokie testo kūrimo pradiniai etapai?

A
  • Pasirenkam konstrukto teorinę sampratą
  • Išskiriame pagrindines konstrukto temas
  • Kuriami teiginiai/užduotys
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Kokie validumo vertinimo testo turiniu būdai?

A
  • Ekspertų vertinimas
  • Psichologinis-loginis-lingvistinis metodas
  • Statistiniai metodai
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Kaip validumas vertinamas testo turiniu: ekspertų vertinimas?

A

Nepriklausomų ekspertų prašoma įvertinti, kiek atskiros užduotys matuoja konstruktą.

Vertinama balais 1 - 4 (1 - visiškai neatitinka; 4 - visiškai atitinka)

Jei vertina du ekspertai, sudaroma lentelė:
- x - ekspertas vienas: mažas (1-2) ir didelis atitikimas (3-4)
- y - eskpertas du: mažas (1-2) ir didelis atitikimas (3-4)

Tada abiejų didelis atitikimas / visų atitikimų/neatitikimų

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Kaip validumas vertinamas testo turiniu: psichologinis-loginis-lingvistinis metodas?

A

Tiesiog įvertinama, ar teiginiai/užduotys aiškios: siekiama kuo suprantamiau, universaliau, aiškiau apibrėžti

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Jei adaptuojame testą, kaip geriau versti teiginius?

A

Kuo ekvivalenčiau

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Kaip validumas vertinamas testo turiniu: statistinis metodas?

A

Matuojame:
- Užduoties-testo įverčio koreliaciją
- Užduoties sunkumą
- Užduoties skiriamąją galią
- Užduočių atsakymų alternatyvų dažnį

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Kokiems testams svarbus validumas, vertinamas testiniu turiniu pagal statistinį metodą?

A

Testams, kurie diferencijuoja, pvz.: diagnostiniams.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Kas yra paviršinis/akivaizdus validumas? (angl. face validity)

A

Kiek neprofesionalaus asmens (pvz.: testuojamojo) akimis testas matuoja tai, ką turėtų matuoti.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Kodėl svarbus geras paviršinis validumas?

A
  • Palankesnis testuojamojo požiūris į testą
  • Didesnė motyvacija pildyti testą ir bendradarbiauti
  • Gauti rezultatai labiau pripažįstami
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Kodėl paviršinis validumas - blogai?

A

Jei asmuo supranta, kas matuojama testu, tai gali taip pakreipti testo atsakymus, kad atitiktų jų tikslus (pvz.: kad geriau pasirodytų asmenybės teste)

23
Q

Kas yra validumo įrodymas atsakymo procesais? Pateikite pvz. tokio validumo trūkumo.

A

Kiek testuojamojo veiksmai atliekant testo užduotis atspindi
matuojamą konstruktą

Pvz.: žmogus teisingai išsprendžia uždavinį, bet aprašo netinkamai (VBE)

Pvz.: žmogus matematikos uždavinius išsprendžia tik dėl to, kad žino sprendimo algoritmą.

24
Q

Kokie būdai įvertinti validumo įrodymą atsakymo procesais?

A
  • Interviu su testuojamuoju apie užduoties sprendimo procesą ir naudotas strategijas
  • Elgesio rodiklių fiksavimas
  • Klaidų analizė
25
Kas yra validumo įrodymas vidine testo struktūra? Pateikite pavyzdį.
Kiek testo struktūra (užduočių tarpusavio ryšiai) sutampa su norimo matuoti konstrukto struktūra T.y. ar testas turi tą pačią struktūrą, kurią teorija siūlo turėti Pvz.: ar testo struktūra atitinka Didžiojo Penketo teorijos struktūrą.
26
Kokie būdai įvertinti validumo įrodymą vidine testo struktūra?
- Faktorinė analizė (tiriamoji - ar išlenda faktoriai, žymimi teorijoje; patvirtinančioji - sukišam faktorius ir žiūrim ar tinka) - Testo struktūros patvirtinimas skirtingose imties grupėse (jei neurotiškumas būdingesnis moterims, ar tai atsispindi teste) - Vidinio suderintumo analizė - kiek skalės teiginiai koreliuoja su savo skale (turi su savo geriau nei sukitom)
27
Kas yra validumo įrodymas remiantis testo įverčių ryšiais su kito testo įverčiais? Kas jį sudaro?
Siekiama nustatyti testo ir tą patį konstruktą matuojančio kito testo įverčių reikšmingus ryšius. Sudaro: - Konvergentinis validumas (teigiami ryšiai) - Diskriminantinis validumas (neigiami ryšiai)
28
Kas yra konvergentinis validumas? Duokite pavyzdį
Validumo įrodymo remiantis testo įverčių ryšiais su kito testo įverčiais tipas. Kai siekiama nustatyti testo ir tą patį konstruktą matuojančio kito testo įverčių reikšmingus teigiamus ryšius Pvz.: ar mūsų depresijos testas koreliuoja su kitu depresiją matuojančiu testu.
29
Kokia yra konvergentinio validumo tikrinimo sąlyga?
Kad testas, su kuriuo lyginama, validus ir patikimas
30
Ar gerai, jei konvergentinis validumas yra >0.9?
Ne, nes tada per daug panašios skalės. Tai negerai, nes mums nenaudingos dvi vienodos skalės.
31
Kas yra diskriminantinis validumas? Duokite pavyzdį
Kai instrumentas, su kuriuo lyginame savo testą, matuoja kažką kitą, kas turėtų (empiriškai ar teoriškai) priešintis konstruktui, kurį matuoja mūsų testas Pvz.: jei mūsų skalė matuoja ekstraversiją, ji turėtų prastai koreliuoti su introversijos skale.
32
Kas yra multitrait-multimethod matrix (MTMM)? Kam naudojamas?
Kai du ar daugiau konstruktų yra matuojami dviem ar daugiau testų. Sukuriama koreliacijų matrica. Naudojamas konvergentiniui ir diskriminantiniui validumui įvertinti.
33
Kaip nustatyti konvergentinį validumą MTMM metodu?
Tikrinama koreliacija, kurioje tas pats konstruktas matuojamas skirtingais būdais. Jis turėtų stipriai koreliuoti. Taip pat turėtų geriau koreliuoti nei su kitomis savybėmis, matuotų tiek tuo pačiu, tiek kitais instrumentais.
34
Kaip nustatyti diskriminantinį validumą MTMM metodu?
Skirtingi konstruktai, matuojami skirtingais metodais, tarpusavyje turėtų blogiau koreliuoti nei koreliuoja tie patys konstruktai tarpusavyje.
35
Kaip nustatyti patikimumą MTMM metodu?
Koreliacija tarp tų pačių konstruktų, matuotų tais pačiais metodais
36
Jeigu MTMM matricoje koreliacijos tarp skirtingų savybių, matuotų tais pačiais instrumentais, didesnės nei tarp skirtingų savybių, matuotų skirtingais instrumentais?
Tokiu atveju turbūt matavimo klaida.
37
Kas yra validumo įrodymas testo įverčių testuojamųjų grupėse palyginimu? Pateikite pavyzdį.
Siekiama nustatyti, ar testo įverčių grupėse (pvz.: amžiaus, lyties) palyginimas atspindės teoriškai numatytus ir empiriškai patvirtintus skirtumus (pvz.: intelekto testo žali balai turėtų būti aukštesni jaunų suaugusiųjų nei vaikų) Taip parodome, kad tikrai matuojame konstruktą, kurį norime matuoti.
38
Kas yra validumo įrodymas, remiantis testo įverčių ryšiais su kitais kintamaisiais? Kaip jis skirstomas? Pateikite pavyzdį
Kiek asmens testo įvertis yra susijęs su kitais jo veiklos rodikliais, t.y., kriterijumi. Pvz.: kaip testuojamojo VBE rezultatai siejasi su jo pažymiais universitete (prognostinis) Skirstoma į: - Diagnostinį (lyginama su kriterijumi dabar) - Prognostinį (lyginama su kriterijumi ateityje
39
Kas yra diagnostinis validumas?
Kiek asmens testo įvertis siejasi su kitais jo veiklos rodikliais, t.y., kriterijumi, esamuoju laiku? (Priešingai nei prognostinis, kuris matuojamas ateityje)
40
Kas yra prognostinis validumas? Pateikite pavyzdį
Kiek validžiai galime pagal testo įverčius prognozuoti ateities atliktį. Nustatomas ryšys tarp testo įverčio ir būsimos veiklus rezultatų, t.y., kriterijaus. Pvz.: kaip testuojamojo VBE rezultatai siejasi su jo pažymiais universitete
41
Kaip matuojamas diagnostinis validumas? Pateikite pavyzdį
Kontrastinių grupių metodu: Testas taikomas priešingų grupių asmenims (pvz.: sergančiais ir nesergančiais depresija) ir nustatoma, kiek skiriasi dviejų grupių testo įverčiai. Jei skiriasi, testas gali būti naudojamas diagnostiniais tikslais. Pvz.: sergantys depresija gauna daug mūsų depresijos teste, o nesergantys - mažai.
42
Kaip matuojamas prognostinis validumas? Pateikite pavyzdį
Nustatomas ryšys tarp testo įverčio ir būsimos veiklus rezultatų, t.y., kriterijaus. Pvz.: kaip testuojamojo VBE rezultatai siejasi su jo pažymiais universitete
43
Koks turėtų būti prognostinio validumo koeficientas, kad galėtume taikyti testą?
Mokyklinių pasiekimų apie 0.5 Darbo rezultatų apie 0.2 - 0.3
44
Kas svarbu tiriant validumą, remiantis įverčių ryšiais su kitais kintamaisiais? (Kriterinį validumą)
- Kriterijus, kurį bandome prognozuoti/diagnozuoti, turi būti patikimas ir validus - Testo įvertis ir kriterijus turi būti matuojami nepriklausomai (kriterijų testuotojai neturėtų žinoti matuojamo testo įverčių; ir atvirkščiai) - Svarbu atskirties įverčio jautrumas ir specifiškumas
45
Kas yra atskirties įvertis (angl. cut-off)? Pateikite pavyzdį. Kuri jis taikomas?
Mažiausias galimas testo balas, kurį asmuo, atlikęs testą, turi gauti, kad būtų atrinktas/pasirinktas Pavyzdys: turi surinkti 27 ar daugiau taškus depresijos teste, kad būtų diagnozuota depresija; jei mažiau - nebus diagnozuota Taikomas diagnostiniuose ir prognostiniuose testuose kaip sprendimo rodiklis (ar atrinksime, ar ne)
46
Kokie keturi parametrai apibūdina atskirties įvertį? Trumpai apibūdinkite juos
Pagal atskirties įvertį: Jautrumas - kaip gerai aptinkami individai, pasižymintys X savybe Specifiškumas - kaip gerai aptinkami individai, neturintys X savybės Teigiamos prognozės vertė - kiek iš tų, kurie buvo atrinkti kaip pasižymintys X savybe, iš tikrųjų ją turi. Neigiamos prognozės vertė - kiek iš tų kurie buvo atrinkti kaip pasižymintis X savybe, iš tikrųjų jos neturi.
47
Kas yra (atskirties įverčio) jautrumas? Pateikite pavyzdį
Parametras, kaip gerai atskirties įverčio pagalba aptinkami individai, pasižymintys X savybe T.y. koks procentas turinčių X savybę buvo atskirti kaip turintys ją Pvz.: iš visų gabių vaikų, testas sugebėjo atrinkti 50% jų.
48
Kas yra (atskirties įverčio) specifiškumas? Pateikite pavyzdį
Parametras, kaip gerai atskirties įverčio pagalba aptinkami individai, neturintys X savybės T.y. koks procentas neturinčių X savybės buvo atskirti kaip neturintys jos Pvz.: iš visų negabių vaikų, testas sugebėjo atrinkti 50% jų
49
Kas yra (atskirties įverčio) teigiamos prognozės vertė? Pateikite pavyzdį
Koks procentas individų, atrinktų kaip turinčių X savybę, iš tikrųjų ją turi Pvz.: atrinko, kad 100 vaikų yra gabūs, bet tik 80 iš jų realiai gabūs, tai 80%
50
Kas yra (atskirties įverčio) neigiamos prognozės vertė? Pateikite pavyzdį
Koks procentas individų, atrinktų kaip neturinčių X savybės, iš tikrųjų jos neturi Pvz.: atrinko, kad 100 vaikų yra negabūs, bet tik 80 iš jų realiai negabūs, tai 80%
51
Kaip apskaičiuojami atskirties įverčio parametrai? (jautrumas, specifiškumas, t.t.)
Jautrumas: aptiktų kaip turinčių ir turinčių X savybę / visų turinčių X savybę Specifiškumas: aptiktų kaip neturinčių ir neturinčių savybės / visų neturinčių X savybės Teigiamos prognozės vertė: aptiktų kaip turinčių X savybę ir turinčių ją / visų aptiktų kaip turinčių Neigiamos prognozės vertė: aptiktų kaip neturinčių X savybės ir neturinčių jos / visų aptiktų kaip neturinčių
52
Kaip brėžiama ROC kreivė? Kaip interpretuoti ją? Kam ji naudojama?
X ašis - true negative ir false positive Y ašis - true positive ir false negative Kuo didesnis plotas apimtas - tuo geriau Atsirinkti geriausią atskirties įvertį pagal tai, koks jautrumo ir specifiškumo santykis mums tinka
53
Jeigu testas yra validus, ar galime jį naudoti bet kokiame kontekste?
Ne, interpretaciją pagal testo įverčius galima atlikti tik tuose kontekstuose, kur ji yra empiriškai pagrįsta Pvz.: ar galime ADHD vaikų depresiją išmatuoti tuo pačiu testu, kuris skirtas bendrai populiacijai?
54
Koks minimalus pageidautinas jautrumas arba specifiškumas
75%

Psichometrika (4 decks)

Brainscape helps you reach your goals faster, through stronger study habits.
© 2025 Bold Learning Solutions. Terms and Conditions