Testų ir klausimynų kūrimas + etika Flashcards
(159 cards)
Kokie yra testo kūrimo etapai?
- Testo kūrimo pagrindimas
- Konstrukto, tikslinės grupės, paskirties ir naudotojo apibrėžimas
- Testo struktūros ir formos specifikacija
- Užduočių ir instrukcijų parengimas
- Užduočių išbandymas ir analizė
- Parengto testo patikimumo ir validumo tikrinimas
- Normų sudarymas
- Testo pristatymas ir leidyba
- Testo peržiūra ir naujas leidimas.
Kokie svarbiausi testo kūrimo pagrindimo aspektai?
- Būtinybė vertinti specifines individų grupes
- Siekis atliepti naujus teorinius samprotavimus ir empirinius faktus
- Siekis turėti kuo tikslesnius testo įverčius, remiantis kuriais būtų daromos pagrįstos išvados apie individą
Būtina įsitikinti, kad nėra tinkamo testo, kuris patikimai ir validžiai matuotų norimą konstruktą, norimoje populiacijoje, norimu tikslu.
Kokie svarbiausi testo taikymo srities ir tikslų pasirinkimo aspektai?
Ar taikomas:
- Klinikoje ar darbuotojų atrankai
- Lyginami individai tarpusavyje ar lyginami su standartu
- Vertinamas individas ar mokslinis tyrimas atliekamas
Kokie tikslinės populiacijos ypatumai, turintys įtakos testo administravimui ir atlikčiai
Amžius – vaikų atliktis prastesnė, jei ribojamas laikas. Vaikams sunkiau skaityti, sunkiau su smulkiąja motorika.
Skaitymo lygis – saviataskaitos testai kuriami nuo 11 m.
Negalės ir sutrikimai
Motyvacija nuoširdžiai atsakinėti
Kokie būna konstrukto apibrėžimų tipai? Pagal tai, kaip bus kuriami teiginiai/užduotys.
Teorinis - testas kuriamas remiantis teorija ir ankstesniais tyrimais
Empirinis - testas kuriamas remiantis tuo, kiek gerai koreliuoja užduotys su matuojamu konstruktu
Mišrus - testas kuriamas remiantis tiek teorija, tiek teiginių funkcionavimo ypatumais – čia empiriškumas ne tas pats, kas tiesiog empiriniame apibrėžime (nėra, kad tiesiog koreliuoja užduotys su matuojamu konstruktu), bet plačiau paaiškinti negaliu.
Kokie būna konstrukto apibrėžimai? Pagal paskirtį
Teorinis, konceptualus.
Operantinis, darbinis - kokie aspektai sudaro, kaip matuojamas
Kokie svarbiausi etapai konstrukto apibrėžimo etape?
Apibrėžti:
- Kokį konstruktą norime matuoti
- Kas yra žinoma (teoriškai, empiriškai) apie konstruktą
Kokie yra testo formos aspektai?
Individualiai ar grupėje administruojamas?
Popieriaus ir pieštuko ar kompiuterine?
Kas pildys atsakymus: testuojamasis, testuotojas, kitas žmogus?
Kokie yra testo struktūros aspektai?
Vienas vs keli įverčiai?
Ar skaičiuojamas bendras suminis įvertis?
Kokius išvestinius rodiklius dar numatyta skaičiuoti?
Ką reikia padaryti testo strūktūros ir formos specifikacijos etape? Kodėl?
Sukurti specifikacijos lentelę.
Ši padeda suprasti, ar dera testo konstrukto apibrėžimas ir testo turinys.
Ypač tinka žinių/pasiekimų testams.
Parodoma, kiek teiginių yra kiekvienam konstrukto aspektui padengti.
Kokie būna užduočių/teiginių tipai?
Objektyvūs vs subjektyvūs
Pasirenkamas iš pateiktų vs testuojamojo paties formuluojamas
Kokie atsakymo pasirinkimo iš pateiktų užduočių/teiginių tipo privalumai?
Lengviau, greičiau atsakoma -> daugiau užduočių -> geriau reprezentuojamas matuojamas konstruktas
Objektyvus vertinimas, mažiau klystama -> išvengiama tyrėjo klaidos
Išvengiama kai kurių veiksnių galimos įtakos testo įverčiams
Kokie atsakymo pasirinkimo iš pateiktų užduočių/teiginių tipo trūkumai?
Nelengva sugalvoti tinkamas atsakymų alternatyvas (daugiau laiko reikia)
Netinka visiems konstruktams (pvz.: kūrybiškumas)
Galimas spėliojimas ir atsitiktinis atsakinėjimas. Padeda alternatyvų skaičiaus didinimas.
Kokie testuojamojo paties formuluojamo atsakymo užduočių/teiginių tipo privalumai?
Lengviau kuriami nei uždari
Tinka vertinti sudėtingesnius kognityvinius gebėjimus (kūrybiškumą)
Išvengiama spėliojimo
Kokie testuojamojo paties formuluojamo atsakymo užduočių/teiginių tipo trūkumai?
Sunkiau atsakyti -> mažiau užduočių
Sunkiau vertinti; galima testuotojo klaida
Neišvengiama atsakinėjimo remiantis bendru išprusimu
Galima matavimo klaida dėl su konstruktu nesusijusių veiksnių (kalbos raiškos gebėjimas)
Kokie bendri užduočių/teiginių formulavimo principai?
Aiškūs trumpi nurodymai, kaip atsakyti
Kuo paprastesnis žodynas, sakiniai, nėra neiginių
Atsakymų alternatyvos visų ekspertų vertinamos kaip (ne)teisingos
Vengiama teisingą atsakymą suponuojančių formuluočių
Yra eiliškumas pagal formą ar sunkėjimą
Užd./teiginys pateiktas viename psl. (nepersikelia per du)
Atsižvelgiama į tikslinę populiaciją (aklumas pvz.)
Vengiama su konstruktų nesusijusių veiksnių matavimo
Lengvai skaitomas, aiškus šriftas, pakankami tarpai tarp eilučių
Nuo ko priklauso uždavinių/teiginių skaičius teste?
Turimas laikas (atrankos iki 15 min)
Testuojamųjų amžius (vaikai ar senoliai - iki 30 min; kiti iki 2-4h)
Individualus vs grupinis
Greičio (daugiau uždavinių ir paprasčiau) vs rezultato (sudėtingiau ir ilgiau).
Kas būdinga geroms pasirenkamų atsakymų užduotims
Klausimas aiškus, galima atsakyti be alternatyvų
3-5 trumpos alternatyvos (jei daugiau - mažesnė spėjimo tikimybė, sunkiau sugalvoti distraktorius)
Alternatyvų pateikimo tvarka
Vengti “visi teisingi”, “visada” ir pan.
Kokie būna pasirenkamų atsakymų tipai?
Klausimas vs nebaigtas sakinys (stemas);
vienintelis teisingas vs geriausias ats.
Kas būdinga geroms “teisinga-neteisinga” užduotims?
Nėra dvigubų teiginių
Nėra “visada”, “niekada”, “dažnai”, “kartais”.
Vienodas atsakymų dažnumas teisinguose ir klaidinguose teiginiuose
Teisingi ir klaidingi panašaus ilgio
Daugmaž vienodas skaičius teisingų ir klaidingų atsakymų
Kas būdinga geroms “atitikmens pasirinkimo” užduotims?
Nurodyta, kad kiekviena alternatyva gali būti panaudota vieną/kelis kartus/ visai nepanaudotą
Visos alternatyvos atstovauja tik vieną temą
Dešiniajame stulpelyje daugiau alternatyvų nei kairiajame
Alternatyvų formuluotės trumpos, neilgas sąrašas (5-8)
Apgalvota pateikimo tvarka (abėcėlė, data, pan.)
Kokie “esė” užduočių tipai?
Apriboto atsakymo (pasakyk teiginį, ok dar vieną, gana) vs neribojamo (kiek sako, tiek pasako).
Kas būdinga geroms “esė” tipo užduotims?
Trumpa, tačiau maksimaliai tiksli klausimo formuluotė
Iš anksto numatytos klausimo atsakymų vertinimo gairės.
apriboto atsakymo arba ne.
Kokie “esė” tipo užduočių trūkumai?
Subjektyvus vertinimas
Maža turinio aprėptis, o tokių klausimų daug užduoti negali
Imlios laikui, todėl vengtinos