VL3 Gütekriterien: Objektivität & Reliabilität

Question 1

Was sind die Hauptgütekriterien psychologischer Tests?

Answer 1

Objektivität, Reliabilität, Validität

Question 2

Was bedeutet Objektivität in der Diagnostik?

Answer 2

Ein Testergebnis ist unabhängig davon, wer den Test durchführt, auswertet oder interpretiert.

Question 3

Welche Arten von Objektivität gibt es?

Answer 3

Durchführungsobjektivität, Auswertungsobjektivität, Interpretationsobjektivität

Question 4

Was ist Durchführungsobjektivität?

Answer 4

Standardisierte Instruktionen und Bedingungen sichern, dass die Testdurchführung nicht vom Testleiter beeinflusst wird.

Question 5

Was sind Praxisprobleme der Durchführungsobjektivität?

Answer 5

Abweichungen bei Kindern, alten oder klinischen Personen; unzureichend geschulte Testleiter:innen

Question 6

Was ist Auswertungsobjektivität?

Answer 6

Ein identisches Antwortverhalten führt bei allen Auswerter:innen zur gleichen Auswertung – gegeben bei klaren Auswertungsregeln.

Question 7

Was sind Probleme bei der Auswertungsobjektivität?

Answer 7

Fehlende Klarheit im Manual, Übertragungsfehler, uneinheitliche Auswertung

Question 8

Was ist Interpretationsobjektivität?

Answer 8

Unterschiedliche Diagnostiker:innen ziehen aus demselben Rohwert dieselben Schlüsse – durch Normtabellen und Hilfen unterstützt.

Question 9

Was sind Probleme bei der Interpretationsobjektivität?

Answer 9

Fehlende oder uneinheitliche Interpretationstabellen, unterschiedliche Cut-off-Werte

Question 10

Was bedeutet Reliabilität?

Answer 10

Ein Test misst ein Merkmal zuverlässig und liefert bei Wiederholung unter gleichen Bedingungen stabile Ergebnisse.

Question 11

Was ist die Grundformel zur Messung in der Reliabilitätstheorie?

Answer 11

Xi = Ti + Ei (Testwert = wahrer Wert + Messfehler)

Question 12

Welche Arten von Reliabilität gibt es?

Answer 12

Paralleltest-Reliabilität, Retest-Reliabilität, Split-Half-Reliabilität, Interne Konsistenz

Question 13

Was ist Paralleltest-Reliabilität?

Answer 13

Zwei parallele Testversionen mit ähnlicher Schwierigkeit und Trennschärfe werden miteinander korreliert.

Question 14

Was ist Retest-Reliabilität?

Answer 14

Der gleiche Test wird zweimal gegeben. Die Korrelation ergibt die Reliabilität. Abhängig von Zeitintervall und Merkmalstabilität.

Question 15

Was ist Split-Half-Reliabilität?

Answer 15

Ein Test wird in zwei Hälften geteilt. Korrelation der Hälften, korrigiert durch Spearman-Brown-Formel.

Question 16

Was ist interne Konsistenz?

Answer 16

Korrelation aller Items miteinander. Maß: Cronbachs Alpha oder McDonald’s Omega.

Question 17

Wie wird Cronbachs Alpha beeinflusst?

Answer 17

Höher bei vielen Items und hoher Interkorrelation; niedriger bei geringer Varianz oder heterogener Struktur.

Question 18

Ab welchen Werten gilt Cronbachs Alpha als akzeptabel?

Answer 18

<.70: nicht akzeptabel, >.70: akzeptabel, >.80: gut, >.90: sehr gut

Question 19

Was ist das Problem bei kurzen Tests mit hohem Alpha?

Answer 19

Items sind oft redundant – Test ist konsistent, aber nicht differenzierend.

Question 20

Wann ist Cronbachs Alpha nicht aussagekräftig?

Answer 20

Wenn Items nicht unidimensional sind – also unterschiedliche Konstrukte messen.

Question 21

Was ist McDonald’s Omega?

Answer 21

Alternatives Maß zur internen Konsistenz, das ungleiche Itemgewichte berücksichtigt – genauer bei heterogenen Items.

Question 22

Was ist Itemschwierigkeit?

Answer 22

Anteil der Personen, die ein Item im Sinne des Merkmals gelöst haben. Ideal: mittlere Schwierigkeit.

Question 23

Was ist Trennschärfe?

Answer 23

Gibt an, wie gut ein Item das Gleiche misst wie der Gesamttest – Korrelation Item mit Gesamtskala.

Question 24

Was bedeutet Itemschwierigkeit und wie wird sie berechnet?

Answer 24

Gibt an, wie viele Personen ein Item im Sinne des Merkmals bearbeitet haben. Formel: p = (NR / N) * 100

Question 25

Was bedeutet eine Itemschwierigkeit von 0 bzw. 100?

Answer 25

0 %: niemand löst das Item. 100 %: alle lösen es. Beide → keine Varianz, unbrauchbar zur Differenzierung.

Question 26

Was bedeutet Trennschärfe?

Answer 26

Korrelation eines Items mit dem Gesamttest. Zeigt, wie gut ein Item das misst, was der Test misst.

Question 27

Warum wird bei der Trennschärfe die part-whole-Korrektur verwendet?

Answer 27

Damit das Item nicht mit sich selbst korreliert – Item wird bei Skalenwert ausgeschlossen.

Question 28

Was ist Cronbachs Alpha?

Answer 28

Maß für interne Konsistenz. Zeigt, wie gut Items miteinander korrelieren und dasselbe Merkmal erfassen.

Question 29

Was beeinflusst Cronbachs Alpha?

Answer 29

Anzahl der Items, Höhe der Iteminterkorrelation, Varianz der Stichprobe.

Question 30

Warum kann ein hoher Alpha-Wert auch problematisch sein?

Answer 30

Weil bei kurzen Tests ein hoher Alpha auf Itemredundanz hindeutet.

Question 31

Was bedeutet Unidimensionalität im Zusammenhang mit Alpha?

Answer 31

Alle Items sollen dasselbe Konstrukt messen – Voraussetzung für sinnvolle Interpretation von Alpha.

Question 32

Wann ist Reliabilität zu niedrig für praktische Anwendung?

Answer 32

Unter .85 – zu breite Konfidenzintervalle, unsichere Urteile.

Question 33

Warum ist Reliabilität kontextabhängig zu bewerten?

Answer 33

Je nach Anwendung ist mehr oder weniger Genauigkeit nötig – Forschung vs. Individualdiagnostik.

Question 34

Was ist McDonald’s Omega und wann ist es Cronbachs Alpha überlegen?

Answer 34

Alternatives Maß für interne Konsistenz. Besser geeignet bei ungleichen Itemgewichten oder heterogenen Items.

Question 35

Was versteht man unter der Objektivität von Messverfahren? Welche Facetten gibt es?

Answer 35

Definition: Objektivität liegt vor, wenn das Testergebnis unabhängig davon ist, wer den Test durchführt, auswertet und interpretiert. 🔹 Durchführungsobjektivität: Standardisierte Instruktionen & Testsituation Problem: Abweichungen durch ungeschulte Testleiter, Kinder, ältere/klinische Personen 🔹 Auswertungsobjektivität: Exakte Auswertungsregeln im Manual Hilfsmittel: Schablonen, computergestützte Verfahren Problem: Schlechte Dokumentation, Übertragungsfehler 🔹 Interpretationsobjektivität: Verschiedene Diagnostiker kommen zur gleichen Schlussfolgerung Voraussetzung: klare Normtabellen, Interpretationshilfen Problem: uneinheitliche Cut-Offs, vage Anleitungen

Question 36

Was versteht man unter der Reliabilität von Messverfahren? Welche Facetten gibt es?

Answer 36

🟩 Definition: Ein Test ist reliabel, wenn er ein Merkmal zuverlässig misst (Messgenauigkeit) Formel: X = T + E (Testwert = wahrer Wert + Fehler) 🔸 Paralleltest-Reliabilität: Zwei parallele Versionen → Korrelation der Ergebnisse Vorteil: unabhängig von Erinnerungseffekten 🔸 Retest-Reliabilität: Gleicher Test, gleiche Personen, zwei Zeitpunkte Korrelation = Maß für Stabilität Problem: beeinflusst durch Zeitintervall & Merkmalsstabilität 🔸 Split-Half-Reliabilität: Test wird halbiert, Korrelation der Hälften Schätzung durch Spearman-Brown-Korrektur 🔸 Interne Konsistenz: Korrelation aller Items untereinander Maß: Cronbachs Alpha Problem: stichprobenabhängig, hohe Alpha bei vielen Items, redundante Inhalte 🔸 McDonald’s Omega: Alternativmaß, berücksichtigt unterschiedliche Itemgewichte Genaue Schätzung bei ungleich starken Items

Question 37

Welche Faktoren beeinflussen Cronbachs Alpha?

Answer 37

📌 Einflussfaktoren: Anzahl der Items (mehr Items = höheres Alpha) Höhe der Item-Interkorrelationen Homogenität der Stichprobe (heterogene SP → höheres Alpha) Unidimensionalität muss gegeben sein Achtung bei zu hohem Alpha bei kurzen Tests → oft Redundanz 📎 Interpretation: Alpha < .70: inakzeptabel Alpha ≥ .70: akzeptabel Alpha ≥ .80: gut Alpha ≥ .90: sehr gut In der Praxis sollte α > .85 angestrebt werden

Question 38

Was versteht man unter Itemschwierigkeit und Trennschärfe?

Answer 38

🟨 Itemschwierigkeit (p): Anteil der Personen, die Item „richtig“ gelöst haben Wert zwischen 0 – 100 % Bei Leistungstests: je höher, desto leichter Ziel: Items sollen differenzieren, nicht von allen gleich beantwortet werden 🟧 Trennschärfe (rit): Korrelation eines Items mit dem Gesamttest (ohne das Item selbst) Gibt an, wie gut das Item das gleiche misst wie der Gesamttest Werte ab .30 akzeptabel, ab .50 gut Wichtig für Itemselektion & Testkonstruktion