confiabilidad Flashcards
(20 cards)
¿En qué consiste el método de Formas Paralelas o Alternativas
con intervalo de tiempo, cuál es la Varianza de Error y cómo se
llama su coeficiente?
Consiste en aplicar una prueba
que tiene dos formas equivalentes A y B en dos ocasiones,
primero la Forma A y después de una semana la Forma B, la
varianza de error es la diferencia entre los ítems y el tiempo, y
su coeficiente se llama de estabilidad y de equivalencia
¿Qué es la fórmula Kuder-Richardson, qué es lo que evalúa y en
qué tipos de ítems se aplica?
Es un método de
confiabilidad que busca evaluar la homogeneidad del test o
consistencia interna de los ítems, prueba la relación del ítem con
el puntaje total, es decir cuanto contribuye cada pregunta en la
consistencia interna y se utiliza en ítems de respuesta
dicotómica
¿En qué consiste el método de Formas Paralelas o Alternativas
sin intervalo de tiempo, cuál es la Varianza de Error y cómo se
llama su coeficiente?
Consiste en aplicar una prueba
que tiene dos formas equivalentes A y B en una sola ocasión,
primero la Forma A e inmediatamente después la Forma B, la
varianza de error es diferencia entre los ítems, la falta de
motivación y el cansancio despendiendo de la cantidad de
preguntas y el coeficiente se llama de equivalencia
¿En la Confiabilidad qué significa la Varianza Total? Da un
ejemplo
Es el puntaje que alcanza una persona
cuando responde una prueba o un test, también se le conoce
como puntuación observada, puntuación empírica o puntaje
bruto. Por ejemplo, le aplico el test “X”, califico las respuestas y
la suma total de los puntos alcanzados representa la Varianza
Total
¿Qué es el Alfa de Cronbach y en qué casos se aplica?
es un método de confiabilidad que se aplica en una
sola ocasión, mide la consistencia interna y nos brinda el Índice
de Homogeneidad Corregida (conocido como IHC) donde cada
ítem debe tener un índice mínimo de .20. Se aplica en pruebas unidimensionales y respuestas en escala Likert de 5 o más
alternativas
¿En qué consiste el Retest, cuál es su varianza de error y cómo
se llama su coeficiente?
Es un método donde se
aplica dos veces el mismo test al mismo grupo de personas,
pero debe pasar un tiempo entre la primera vez y la segunda
vez, por ejemplo de una semana. La varianza de error es el
tiempo y el coeficiente de confiabilidad se llama de estabilidad
¿En qué consiste el método Mitades y cuál es la varianza de
error?
Es un método que se aplica en una sola
ocasión a las personas. Las mitades se puede obtener de tres
maneras: al azar, por la mitad exacta e impares-pares. Mide el
grado de consistencia interna de los ítems y su varianza de error
es el muestreo del contenido, es decir el contenido de los ítems
¿Cuál es la diferencia entre la Fórmula Kuder-Richardson 20 y
21 y cuál es su varianza de error?
La fórmula Kuder
Richardson 20 se aplica cuando el contenido de los ítems es de
diferente dificultad, por ejemplo en las pruebas cognitivas cuyas
preguntas de menor a mayor dificultad, mientras que el Kuder-
Richardson 21 se aplica cuando el contenido de los ítems tiene
la misma dificultad, por ejemplo en los ítems de un test de
personalidad
¿En la confiabilidad qué significa la Varianza Verdadera? Da un
Ejemplo
Es la máxima puntuación que puede
alcanzar una persona en un test. Por ejemplo, si le aplico el test
X y no tiene ningún error o marca sus respuestas con el máximo
puntaje de cada ítem, obtendrá la máxima puntuación en la
prueba, esa es la varianza verdadera
¿En qué casos es inapropiado aplicar el alfa de Cronbach?
Son inapropiadas para medir la confiabilidad de
pruebas heterogéneas porque el alfa no es aplicable a tests
multidimensionales, en tests proyectivas porque al depender del
criterio del evaluador le corresponde el método de calificadores,
y en pruebas de velocidad porque hace énfasis en el tiempo y no
el en contenido de los ítems
¿Cuál es el método de confiabilidad que se debe aplicar en el
caso de pruebas de velocidad y por qué?
Se debe
aplicar el método retest, porque es una manera efectiva de
medir la consistencia temporal de los resultados. Esto significa
verificar si una prueba produce resultados similares cuando se
administra en dos momentos diferentes a las mismas personas,
bajo condiciones similares como en este caso, el mismo tiempo
que indica la prueba
¿Qué es el Alfa Ordinal?
Es una variante del Alfa de
Cronbach que se utiliza para ítems con respuestas ordinales,
como los obtenidos en escalas de Likert desde dos alternativas
hasta nueve y pruebas multidimensionales. Mide la consistencia
interna. Supera al Alfa de Cronbach porque trabaja con datos
que no son continuos (nominales y ordinales) pero subestima la
verdadera confiabilidad de una escala cuando los ítems son
multidimensionales
¿En qué consiste el Theta Ordinal o Theta de Armor?
Mide la consistencia interna.
Se suele usar en contextos donde se busca un enfoque más
robusto que el Alfa. Brinda una estimación más precisa de la
confiabilidad cuando los ítems comparten una estructura común
fuerte, y se aplica a escalas unidimensionales y multidimensionales
¿En qué consiste el Omega o Rho de Jöreskog?
Es una medida de confiabilidad basada en el análisis factorial.
Representa la proporción de la varianza total que es atribuible a
factores comunes. Mide la consistencia interna. Se considera
una medida más precisa de la confiabilidad que el Alfa de
Cronbach, especialmente cuando los ítems no son estrictamente
unidimensionales. El Omega toma en cuenta tanto la varianza común como la específica y el error. Requiere un análisis más complejo
¿En qué consiste el método de confiabilidad entre evaluadores y
cuáles son los estadísticos que se emplean?
Es el grado de acuerdo o consistencia que existe entre dos o más evaluadores cuando califican las respuestas de los ítems. Los estadísticos que más se emplean
son el Coeficiente de Kappa de Cohen, el Coeficiente de
correlación intraclase (ICC), el coeficiente de concordancia de
Kendall y el Coeficiente de Armonía de Interjueces (Rwg)
¿Cuál es el concepto de confiabilidad?
La confiabilidad es el grado de consistencia o concordancia de las puntuaciones alcanzadas por las mismas personas cuando se les examina en diferentes ocasiones con el mismo test, formas paralelas o en otras condiciones de examen.
Se expresa en una correlación que es el índice que indica la
calidad del test
¿Por qué se dice que la confiabilidad se ocupa de los errores
asistemáticos?
Porque considera los errores que no
se pueden controlar, son impredecibles o aleatorios aun cuando los tests sean estandarizados. Estos errores pueden aparecer en el proceso de construcción de un test, en la administración y en la interpretación de los resultados
Dime cuatro factores que afectan la confiabilidad
Reactivos diferentes en contenido.
Preguntas con distintos índices de dificultad mal distribuidos en las pruebas equivalentes
Cuando en una sola prueba los ítems en su mayoría no
miden un rasgo puro
Ítems muy difíciles que hacen que la persona tenga que adivinar
Ambigüedad en la redacción de reactivos e instrucciones que
pueden originar respuestas inestables
Límites de tiempo restrictivo que fomentan el apresuramiento
en la lectura y en la respuesta
Longitud de la prueba
Errores al marcar las respuestas
Interrupciones inesperadas y otras situaciones que pueden
producir distracciones.
Errores en el registro de tiempo y calificación.
Ambiente de la prueba: temperatura, iluminación, ventilación
y ruido
La subjetividad en la calificación de ciertas pruebas
Entrenamiento específico, ansiedad, estar enfermo, fallas de
atención o el efecto de fármacos entre otros
¿Qué es el Error Estándar de Medida o Error Típico de Medida
y qué relación tiene con los Intervalos de Confianza?
El Error Estándar Medida es un índice que mide la variación que producen los factores que afectan la confiabilidad de los puntajes que nos ayuda a estimar un rango donde es
probable que exista la puntuación verdadera con un nivel de confianza al 68%. 95% o 97%. Ese índice se suma y se resta del puntaje obtenido, el resultado es un rango o banda al que se le llama Intervalos de Confianza
A parte de los métodos que miden la consistencia interna, explica dos métodos de confiabilidad que podrías aplicar en la prueba de Semejanzas de Wais IV
Se puede aplicar el retest porque puedo aplicar dos veces la misma
prueba a las mismas personas pero dejando pasar una semana, y espero que la correlación de los puntajes sea alta; y el otro método puede ser la confiabilidad entre evaluadores
para verificar si el puntaje es el mismo para cada persona, lo
que le daría la consistencia a la calificación
