CONFIABILIDAD Flashcards
(20 cards)
¿En qué consiste el método de Formas Paralelas o Alternativas con intervalo de tiempo, cuál es la Varianza de Error y cómo se llama su coeficiente?
- Consiste en aplicar una prueba que tiene dos formas equivalentes A y B en dos ocasiones, primero la Forma A y después de una semana la Forma B
- La varianza de error es la diferencia entre los ítems y el tiempo
- Su coeficiente se llama de estabilidad y de equivalencia.
¿Qué es la fórmula Kuder-Richardson, que es lo que evalúa y en qué tipos de ítems se aplica?
- Es un método de confiabilidad que busca evaluar la homogeneidad del test o consistencia interna de los ítems
- Prueba la relación del ítem con el puntaje total, es decir cuanto contribuye cada pregunta en la consistencia interna
- Se utiliza en ítems de respuesta dicotómica.
¿En qué consiste el método de Formas Paralelas o Alternativas sin intervalo de tiempo, cuál es la Varianza de Error y cómo se llama su coeficiente?
- Consiste en aplicar una prueba que tiene dos formas equivalentes A y B en una sola ocasión, primero la Forma A e inmediatamente después la Forma B
- La varianza de error es diferencia entre los ítems, la falta de motivación y el cansancio despendiendo de la cantidad de preguntas
- El coeficiente se llama de equivalencia.
¿En la Confiabilidad qué significa la Varianza Total? Da un ejemplo
Es el puntaje que alcanza una persona cuando responde una prueba o un test, también se le conoce como puntuación observada, puntuación empírica o puntaje bruto.
EJEMPLO: le aplico el test “X”, califico las respuestas y la suma total de los puntos alcanzados representa la Varianza Total.
¿Qué es el Alfa de Cronbach y en qué casos se aplica?
Es un método de confiabilidad que se aplica en una sola ocasión, mide la consistencia interna y nos brinda el Índice de Homogeneidad Corregida (conocido como IHC) donde cada ítem debe tener un índice mínimo de .20. Se aplica en pruebas unidimensionales y respuestas en escala Likert de 5 o más alternativas.
¿En qué consiste el Retest, cuál es su varianza de error y cómo se llama su coeficiente?
- Es un método donde se aplica dos veces el mismo test al mismo grupo de personas, pero debe pasar un tiempo entre la primera vez y la segunda vez, por ejemplo de una semana.
- La varianza de error es el tiempo
- El coeficiente de confiabilidad se llama de estabilidad.
¿En qué consiste el método Mitades y cuál es la varianza de error?
- Es un método que se aplica en una sola ocasión a las personas. Las mitades se puede obtener de tres maneras: al azar, por la mitad exacta e impares-pares. Mide el grado de consistencia interna de los ítems
- Su varianza de error es el muestreo del contenido, es decir el contenido de los ítems
¿Cuál es la diferencia entre la Fórmula Kuder-Richardson 20 y 21 y cuál es su varianza de error?
- La fórmula Kuder Richardson 20 se aplica cuando el contenido de los ítems es de diferente dificultad, por ejemplo en las pruebas cognitivas cuyas preguntas de menor a mayor dificultad, mientras que el Kuder-Richardson 21 se aplica cuando el contenido de los ítems tiene la misma dificultad, por ejemplo en los ítems de un test de personalidad.
- Varianza de error: Muestreo de Contenido
¿En la confiabilidad qué significa la Varianza Verdadera? Da un Ejemplo
Es la máxima puntuación que puede alcanzar una persona en un test. Por ejemplo, si le aplico el test X y no tiene ningún error o marca sus respuestas con el máximo puntaje de cada ítem, obtendrá la máxima puntuación en la prueba, esa es la varianza verdadera.
¿En qué casos es inapropiado aplicar el alfa de Cronbach?
Son inapropiadas para medir la confiabilidad de pruebas heterogéneas porque el alfa no es aplicable a tests multidimensionales, en tests proyectivas porque al depender del criterio del evaluador le corresponde el método de calificadores, y en pruebas de velocidad porque hace énfasis en el tiempo y no el en contenido de los ítems.
¿Cuál es el método de confiabilidad que se debe aplicar en el caso de pruebas de velocidad y por qué?
Se debe aplicar el método retest, porque es una manera efectiva de medir la consistencia temporal de los resultados. Esto significa verificar si una prueba produce resultados similares cuando se administra en dos momentos diferentes a las mismas personas, bajo condiciones similares como en este caso, el mismo tiempo que indica la prueba
¿Qué es el Alfa Ordinal?
Es una variante del Alfa de Cronbach que se utiliza para ítems con respuestas ordinales, como los obtenidos en escalas de Likert desde dos alternativas hasta nueve y pruebas multidimensionales. Mide la consistencia interna. Supera al Alfa de Cronbach porque trabaja con datos que no son continuos (nominales y ordinales) pero subestima la verdadera confiabilidad de una escala cuando los ítems son multidimensionales.
¿En qué consiste el Theta Ordinal o Theta de Armor?
Es una medida de confiabilidad menos conocida que se basa en el primer componente principal del Análisis de Componentes Principales (ACP). Mide la consistencia interna. Se suele usar en contextos donde se busca un enfoque más robusto que el Alfa. Brinda una estimación más precisa de la confiabilidad cuando los ítems comparten una estructura común fuerte, y se aplica a escalas unidimensionales y multidimensionales.
¿En qué consiste el Omega o Rho de Jöreskog?
Es una medida de confiabilidad basada en el análisis factorial. Representa la proporción de la varianza total que es atribuible a factores comunes. Mide la consistencia interna. Se considera una medida más precisa de la confiabilidad que el Alfa de Cronbach, especialmente cuando los ítems no son estrictamente unidimensionales. El Omega toma en cuenta tanto la varianza común como la específica y el error. Requiere un análisis más complejo.
¿En qué consiste el método de confiabilidad entre evaluadores y cuáles son los estadísticos que se emplean?
Es el grado de acuerdo o consistencia que existe entre dos o más evaluadores (jueces o calificadores) cuando califican las respuestas de los ítems. Los estadísticos que más se emplean son el Coeficiente de Kappa de Cohen, el Coeficiente de correlación intraclase (ICC), el coeficiente de concordancia de Kendall y el Coeficiente de Armonía de Interjueces (Rwg).
¿Dime cuál es el concepto de confiabilidad?
La confiabilidad es el grado de consistencia o concordancia de las puntuaciones alcanzadas por las mismas personas cuando se les examina en diferentes ocasiones con el mismo test, formas paralelas o en otras condiciones de examen. Se expresa en una correlación que es el índice que indica la calidad del test.
¿Por qué se dice que la confiabilidad se ocupa de los errores asistemáticos?
Porque considera los errores que no se pueden controlar, son impredecibles o aleatorios aun cuando los tests sean estandarizados. Estos errores pueden aparecer en el proceso de construcción de un test, en la administración y en la interpretación de los resultados.
¿Qué es el Error Estándar de Medida o Error Típico de Medida y qué relación tiene con los Intervalos de Confianza?
El Error Estándar Medida es un índice que mide la variación que producen los factores que afectan la confiabilidad de los puntajes que nos ayuda a estimar un rango donde es probable que exista la puntuación verdadera con un nivel de confianza al 68%. 95% o 97%. Ese índice se suma y se resta del puntaje obtenido, el resultado es un rango o banda al que se le llama Intervalos de Confianza.
Dime cuatro factores que afectan la confiabilidad.
- Reactivos diferentes en contenido.
- Preguntas con distintos índices de dificultad mal distribuidos en las pruebas equivalentes.
- Cuando en una sola prueba los ítems en su mayoría no miden un rasgo puro.
- Ítems muy difíciles que hacen que la persona tenga que adivinar.
- Ambigüedad en la redacción de reactivos e instrucciones que pueden originar respuestas inestables.
- Límites de tiempo restrictivo que fomentan el apresuramiento en la lectura y en la respuesta.
- Longitud de la prueba
- Errores al marcar las respuestas.
- Interrupciones inesperadas y otras situaciones que pueden producir distracciones.
- Errores en el registro de tiempo y calificación.
- Ambiente de la prueba: temperatura, iluminación, ventilación y ruido.
- La subjetividad en la calificación de ciertas pruebas.
- Entrenamiento específico, ansiedad, estar enfermo, fallas de atención o el efecto de fármacos entre otros.
A parte de los métodos que miden la consistencia interna, explica dos métodos de confiabilidad que podrías aplicar en la prueba de Semejanzas de Wais IV.
Se puede aplicar el retest porque puedo aplicar dos veces la misma prueba a las mismas personas pero dejando pasar una semana, y espero que la correlación de los puntajes sea alta; y el otro método puede ser la confiabilidad entre evaluadores para verificar si el puntaje es el mismo para cada persona, lo que le daría la consistencia a la calificación.
