validez Flashcards
(35 cards)
Cómo se llama el estadístico que se usa en la evidencia basada en el contenido de la prueba y cuál es el valor mínimo que debe tener cada ítem?
V de Aiken con mínimo valor de .80 para cada ítem
Qué dato necesito para saber en qué porcentaje mide la prueba lo que dice medir y cómo se llama el estadístico que lo arroja?
Se necesita saber la varianza total explicada y el estadístico es el análisis factorial
Un ejemplo de evidencia discriminante utilizando lo aprendido de WAIS IV
Hago mi prueba que mide comprensión verbal y busco otra prueba que mida razonamiento perceptivo para confirmar que mi prueba solo mide la comprensión verbal
De qué trata la evidencia predictiva y cuál es el estadístico que se interpreta
La evidencia predictiva muestra si las puntuaciones de un test pueden prever resultados futuros, usando el coeficiente de correlación
¿Cuántos jueces mínimo y máximo se requiere para validar un ítem y en qué fuente de evidencia de validez se aplica?
Como mínimo 5 y 10 como máximo y la fuente de validez es relacionada con el contenido de la prueba
¿De qué trata la evidencia discriminante y cuál es el estadístico que se interpreta?
Se debe evidenciar las relaciones entre los puntajes de la prueba y otras medidas supuestamente de constructos diferentes (no guarda relación desde el punto de vista teórico) y el estadístico es la correlación, pero no deben ser significativas
¿Cómo se llama el procedimiento que prueba la validez relacionada con el contenido? Explíquelo
Muestreo de preguntas, hay que desarrollar preguntas en base a una teoría, una vez realizada las preguntas se envían a juicio de expertos y una vez que mandan sus respuestas, se aplica el estadístico V de Aiken, y el resultado debe ser de 0.80 a más para que el ítem se quede y poder redactar la forma final del test
Un ejemplo de evidencia predictiva considerando la WAIS-IV
Un evaluado obtuvo un puntaje elevado en el Índice de Comprensión Verbal del WAIS-IV, lo que predijo que destaque en su empresa al liderar proyectos estratégicos con eficacia. Hago mi test de aptitud verbal y lo aplicó en alumnos de secundaria, les tomó la prueba la primera semana de marzo que es donde se inicia las clases y luego guardo los puntajes con los nombres de cada niño y me espero que terminen el grado, voy en diciembre y pido las notas de los niños de todos los cursos de letras (criterio externo). Si yo al aplicar mi prueba veo que algunos salen mal puedo decir que si no se hace algo con esos niños la van a pasar mal y lo se porque al aplicar mi prueba al inicio a los que le fue mal son los que tiene que ir a vacacional
¿Qué se quiere probar con la evidencia basada en el contenido de la prueba?
La relación o congruencia entre el contenido del test y el constructo que se intenta medir
¿Cómo se llaman los dos tipos de análisis factorial y la evidencia de validez que las usa?
Análisis factorial exploratorio y análisis factorial confirmatorio, ambos se usan para la evidencia basada en la estructura interna
¿De qué trata la evidencia concurrente y cuál es el estadístico que se interpreta?
Cuando se relaciona las puntuaciones del test con un criterio. Puede ser desde un experto, de un test que mida el mismo constructo o por grupos contrastados). Estos se miden simultáneamente o con poco tiempo de diferencia. El estadístico es la correlación
¿De qué trata la evidencia relacionada con el proceso de respuesta?
Analiza cómo las respuestas individuales reflejan la adecuación entre el constructo medido y el desempeño observado. Esto garantiza que las respuestas sean coherentes con lo que se pretende evaluar
Un ejemplo de evidencia concurrente considerando la WAIS-IV
Un centro educativo evalúa a estudiantes de secundaria con la WAIS-IV para obtener una medida de su capacidad cognitiva general. Al mismo tiempo, se recopilan sus calificaciones académicas del semestre
¿De qué trata la evidencia convergente y cuál es el estadístico que se interpreta?
Es algo que se aproxima, se debe evidenciar las relaciones entre los puntajes de la prueba y otras medidas que evalúan similares constructos (guarda relación desde el punto de vista teórico) y el estadístico es la correlación (Pearson o Spearman) y debe ser altamente significativa
Cómo se llama el estadístico que prueba la evidencia basada en la estructura interna y dame su definición
Análisis factorial, que es un procedimiento matemático. Identifica factores en los que las personas pueden diferir. Analiza conjuntos de puntajes y las correlaciones entre ellos
¿Cómo se llaman los requisitos para realizar el análisis factorial exploratorio, y qué es lo que se espera como resultado en cada requisito para saber que se cumple cada uno?
a. Determinante de la matriz de correlaciones: el resultado debe ser bajo siendo cercano a 0 pero no 0
b. KMO (Kaiser-Meyer-Olkin): mientras mayor sea el valor las variables estarán más relacionadas entre sí, se recomienda que sea mayor o igual a .80
c. test de Esfericidad de Bartlett: El valor que es un chi cuadrado, debe tener una probabilidad de significación mínimo de p ≤ .05
¿Qué se quiere probar con la evidencia basada en la estructura interna?
La consistencia entre la estructura del constructo y las relaciones entre los ítems y/o sub-escalas del test
Un ejemplo de evidencia convergente considerando la WAIS-IV
La prueba de Semejanza con Vocabulario, son similares ya que todas evalúan comprensión verbal, pero cada una mide capacidades diferentes
Dime cuatro factores que afectan la validez
- Construcción del instrumento (instrucciones vagas, oraciones difíciles, pruebas demasiados cortas, ítems con dificultad inapropiada, ordenamiento inadecuado de los ítems)
- Administración y calificación de la prueba (tiempo insuficiente, ayuda adicional, subjetividad)
- Respuestas de los participantes
- Naturaleza del grupo y del criterio
¿Cuál es la estructura de la WAIS-IV?
- Comprensión verbal, tiene 3 pruebas principales (semejanzas, vocabulario, información) y una opcional (comprensión)
- Razonamiento perceptivo, tiene 3 pruebas principales (cubos, matrices, puzles visuales) y dos opcionales (balanzas y figuras incompletas)
- Memoria de trabajo, tiene 2 pruebas principales (dígitos, aritmética) y una opcional (letras y números)
- Velocidad de procesamiento, tiene 2 pruebas principales (búsqueda de símbolos, clave de números) y 1 opcional (cancelación). Las pruebas opcionales de balanza, letras y números y cancelación solo se pueden tomar hasta los 69 años)
Si se elabora una prueba de rendimiento académico para universitarios, ¿en qué se basaría el autor para desarrollar las preguntas?
xx
¿En cuál evidencia de la validez se requiere de expertos para evaluar las preguntas y cuántos deben ser?
Evidencia basada en el contenido de la prueba y deben ser mínimo 5 y máximo 10
¿Cuál es la evidencia de validez que prueba la relación entre los puntajes del nuevo test de atención en un grupo de niños con TDAH con otro grupo sin TDAH?
Evidencia Concurrente
¿Cuál es la evidencia de validez que prueba la relación entre los puntajes de un test de aptitud numérica con las notas de un examen de aritmética que se obtienen después de nueve meses?
Evidencia predictiva
