Análise dos itens Flashcards
(26 cards)
Qual é o principal objetivo da análise de itens?
Melhorar a qualidade dos testes, garantindo que eles sejam ferramentas eficazes e precisas de avaliação.
Na Teoria Clássica dos Testes, quais são os três aspetos principais da análise de itens?
- análise de distratores
- dificuldade dos itens
- poder discriminativo do item
Identificar itens problemáticos envolve que tipos de itens?
- itens mal formulados
- itens com distratores problemáticos
- itens ambíguos
Em que consiste a análise de distratores?
É um passo essencial na avaliação de itens de teste, especialmente em questões de escolha múltipla. Ajuda a identificar se os distratores são plausíveis.
O que é um distrator?
É qualquer alternativa incorreta presente numa questão e a sua análise permite verificar a frequência com que cada um é escolhido pelos sujeitos.
Qual é o objetivo da análise de distratores?
Identificar se os distratores estão a funcionar como esperado, ou seja, se estão a atrair respostas de forma equilibrada entre aqueles que não sabem a resposta correta.
Qual é o impacto de distratores que atraem muitas respostas?
Podem indicar que a questão é demasiado difícil ou que há um problema na sua formulação
Qual é o impacto de distratores que quase não são escolhidos?
Podem tornar a questão demasiado fácil, pois os examinandos conseguem eliminar rapidamente as opções implausíveis
O que acontece se os distratores forem muito fáceis ou difíceis?
- os sujeitos encontram-se todos dos mesmo lado da curva e não conseguimos diferenciá-los
- se não conseguimos diferenciar os sujeitos, não obtemos uma distribuição normal
- se não temos uma distribuição normal, podemos ter problemas de validade
O que é que a análise das percentagens de escolha dos diferentes pontos de uma escala Likert permite compreender?
- tendências de resposta (identificar se há viés em direção a respostas extremas ou centrais)
- consistência e variabilidade (avaliar se os itens discriminam efetivamente diferenças entre os sujeitos ou se há tendência para respostas homogéneas)
- problemas com os itens (itens com uma concentração excessiva num ponto podem indicar uma formulação tendenciosa)
- padrões de bem-estar
O que é o índice de dificuldade?
Mede a dificuldade de um item, isto é, a proporção de indivíduos que respondem corretamente a uma questão
Como se calcula o índice de dificuldade?
O valor-p é calculado dividindo o número de pessoas que acertaram no item pelo número total de respondentes.
Como se interpreta o valor p (índice de dificuldade)?
- p próximo de 1: o item é muito fácil (maioria acertou)
- p próximo de 0: o item é muito difícil (a maioria errou)
- p em torno de 0.5: considerado ideal para maximizar a variabilidade das pontuações do teste
Qual é o impacto do índice de dificuldade na qualidade do teste?
Itens com valores extremos (0 ou 1) não contribuem para a discriminação entre indivíduos, pois todos acertam ou todos erram. Esses itens devem ser revistos ou removidos do teste.
O que acontece à curva quando os itens têm dificuldade moderada?
A distribuição dos resultados tende a seguir uma curva normal, maximizando a variabilidade de pontuações.
O que acontece à curva quando os itens são muito fáceis?
A distribuição dos dados apresenta uma assimetria negativa, quase todos os sujeitos acertam.
O que acontece à curva quando os itens são muito difíceis?
A distribuição dos dados apresenta uma assimetria positiva, quase todos os sujeitos erram.
O que é o poder discriminativo?
Avalia se cada item diferencia os indivíduos em função da característica que o teste, como um todo, pretende medir.
O PD verifica se os itens contribuem para medir o mesmo construto do teste total, ajudando a identificar os itens fracos ou irrelevantes que podem prejudicar a validade da avaliação
Nos testes de realização máxima, o que é que o poder discriminativo (PD) indica?
Indica se um item consegue separar indivíduos com alto e baixo desempenho no teste global.
Nos testes de autorrelato, o que é que o poder discriminativo (PD) indica?
Reflete a capacidade do item de captar diferenças individuais na variável avaliada.
O que é a correlação item-total?
Mede a relação entre o desempenho num item específico e a pontuação total do teste. Indica se o item contribui de forma consistente para medir o construto pretendido pelo teste.
Como se interpreta a correlação item-total?
- valores positivos e altos (acima de 0.30): o item está bem alinhado com o construto medido pelo teste
- valores próximos de zero ou negativos: o item pode não estar a contribuir para o teste ou pode estar a medir algo diferente
O que é a correlação corrigida item-total?
É uma versão mais precisa da correlação item-total, pois a pontuação do item em análise é removida da pontuação total do teste. Isso evita que a correlação seja inflacionada pela inclusão do próprio item no cálculo da pontuação total.
Como se interpreta a correlação corrigida item-total?
- valores positivos e altos (acime de 0.30): o item está consistentemente relacionado com o construto medido pelo teste
- valores próximos de zero ou negativos: o item pode não estar a contribuir adequadamente para o teste ou pode estar a medir algo diferente
