Aula 3 Flashcards
Como construir uma escala/questionário?
- Determinar claramente o que se pretende medir
- Elaborar itens que devem ser insiridos no instrumento: escolher itens que refletem o objetivo do instrumento; elaborar muitos mais itens do que se pretende na escala final; elaborar boms itens.
- Determinar o formato da medida: Escalas de likert; guttman, thurstone, diferencial semântico, Eva
- Revisão dos itens candidatos por especialistas (fase importante para assegurar validade de conteúdo)
O que é validade?
Segundo Moreira, é um elemento chave da teoria psicometrica, uma vez que avalia a questão de o investigador pu o instrumento estar a medir aquilo que se pretende medir.
Um instrumento é válido quando mede aquilo que é suposto medir e se não existirem erros na interpretação dos resultados ou lógica na elaboração das conclusões
Quais os tipos de validade existentes?
- Validade de conteúdo
- Validade de construto
- Validade de critério
Validade de conteúdo
Avalia se os itens de uma escala ou teste, são representativos do construto que está a ser medido. Ou seja se representam bem todas as facetas importantes do que está a ser medido
É um passo essencial no desen de novas medidas porque representa o início de mecanismos para associar conceitos abstratos a indicadores observaveis e mensuráveis
É um processo subjectivo
Quais as medidas para avaliar a validade de conteúdo?
- Percentagem de concordância
- IVC
- RVC
- Kappa de Cohen
Esses métodos servem para quantificar o grau de concordância entre os especialistas durante o processo de avaliação da v de cont.
E porquê é importante?
Para obter mais certeza sobre os dados observados.
E quais os requisitos?
Presença de dois ou mais avaliadores que observem o mesmo facto.
Percentagem de concordância
- Percentagem de concordância: método para calcular a percentagem de concordância entre os avaliadores. Medida mais simples
Vantagens:
Fornecem info úteis que são facilmente calculadas
Apresentam limitações que restringem a sua utilização
Deve se considerar um nível de concordância de 90% entre os avaliadores
IVC- Índice de validade de conteúdo
Mede a proporção pu percentagem de avaliadores que estão em concordância sobre determinados aspectos do instrumento ou dos itens .
Permite inicialmente analisar cada item individualmente e depois o instrumento no seu todo
Aplica uma escala tipo likert com pontuação de 1(não representativo) à 4 (representativo)
Avaliação dos itens
O índice é calculado pela soma da concordância dos itens que foram marcados por 3 e 4
Itens marcados com 1 e 2 devem ser revistos ou eliminados
Concordância mínima de 0.80
Avaliação do instrumento como um todo.
Pode ser feita por :
Média das proporções dos itens considerados relevantes pelos avaliadores.
Média dos valores dos itena calculados separadamente
Dividir o número total de itens respresentativos pelo número total de itens
RVC- Razão da validade de conteúdo
O instrumento é submetido a um painel de avaliadores que devem indicar se:
O item é essencial ao teste
Útil, mas não essencial
Não necessário
Se for indicado que o item é essencial por mais de metade dos avaliadores então apresenta validade de conteúdo
Kappa de Cohen
É a proporção de vezes que dois juízes concordam com a proporção máxima de vezes que os dois juízes poderiam concordar.
Valores variam entre 0 (ausência de concordância) e 1 (total concordância)
O cálculo de Kappa necessita de 2 fontes de info:
1. Concordância observada
2. Concordância esperada (devido ao acaso)
Interpretação do Kappa:
< 0.00: Pobre concordância
0.00- 0.20: Fraca
0.21- 0.40: considerável
0.41- 0.60: Moderada
0.61 - 0.80: Substancial
0.81- 1: Quase perfeita
Valor mínimo: .70
Validade Facial ou aparente
Refere-se a 1 julgamento subjetivo que as pessoas fazem do instrumento. E tem por objectivo estabelecer a aceitabilidade da escala
É possível calcular tal como o IVC, se o item é suficientemente claro.
