Fidelidade Flashcards

(49 cards)

1
Q

O que é a fidelidade de um teste psicológico?

A

A fidelidade pode ser entendida como o grau em que as diferenças observadas entre os indivíduos refletem diferenças reais na característica que se pretende medir, e não variações provocadas por fatores aleatórios ou ruído.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Segundo a Teoria Clássica dos Testes, qual o pressuposto e o que é a fidelidade?

A

A Teoria Clássica dos Testes (TT) propõe que qualquer pontuação obtida num teste é composta por dois elementos: uma parte verdadeira e uma parte de erro. Esta distinção ajuda a perceber em que medida um teste é fiável e o que pode interferir com os resultados.

Quanto maior for a proporção da variância observada atribuída a diferenças reais entre os indivíduos, maior será a fidelidade do teste.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Define fidelidade e a sua expressão

A

Proporção de variância total que corresponde à variância verdadeira.

X=T+E
X=pontuação observada
T=pontuação verdadeira
E=erro aleatório de medição

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Quais são as duas principais formas de fidelidade?

A
  • consistência interna
  • estabilidade temporal
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

O que é a consistência interna?

A

Diz respeito ao grau em que os itens de um teste avaliam o mesmo construto, sendo normalmente estimada através de coeficientes como o alfa de Cronbach ou ômega de McDonald.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

O que é a estabilidade temporal?

A

Refere-se à reprodutibilidade dos resultados ao longo do tempo, assumindo-se que o construto se mantém inalterado entre aplicações.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

O que se deve considerar na escolha do método de estimativa da fidelidade?

A
  • características do instrumento
  • o tipo de variável avaliada
  • os objetivos da investigação ou da prática profissional
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Quais são os 2 procedimentos para avaliar a consistência interna?

A
  • alfa de Cronbach
  • ômega de McDonald
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Quais os pressupostos de alfa de Cronbach e Ômega de McDonald?

A
  • alfa de Cronbach: assume contribuições iguais dos itens (modelo tau-equivalente)
  • ômega de McDonald: permite contribuições diferentes dos itens (modelo congenérico)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Quais as bases de cálculo do alfa de Cronbach e ômega de McDonald?

A
  • alfa de Cronbach: baseado nas covariâncias entre itens
  • ômega de McDonald: baseado nas cargas fatoriais de uma análise fatorial confirmatória
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Qual a sensibilidade à qualidade dos itens do alfa de Cronbach e ômega de McDonald?

A
  • alfa de Cronbach: sensível ao número de itens e à redundância entre eles
  • ômega de McDonald: mais robusto face a cargas fatoriais heterogéneas
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Qual a aplicação preferencial do alfa de Cronbach e ômega de McDonald?

A
  • alfa de Cronbach: escalas simples, unidimensionais e com itens semelhantes
  • ômega de McDonald: escalas multidimensionais ou com itens de cargas desiguais
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Qual a interpretação do alfa de Cronbach e ômega de McDonald?

A
  • alfa de Cronbach: estimativa da consistência interna
  • ômega de McDonald: estimativa mais precisa da consistência interna
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qual a limitação do alfa de Cronbach?

A

Pode sobrestimar ou subestimar a fidelidade se os pressupostos forem violados

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Qual a limitação do ômega de McDonald?

A

Requer análise fatorial e ajustamento adequado ao modelo

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Quais são os métodos estatísticos do alfa de cronbach?

A
  • correlação item-total
  • coeficiente α
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Quais são os métodos estatísticos do ômega de McDonald?

A
  • análise fatorial confirmatória
  • ω
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Quais são os valores recomendados para o alfa de cronbach e ômega de McDonald?

A

≥.70 (aceitável)
≥.80 (boa)
≥.90 (excelente)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Quais são os 2 métodos de avaliar a estabilidade temporal?

A
  • método teste-reteste
  • método das formas paralelas
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

O que é o método teste-reteste?

A
  • avalia a estabilidade temporal ao longo do tempo
  • a mesma versão do teste é aplicada em dois momentos
  • é necessária existir um intervalo entre aplicações
  • adequado para traços ou capacidades estáveis
21
Q

Qual a principal limitação do método teste-reteste?

A
  • pode ser influenciado por efeitos de repetição ou aprendizagem
22
Q

O que é o método das formas paralelas?

A
  • avaliar a consistência entre versões equivalentes do teste
  • duas formas equivalentes são aplicadas aos mesmos indivíduos
  • o intervalo entre aplicações é opcional: simultâneo ou com intervalo curto
  • reduz efeitos de memória e aprendizagem
  • adequado para situações em que a repetição pode provocar efeitos de prática
23
Q

Qual a principal limitação do método das formas paralelas?

A

Dificuldade em construir versões realmente equivalentes

24
Q

Qual dos métodos de avaliação da estabilidade temporal é mais adequado?

A

O método das formas paralelas é interessante concetualmente, mas é difícil de aplicar pois não conseguimos assegurar que os dois são equivalentes e, mesmo se for, se o teste é equivalente não vale a pena fazer.

O método teste-reteste é possível de aplicar e realizar.

25
Após a análise dos métodos teste-reteste e formas paralelas, é importante considerar o quê?
É importante considerar situação em que os resultados dependem da avaliação de diferentes observadores, isto é, a fidelidade entre avaliadores
26
O que é a fiabilidade entre avaliadores?
Refere-se ao grau de concordância entre diferentes observadores ou codificadores.
27
Quais são os dois métodos para avaliar a fidelidade entre avaliadores?
- coeficiente de correlação intraclasse (ICC) - Kappa de Cohen
28
Quais são as condições de utilização do coeficiente de correlação intraclasse (ICC)?
Avaliação por múltiplos avaliadores ou medidas repetidas
29
Quais são os valores recomendados do coeficiente de correlação intraclasse (ICC)?
<.50 (fraca) .50 - .75 (moderada) .75 - .90 (boa) >.90 (excelente)
30
Quais são as condições de utilização do Kappa de Cohen?
Dados categóricos avaliados por dois avaliadores
31
Quais são os valores recomendados do Kappa de Cohen?
<.20 (ligeira) .21 - .40 (razoável) .41 - .60 (moderada) .61 - .80 (substancial) .81 – 1.00 (quase perfeita)
32
Qual é a outra forma complementar e prática de compreender a fidelidade?
Erro Padrão de Medição
33
O que é o Erro Padrão de Medição?
Indica o grau de imprecisão associado a uma pontuação observada, ou seja, quantifica o quanto essa pontuação pode variar devido ao erro aleatório. Este é apresentado na mesma unidade da escala do teste, o que facilita a sua interpretação, sobretudo em contextos aplicados.
34
Qual a relação entre o Erro Padrão de Medição e a fidelidade?
Quanto mais fiável o teste, menor será o SEM
35
O que é a tau-equivalência?
Pressuposto do alfa de Cronbach. Parte da ideia de que todos os itens de um teste avaliam o mesmo construto com igual contributo para a pontuação total, ou seja, assumem-se cargas fatoriais iguais.
36
Porque é que o ômega de McDonald é mais robusto e informativo?
O ômega de McDonald baseia-se num modelo congénere, mais flexível, que permite que os itens tenham diferentes cargas fatoriais. Por isso, o ômega é geralmente considerado mais robusto e informativo como medida de consistência interna, especialmente quando há indícios de estrutura multidimensional ou desigualdade na qualidade dos itens.
37
Quais são as fontes de erro e implicações práticas?
- erro associado à cotação - erro relacionado com o conteúdo do teste - condições de aplicação do teste - condições de examinado
38
O que é o erro associado à cotação?
Quando estão envolvidos vários avaliadores ou quando as respostas exigem interpretação subjetiva (por exemplo, perguntas abertas ou escalas de avaliação comportamental), podem surgir discrepâncias na forma como as respostas são pontuadas. A existência de grelhas de cotação claras e a formação adequada dos avaliadores são fundamentais para minimizar este tipo de erro.
39
O que é o erro relacionado com o conteúdo do teste?
Pode ocorrer devido à seleção ou representatividade dos itens. Quando se utilizam amostras de itens diferentes (por exemplo, em formas paralelas) ou quando o teste é demasiado curto para abranger adequadamente o construto, a fiabilidade tende a ser baixa. Este aspeto é particularmente relevante em testes com cobertura limitada ou que avaliam domínios amplos.
40
Qual a fonte de erro associada às condições de aplicação do teste?
A variabilidade pode resultar de instruções inconsistentes, tempo de resposta desigual, distrações no ambiente ou da forma como as tarefas e exemplos são apresentados. A padronização das condições de aplicação ajuda a mitigar este tipo de erro.
41
Qual a fonte de erro associada às condições de examinado?
O estado físico ou emocional do respondente (por exemplo, fadiga, ansiedade ou motivação) pode afetar o seu desempenho num determinado momento. Embora estes fatores sejam difíceis de controlar, devem ser tidos em conta na interpretação dos resultados, sobretudo em contextos clínicos ou de elevada exigência.
42
Em que consiste a correção de Spearman-Brown?
Quando a fiabilidade é estimada através do método de metades partidas (split-half), o teste é dividido em duas partes e calcula-se a correlação entre ambas. No entanto, essa correlação reflete a habilidade de um teste com metade da extensão. Para estimar a fiabilidade do teste completo, aplica-se a fórmula de correção de Spearman-Brown.
43
Quais são as fontes de variabilidade nas pontuações em avaliação psicológica?
- características gerais e relativamente estáveis da pessoa - condições gerais mas temporárias da pessoa - características específicas e estáveis da pessoa - condições específicas e temporárias da pessoa - características do teste ou do seu conteúdo - efeitos de interação
44
O que são características gerais e relativamente estáveis da pessoa?
Incluem traços como inteligência, personalidade ou capacidade de leitura. Estas são as principais dimensões que os testes procuram avaliar e correspondem à variância verdadeira da pontuação.
45
O que são condições gerais mas temporárias da pessoa?
Estados transitórios como fadiga, doença, stress emocional ou distração. Embora não estejam relacionados com o construto avaliado, podem afetar o desempenho e contribuir para o erro de medição.
46
O que são características específicas e estáveis da pessoa?
Referem-se a fatores como o domínio de estratégias de resolução ou familiaridade com o formato do teste, que se mantêm ao longo do tempo, mas não fazem parte do construto-alvo.
47
O que são condições específicas e temporárias da pessoa?
Envolvem fatores momentâneos, como interpretar mal as instruções ou ler mal um item. São imprevisíveis e aumentam a variância do erro.
48
O que são características do teste ou do seu conteúdo?
Referem-se a propriedades dos itens, como o nível de dificuldade ou a ambiguidade, que podem afetar a consistência com que os itens medem o construto visado.
49
O que são os efeitos da interação?
Dizem respeito a interações especificas entre o teste e a pessoa – por exemplo, alguém com bom desempenho em tarefas verbais mas fraco em tarefas visuais, ainda que ambas se destinem a avaliar a mesma competência