Validade

Question 1

O que é a validade?

Answer 1

Permite determinar se um teste mede realmente aquilo que se afirma medir

Question 2

Quais são os 2 tipos principais de validade?

Answer 2

• validade de medição
• validade de decisão

Question 3

O que é a validade de medição?

Answer 3

Refere-se à precisão com que um teste reflete o construto que foi concebido para medir, garantindo que o seu conteúdo e estrutura estão alinhados com as expectativas teóricas.

Question 4

O que é a validade de decisão?

Answer 4

Diz respeito à utilização prática dos resultados do teste, avaliando até que ponto estes apoiam decisões como recrutamento, colocação ou diagnóstico.

Question 5

Quais são os tipos de validade de medição?

Answer 5

• validade facial
• validade de conteúdo
• validade relacionada com o critério
• validade de construto

Question 6

O que é a validade facial?

Answer 6

Reflete a forma como as pessoas percebem a capacidade do teste para medir aquilo que se propõe avaliar.
Não tem rigor científico.

Question 7

O que é a validade de conteúdo?

Answer 7

Determina se os itens do teste representam adequadamente o construto pretendido

Question 8

O que é a validade de critério?

Answer 8

• validade preditiva: avalia até que ponto o teste consegue prever resultados futuros
• validade concorrente: examina a sua correlação com medidas simultâneas

Question 9

O que é a validade de construto?

Answer 9

Determina se o teste avalia de forma consistente o conceito teórico que se pretende medir

Question 10

Como evoluiu a terminologia relacionada com a validade?

Answer 10

O modelo tradicional que categorizava a validade em tipos distintos, foi substituído pela estrutura atual (2014), que se concentra em diversas formas de evidência que sustentam a validade de um teste.

Question 11

Uma forte validade de conteúdo envolve o quê?

Answer 11

• julgamento de peritos (os especialistas avaliam se cada item é relevante ou apropriado)
• mapeamento de conteúdo (associar os itens do teste às diferentes partes do domínio, assegurando uma cobertura completa)
• métodos estatísticos que ajudam a quantificar a validade de conteúdo

Question 12

Quais são os métodos estatísticos que ajudam a quantificar a validade de conteúdo?

Answer 12

• análise do índice de validade de conteúdo (avalia o grau de concordância dos especialistas quanto à relevância dos itens)
• kappa de cohen ou coeficientes de correlação intraclasse (utilizadas para avaliar a consistência com que os especialistas classificam os itens)

Question 13

O que se conclui acerca da validade de conteúdo?

Answer 13

É fundamental no desenvolvimento de testes psicológicos. A revisão por especialistas, a avaliação sistemática e a análise estatística são os principais procedimentos utilizados para garantir que os itens do teste refletem com precisão as características que se pretendem medir.

Question 14

O que é o índice de validade de conteúdo (CVI)?

Answer 14

É uma medida estatística utilizada para avaliar a validade de conteúdo de instrumentos de investigação, como questionários, escalas e testes psicométricos.
Baseia-se na avaliação de peritos, em que especialistas julgam a relevância e a representatividade dos itens do instrumento relativamente ao construto que se pretende medir.

Question 15

Quais são as duas formas de calcular o índice de validade de conteúdo (ICV)?

Answer 15

• índice de validade de conteúdo ao nível do item (I-CVI)
• índice de validade de conteúdo ao nível da escala (S-CVI)

Question 16

Como se calcula o índice de validade de conteúdo ao nível do item (I-CVI)?

Answer 16

Para cada item do instrumento, os especialistas avaliam a relevância do item (1=nada relevante, 2=pouco, 3=bastante, 4=muito relevante).

O I-CVI é obtido dividindo o número de especialistas que classificaram o item com 3 ou 4 pelo número total de especialistas.

I-CVI ≥ 0.78 é geralmente considerado aceitável quando há pelo menos 6 especialistas.

Question 17

Como se calcula o índice de validade de conteúdo ao nível da escala (S-CVI)?

Answer 17

Representa a validade de conteúdo global do instrumento e pode ser calculado de duas formas:
- S-CVI/UA (acordo universal): percentagem de itens que receberam uma pontuação de 3 ou 4 por todos os especialistas
- S-CVI/Ave (método da média). média dos valores de I-CVI para todos os itens

Question 18

Como se interpreta o CVI?

Answer 18

• I-CVI ≥ 0,78 é geralmente considerado aceitável quando participam pelo menos 6 especialistas
• S-CVI ≥ 0,90 (usando o método da média) é frequentemente utilizado como critério de validade aceitável para o instrumento

Question 19

Qual a aplicação do CVI na psicométrica?

Answer 19

O CVI é amplamente utilizado para verificar se os itens de um instrumento medem adequadamente aquilo que se propõe medir, garantindo que os seus itens são representativos e compreensíveis para os respondentes.

Question 20

Que tipos de validade de critério existem?

Answer 20

• validade preditiva
• validade concorrente

Question 21

O que é a validade preditiva?

Answer 21

Refere-se à capacidade de um teste para prever com precisão comportamentos, desempenhos ou resultados futuros com base nas pontuações obtidas.

Question 22

Como é que os investigadores estabelecem a validade preditiva?

Answer 22

Os investigadores administram o teste num ponto inicial e medem a variável critério após um intervalo adequado.

Question 23

O que é a validade preditiva de curto-prazo? E o seu lado negativo?

Answer 23

Aplica-se quando os resultados ocorrem dentro de um período curto, como a previsão do desempenho dos alunos no semestre seguinte.

Se o intervalo for demasiado curto, a relação preditiva pode não capturar padrões de longo prazo.

Question 24

O que é a validade preditiva de longo-prazo? E o seu lado negativo?

Answer 24

Usada quando os resultados podem demorar anos a manifestar-se, como a previsão de sucesso profissional com base em avaliações cognitivas precoces.

Se o intervalo for demasiado longo, fatores externos (como desenvolvimento pessoal e mudanças ambientais) podem enfraquecer a força da previsão.

Question 25

Como deve ser o critério escolhido para avaliar a validade preditiva?

Answer 25

Deve ser simultaneamente confiável e representar o construto previsto.

Question 26

Quais são os problemas que podem surgir da escolha do critério na validade de critério?

Answer 26

- deficiência do critério: o critério não captura completamente o construto - contaminação do critério: influenciada por fatores irrelevantes para o construto, levando a estimativas de validade distorcidas

Question 27

Quais são as implicações éticas da validade preditiva?

Answer 27

Se um teste favorecer ou prejudicar sistematicamente certos grupos demográficos devido a viés cultural ou disparidades socioeconómicas, isso pode levar a desigualdades em admissões universitárias, recrutamento pessoal ou avaliações clínicas.

Question 28

Como é que se garantir que as implicações éticas da validade preditiva são cumpridas?

Answer 28

Os investigadores devem avaliar potenciais vieses usando métodos como a análise de funcionamento diferencial dos itens (DIF) e manter monitorização contínua para garantir que os modelos preditivos não reforcem desigualdades preditivas.

Question 29

O que se diz acerca da validade de critério e a validade geral?

Answer 29

A validade de critério contribui para as evidências de validade, mas não abrange, por si só, tudo o que deve ser analisado para estabelecer a validade de um teste.

Question 30

Faz uma conclusão acerca da validade de critério

Answer 30

É fundamental na avaliação psicológica e educacional, fornecendo evidências de que um teste é significativo e aplicável em contextos do mundo real. - validade preditiva: garante que as pontuações dos testes possam prever o desempenho futuro - validade concorrente: verifica a precisão do teste em relação a uma medida já estabelecida

Question 31

Quais são os métodos estatísticos para avaliar a validade preditiva?

Answer 31

- coeficientes de correlação - análise de regressão - validação cruzada

Question 32

Para que servem os coeficientes de correlação ao avaliar a validade preditiva?

Answer 32

Para medir a força da relação entre as pontuações do teste e o critério

Question 33

Para que serve a análise de regressão ao avaliar a validade preditiva?

Answer 33

Para avaliar o quão bem as pontuações do teste predizem resultados enquanto se controla outras variáveis

Question 34

Para que servem a validação cruzada ao avaliar a validade preditiva?

Answer 34

Envolve avaliar a validade preditiva numa amostra diferente fundamental para garantir que os resultados podem ser generalizados

Question 35

O que é a validade de concorrente?

Answer 35

Procura determinar se um teste apresenta uma forte correlação com uma medida estabelecida do mesmo construto quando ambos são administrados simultaneamente.

Question 36

Qual a relevância da validade concorrente?

Answer 36

É especialmente valiosa quando uma validação imediata é necessária. O teste e o critério são avaliados simultaneamente, tornando este método mais rápido e prático para uma validação imediata.

Question 37

Como deve ser o critério externo para a validade concorrente?

Answer 37

Deve ser uma medida bem validada que represente com precisão o construto validado.

Question 38

Que limitações podem estar associadas à seleção do critério externo na validade concorrente?

Answer 38

Mesmo medidas estabelecidas podem ter limitações, como normas desatualizadas ou viéses culturais, que podem influenciar os resultados.

Question 39

Quais são 3 aspetos essenciais a ter em conta na validade concorrente?

Answer 39

- redundância - possibilidade de generalizar os resultados - viés sistemático

Question 40

Porque é importante ter em conta a redundância na validade concorrente?

Answer 40

A validade concorrente deve ser demonstrada para reduzir a redundância, determinando se o novo teste captura dimensões adicionais ou melhora a precisão da medição. Se um novo teste de inteligência mostra uma correlação quase perfeita com uma versão mais antiga, isso não proporciona maior eficiência cultural ou poder preditivo.

Question 41

Porque é importante ter em conta a possibilidade de generalizar os resultados na validade concorrente?

Answer 41

Esta possibilidade deve estar presente, ou seja, é necessário verificar a consistência dos resultados em diferentes amostras na validação do teste.

Question 42

Porque é importante ter em conta o viés sistemático na validade concorrente?

Answer 42

É essencial que os desenvolvedores assegurem que o teste e a medida do critério estejam livre de viés sistemático.

Question 43

Porque é que os estudos longitudinais são fundamentais para a validade preditiva?

Answer 43

- permitem que os investigadores examinem a estabilidade da relação preditiva ao longo do tempo - designs longitudinais permitem controlar as variáveis externas que podem distorcer as estimativas de validade - esses estudos permitem comparações ao longo de diferentes intervalos de tempo (curto e longo prazo)

Question 44

Quais são algumas das aplicações práticas dos estudos longitudinais (validade preditiva)?

Answer 44

- educação - psicologia clínica - psicologia organizacional - neuropsicologia e saúde

Question 45

Quais são os desafios dos estudos longitudunais?

Answer 45

- exigência de tempo e financeiras (recursos, manter o envolvimento dos participantes, viés de attrition) - influência de variáveis externas (mudanças sociais, económicas, educacionais,....) - viés de medição (pode ocorrer se a forma como o critério é avaliado mudar ao longo do tempo)

Question 46

Quais são os métodos estatísticos nos estudos longitudinais?

Answer 46

- correlação longitudinal - modelos de regressão linear e múltipla - modelagem de equações estruturais - análise de sobrevivência - modelos de crescimento latente Ao integrar esses métodos estatísticos, os estudos longitudinais oferecem evidências mais robustas para a validade preditiva, apesar dos desafios metodológicos e práticos envolvidos.

Question 47

Em que consiste a correlação longitudinal nos estudos longitudinais (validade preditiva)?

Answer 47

Mede a força da relação entre as pontuações dos testes e os resultados posteriores. Por exemplo, um teste de QI administrado aos 10 anos pode correlacionar fortemente (r=0.60) com o desempenho académico aos 15 anos. No entanto, aos 25 anos, essa correlação pode cair para 0,30, à medida que outras experiências de vida e influências externas entram em jogo.

Question 48

Em que consiste os modelos de regressão linear e múltipla nos estudos longitudinais (validade preditiva)?

Answer 48

São amplamente utilizados para avaliar se as pontuações dos testes preveem significativamente os resultados futuros. A regressão múltipla permite controlar variáveis de confusão, como status socioeconómico, experiências educacionais e fatores ambientais, garantindo que influências externas não confundam as relações observadas.

Question 49

Em que consiste a modelagem de equações estruturais nos estudos longitudinais (validade preditiva)?

Answer 49

É aplicada para análises mais complexas, a fim de examinar relações entre múltiplos preditores e critérios, incluindo efeitos mediadores e moderadores. Por exemplo, um teste de inteligência pode prever indiretamente o sucesso académico através da motivação, significando que a motivação é um mediador na relação entre inteligência e desempenho escolar

Question 50

Em que consiste a análise de sobrevivência nos estudos longitudinais (validade preditiva)?

Answer 50

Fundamental em pesquisas longitudinais quando se tenta prever o tempo até que um evento ocorra, como abandono escolar, progressão na carreira ou início de doença. Os modelos de sobrevivência fornecem informações sobre fatores de risco e influência protetores, estimando a probabilidade de um evento ocorrer em diferentes momentos.

Question 51

Em que consistem os modelos de crescimento latente (LGM) nos estudos longitudinais (validade preditiva)?

Answer 51

Examinam trajetórias de desenvolvimento ao longo do tempo. Esses modelos avaliam como uma variável muda ao longo das fases e se as pontuações iniciais do teste influenciam essa trajetória. Por exemplo, um teste de habilidades sociais na infância pode prever se um indivíduo segue uma trajetória social estável, em melhoria ou em declínio durante a adolescência.