Diapo 5 Flashcards

(66 cards)

1
Q

Qu’est-ce qu’on évalue avec la validité?

A

On évalue si l’instrument mesure vraiment ce qu’il prétend ou devrait mesure
ou plus précisément
Est-ce que ce test est une mesure valide de ce construit, pour cette population et pour cette application particulière

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Le _____ de validité détermine l’interprétation et les ___________ que l’on peut faire

A

degré
inférences

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Quels sont les 3 aspects d’une mesure ou d’un test lorsqu’on évalue la validité?

A
  1. Est-ce qu’il mesure bien le construit qu’il prétend mesurer?
  2. Est-ce qu’il mesure bien ce construit pour la population ciblée
  3. Est-ce qu’il mesure bien ce construit pour une application
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Quels sont les 3 points que soulignent les organisations professionnelles à propos de la validité?

A
  1. La validité concerne l’interprétation des scores procurés par un test pour un construit spécifique; ce n’est pas une caractéristique d’un test
  2. la validité est une question de degré; ce n’est pas une question absolue, de tout ou rien
  3. La validité d’un test repose sur de solides bases théoriques et empiriques
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quelles sont les 3 différentes sources de validité?

A

de contenu
de construit
de critère

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Quelles sont les sous-catégories de la validité de construit?(3)

A

factorielle
convergente
discriminante

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Quelles sont les sous-catégories de la validité de critère?

A

concomitante
prédictive
incrémentielle

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Vrai ou faux. La vraisemblance (validité d’apparence) est une forme ou une source de validité.

A

Faux, aucun des deux

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Qu’est-ce que la vraisemblance?

A

Le degré auquel une mesure semble adéquate et reliée à un construit selon le jugement des personnes qui sont évaluées avec le test et/ou les personnes qui utilisent le test

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Avec quelle type de validité la vraisemblance est souvent confondue?

A

La validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Nommez quelques facteurs qui peuvent influencer la vraisemblance

A

.format de présentation de l’instrument
.contexte d’évaluation
.capacités cognitives des répondants.es
.santé mentale et état psychologique des répondants.es
.personnalité des répondants.es
.motif de l’évaluation (désirabilité sociale)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

À quoi réfère la validité de contenu?

A

Au degré de représentativité des items utilisés pour mesurer un construit

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Vrai ou faux. La validité de contenu est souvent établie de façon déductive

A

Vrai

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Quelles sont les questions à se poser pour la validité de contenu?

A
  1. Chaque item individuellement correspond bien au construit?
  2. Tous les items d’une échelle considérés comme un groupe constituent un échantillon représentatif de tous les domaines du construit d’intérêt?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Vrai ou faux. Il est plutôt facile de faire un bon échantillonnage de contenu pour des construits psychologiques complexes

A

Faux, contraire

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Quel est l’élément centrale de la validité de contenu?

A

La représentativité
(ex : impulsivité cognitive, impulsivité émotionnelle, impulsivité comportementale, etc.)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Avant de construire une échelle, les auteurs.trices doivent toujours décrire en détails et de façon compréhensive les différents _______ et ___________ du construit d’intérêt

A

domaine
sous-domaine

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

À partir de quoi les cheucheurs.euses définissent un construit?

A
  1. cadre théorique
  2. recherches empiriques
  3. connaissances et expériences professionnelles
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Quels sont les 2 types de validité de contenu?

A

Nominale : auteurs du test
consensuelle : groupe de spécialistes indépendants

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Afin de quantifier le degré de validité de _______, on donne aux experts un choix de réponse avec une _________ à propos de _______ ________ afin de systématiser le tout

A

contenu
gradation
chaque item

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Que signifie IVC-I?

A

Nombres d’experts qui ont jugé l’item représentatif, divisé par le nombre total d’experts

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
22
Q

Que signifie IVC-É?

A

Proportion d’items jugés représentatifs, soit la moyenne des IVC-I divisée par le nombre total d’experts.es

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
23
Q

Quelles sont les grandes menaces de la validité de contenu?

A
  1. Inclusion de contenu conceptuellement non pertinent
  2. sous-représentation conceptuelle de certains domaines du construit
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
24
Q

À quoi quoi réfère la validité de construit?

A

Au degré de reproductibilité de la structure interne théorique sous-jacente à l’instrument ainsi que les relations du construit d’intérêt avec d’autres construits externes

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
25
Comment vérifie-t-on la validité de construit?
La validité factorielle la validité convergente / discriminante
26
Qu'est-ce que le réseau nomologique?
La théorie expliquant le construit par le biais de ses interrelations avec d'autres construits Il représente donc la structure interne et les interrelation entre les domaines importants du construits externes théoriquement importants
27
Qu'est-ce que la nomologie?
L'étude des lois, donc bien plus q'une liste de domaines ou sous-domaines
28
Que veut-on vérifier avec la validité factorielle?
Lorsqu'on veut vérifier si la structure factorielle théorique qui représente le construit est reproduites sur le plan empirique
29
Qu'est-ce qu'un facteur?
Une réaction parcimonieuse de plusieurs variables expliquées par une variable latente
30
Quelles sont les questions à se poser qui permettent de vérifier la validité factorielle?
1. Les items sont-ils significativement (statistiquement) associés au facteur (construit)? 2. Dans le cas d'un instrument multidimensionnel, a) Les items sont-il significativement associés au bon facteur et non-associés aux autres facteurs? b) Dans le cas d'une structure hiérarchique, est-ce que les sous-domaines sont significativement associés au domaine général?
31
Expliquer comment l'analyse factorielle exploratoire prouve ou non la validité de contenu.
On identifie des regroupements d'items inter-corrélés, signifiant que les individus tendent à y répondre de façon similaire ex : les répondants répondent oui à Q#5 et Q#8, ces items seront regroupés dans un même facteur
32
Quel est le critère classique de la validité factorielle?
On devrait avoir des saturations factorielles de 0,40 ou plus pour les items associés à un facteur
33
Quelle est la différence entre l'analyse factorielle exploratoire et l'analyse factorielle confirmatoire?
On impose une structure stricte pour l'analyse factorielle confirmatoire à la matrice de corrélations et teste si elle correspond aux données (imposition d'une corrélation de 0 entre certains facteurs), ce qui n'est pas le cas pour l'analyse factorielle exploratoire
34
Vrai ou faux. L'analyse factorielle confirmatoire est encore très peu utilisée en psychométrie
Vrai
35
Qu'est-ce que la validité convergente?
Degré auquel les scores d'une échelle sont associés avec ceux d'une autre échelle existante qui mesure le même construit théorique
36
Qu'est-ce que la validité discriminante?
Degré auquel les scores d'une échelle ne sont pas associés avec une échelle qui ne mesure pas le même construit
37
Quel est le meilleur moyen de tester la validité convergente et discriminante?
La méthode de la matrice multitraits-multiméthodes
38
À quoi réfère la validité pragmatique(validité de critère)?
Réfère au degré auquel les scores à une échelle sont associés à l'adaptation des individus
39
Concernant la validité de critère, les score à l'échelle sont comparés à ceux d'un _______ ________
critère externe
40
Concernant la validité de critère, le critère devrait être une mesure _______ et __________ de l'instrument
objective indépendante
41
Quelles sont les façons d'estimer la validité de critère concomitante?
1. corrélation avec un critère indépendant (test d'intelligence avec réussite académique) 2. méthode des groupes contrastés (on teste les différences de scores moyens entre des groupes)
42
À quoi réfère la validité de critère prédictive?
Le degré auquel une mesure est capable de prédire un critère externe prospectivement
43
La validité de critère prédictive nécessite une étude ________ __________
longitudinale prospective
44
Qu'est-ce que la validité incrémentielle?
Forme de validité pas toujours présente dans les livres, mais signifie à quel point les scores à un test ont une valeur ajoutée pour prédire un critère externe, au-delà de la capacité d'autres facteurs prédictifs importants
45
La validité incrémentielle est liée à l'idée de ________ ________ en analyse de régression
contrôle statistique
46
Que comprend la théorie de la décision et dans quels contextes est-elle pertinente?
Comprend une série de concepts visant l'analyse des effets quantitatifs des décisions prises avec des tests pertinent dans différents contextes de classification tels que pour le dépistage, le diagnostic, la sélection du personnel, la certification, etc.
47
Vrai ou faux. Les concepts de la théorie de la décision sont intimement liés à la validité de critère.
Vrai
48
En quoi consiste la théorie de la décision?
Déterminer à quel point les scores d'un test peuvent classifier adéquatement les personnes dans des groupes
49
Qu'est-ce que la sensibilité?
Capacité d'une échelle de procurer un résultat positif pour les personnes présentant le statut (vrai positif)
50
La sensibilité se rapporte à la ____________ de __________
capacité détection
51
Qu'est-ce que la spécificité?
Capacité d'une échelle de procurer un résultat négatif pour les personnes ne représentant pas le statut (vrai négatif)
52
La spécificité se rapporte à la __________ de _________
capacité discrimination
53
Les indices de sensibilité et de spécificité sont des observations empiriques de la _________ _________ d'un test calculés à partir d'une classification de différents groupes diagnostiques
performance rétrospective
54
Vrai ou faux. La sensibilité et la spécificité ne varie pas en fonction du score critère d'une même échelle.
Faux, contraire
55
Qu'est-ce que le pouvoir prédictif?
calcul d'une échelle qui permet de savoir la probabilité qu'un individu présente réellement le trouble, étant donné un résultat positif à un test, soit le niveau de confiance accordé à un résultat positif
56
Qu'est-ce que le pouvoir prédictif positif (PPP)?
la probabilité qu'un individu avec un résultat positif sur une échelle ait réellement le statut prédit
57
Qu'est-ce que le pouvoir prédictif négatif (PPN)?
La probabilité qu'un individu avec un résultat négatif sur une échelle n'ait réellement pas le statut prédit
58
Les PPP et PPN sont des indices de ___________ ____________ d'un test et ils dépendent de la prévalence d'un trouble
performances extrinsèques
59
Quelle est la différence entre la sensibilité et la spécificité et les PPN et PPP?
PPN et PPP sont à eux des paramètre d'un test ET de la prévalence d'un trouble contrairement aux autres qui sont seulement des paramètres d'un test
60
Va relire sur l'échelle Dépis-Dép
ok
61
Quelle est la règle générale pour l'ensemble des tests de dépistage? (concernant les PPP et PPN)
Lorsque la prévalence est faible, PPN > PPP et c'est l'inverse lorsque la prévalence est élevée
62
Quels sont 2 problèmes sur la sensibilité, la spécificité et les PP?
1. estimation de ces indices statistiques dépend de la validité et de la fidélité du critère utilisé 2. estimation de la prévalence réelle dans différents contextes cliniques peut être difficile
63
La validité est un _______ de la fidélité
préalable
64
La fidélité est une ________ nécessaire à la validité
condition
65
La validité et la fidélité sont __________ empiriquement : les indices de validité sont ________ ________ par le degré de fidélité
interreliées directement influencés
66
On valide un instrument pour une _________ particulière et/ou une _________ particulière
population utilisation