Cours 4 Flashcards

1
Q

Qu’est-ce que le degré de validité détermine?

A

détermine les inférences que l’on peut faire à partir des scores d’une échelle

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Est-ce que le nom d’un test ou d’une échelle constitue toujours un indice adéquat du construit mesuré ?

A

Non

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Au lieu de demander si un test «mesure vraiment ce qu’il prétend ou devrait mesurer», que devrait-on demander?

A

est-ce que ce test est une mesure valide de ce construit, pour cette population et dans cette application particulière

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

La validité d’un test ou d’une mesure doit donc être évaluée relativement à trois choses, lesquelles?

A
  1. Est-ce qu’il mesure bien le construit qu’il prétend mesure ?
  2. Est-ce qu’il mesure bien ce construit pour la population ciblée (e.g., âge, niveau académique, groupe clinique particulier, etc.) ?
  3. Est-ce qu’il mesure bien ce construit, pour cette population et pour une application particulière (e.g., classifier dans des groupes diagnostiques, donner une valeur quantitative, etc.) ?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Quels sont les 4 différents types de validité?

A
  1. Vraisemblance
  2. Validité de contenu
  3. Validité de construit
  4. Validité de critère
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Lequel des différents types de validité évalue la représentativité?

A

Validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Nommez des facteurs pouvant influencer la vraisemblance?

A
  1. Contexte d’évaluation
  2. Capacité cognitives des répondants
  3. État psychologique et santé mental des répondants
  4. Personnalité des répondants
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Quel types de validité porte un jugement sur la représentativité des items ?

A

Validité de contenu

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Comment s’établie la validité de contenu?

A

De façon déductive

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Quelles sont les 2 questions posées en ce qui attrait à la validité de contenu?

A

Chaque item individuellement correspond au construit ?
Tous les items d’une échelle considérés dans l’ensemble constituent un échantillon représentatif de tous les domaines (ou sous-domaines) expliqués par le construit d’intérêt ?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Qu’est-ce qui permet de déterminer si la vraisemblance est bonne?

A

Une mesure détient une bonne vraisemblance lorsque ceux qui l’utilisent jugent qu’elle semble pertinente pour mesurer ce qui doit être mesuré

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Que veut-on dire lorsque l’on affirme que dans la validité de contenu, la représentativité est centrale?

A
  1. Tous les sous-domaines représentés

2. Éviter la sur- ou sous-représentation d’items des différents sous-domaines du construit

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

À partir de quoi les chercheurs définissent un construit (et donc, son contenu) ?

A

Théories
Recherches empiriques (recension des écrits)
Connaissances et expériences professionnelles
Expériences personnelles

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Quels sont les 2 types de validation de contenu?

A

Nominale et consensuelle (groupe de spécialistes indépendants)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Les personnes validant la validation de contenu sont-elles indépendant ou dépendante? Comment s’organise-t-on pour systématiser leur réponse?

A

Indépendant
On systématise leur réponse en leur demandant de répondre entre 0,1,2,3
(pas du tout pertinent / représentatif = 0
un peu pertinent / représentatif = 1
assez pertinent / représentatif = 2
très pertinent / représentatif = 3

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Dans la validité de contenu, puisqu’on a des données numériques, on peut donc calculer un …?

A

Indice de validité de contenu
Peut calculer un indice pour chaque item (IVC-I) et pour l’échelle (IVC-É)
IVC-I = nombre d’experts qui ont jugé l’item représentatif (2 ou 3) divisé par le nbr d’experts
IVC-É = la proportion d’items jugés représentatifs (2 ou 3) – ou dit autrement, la moyenne des IVC-I – divisée par le nbr d’experts

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Que vérifie la validité de construit?

A

Il s’agit d’abord de vérifier la validité de la structure théorique sous-jacente à l’instrument ainsi que les relations du construit d’intérêt avec d’autres construits

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Quels sont les 2 grandes façons de vérifier la validité du construit?

A

Validité factorielle

Validité convergente-discriminante

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

Que faut-il savoir avant de commencer la validation du construit?

A

Avant d’entamer ces évaluations, il faut connaitre la théorie sous-jacente au construit

20
Q

Qu’est-ce que le réseau nomologique?

A

La théorie expliquant le construit par le biais des interrelations avec d’autres construits (nomologie=étude des lois du cmpt)

21
Q

Est-ce que le réseau nomologique devrait représenter toutes les interrelations (ordonnées et prévisibles) entre les domaines ou sous-domaines à la base du construit?

A

Oui

22
Q

Que permet de vérifier la validité factorielle?

A

On veut vérifier si la structure factorielle théorique est reproduite sur le plan empirique

23
Q

Dans la validité factorielle, que veut dire facteur?

A

une réduction parcimonieuse de plusieurs variables (items, questions) en une variable latente ou hypothétique

24
Q

Quelles sont les 2 questions associées à la validité factorielle?

A
  1. Les items sont-ils significativement (statistiquement) reliés au trait (construit) auquel ils devraient être reliés ?
  2. La structure hiérarchique est-elle reproduite (items liés aux sous domaines, sous-domaines liés aux domaines, traits primaires et traits d’ordre supérieur) ?
25
Q

Quelles sont les 2 type de validité factorielle?

A

Analyse factorielle exploratoire (aucune restriction)

Analyse factorielle confirmatoire (Imposte une structure stricte)

26
Q

Qu’est-ce qu’identifie l’analyse factorielle exploratoire?

A

On identifie des regroupements d’items pour lesquels les individus donnent des réponses similaires

27
Q

Quelle est le critère classique concernant l’analyse factorielle exploratoire?

A

Critère classique: on devrait avoir des saturations de 0,40 ou plus pour les items associés à un trait

28
Q

Quel méthode il faudrait normalement employer à l’étape de la validation d’un instrument de mesure puisqu’on est supposé connaitre sa structure ?

A

Analyse factorielle confirmatoire

29
Q

Qu’est-ce que la validité convergente?

A

Mettre en relation notre échelle avec une autre (ou des) échelle existante qui se rapporte au même construit théorique

30
Q

Qu’est-ce que la validité discriminante?

A

Il faut aussi démontrer que notre échelle ne corrèle pas avec une (ou des) échelle qui ne se rapporte pas au même construit

31
Q

Quel outil est l’idéal pour calculer la validité convergente/discriminante?

A

L’idéal pour tester la validité C/D est d’employer une matrice multitraits-multiméthodes

32
Q

Quelle question doit-on se poser en ce qui concerne la validité de critère?

A

Est-ce que les scores à l’échelle peuvent prédire l’adaptation (ou la performance) des individus?

33
Q

Dans la validité de critère, les scores à l’échelle sont donc comparés à un critère interne ou externe?

A

Externe

34
Q

Quelle sont les caractéristiques que doit posséder un critère?

A

Le critère devrait être une mesure objective et indépendante, mais reliée conceptuellement au construit d’intérêt (réseau nomologique)

35
Q

Quelles sont les 3 grand type de validité de critère?

A

Concomitante, prédictive et postdictive

36
Q

Quelle sont les 2 méthode pour faire un test de validité de critère concomitant?

A
  1. Corrélation avec un critère indépendant

2. Méthode des groupes contrastés

37
Q

Quelle question doit-on se poser si l’on veut faire un test de validité de critère prédictif?

A

Est-ce que notre échelle est capable de prédire un critère externe prospectivement, i.e. plus tard dans le temps ?

38
Q

Quelle question doit-on se poser si l’on veut faire un test de validité de critère postdictif?

A

Est-ce que notre échelle est capable de prédire un critère externe qui s’est passé avant l’évaluation ?

39
Q

Dans le test de validité de critère, qu’est-ce que la sensibilité?

A

Sensibilité: Capacité d’une échelle de procurer un résultat positif pour les personnes présentant le trouble qu’elle prétend identifier

40
Q

Dans le test de validité de critère, qu’est-ce que la spécificité?

A

Capacité d’une échelle de procurer un résultat négatif pour les personnes ne présentant pas le trouble qu’elle prétend identifier

41
Q

Les indices de sensibilité et de spécificité sont des observations empiriques de quoi?

A

De la précision rétrospective d’un test calculés à partir d’une classification de différents groupes diagnostiques (ou d’attributs autres)

42
Q

Dans le test de sensibilité/spécificité, le statut des individus est-il connu?

A

Oui (sauf en clinique)

43
Q

Par qui est déterminé les indices associées au test sensibilité/spécificité?

A

Ces indices sont déterminés par le score critère établi par les auteurs du test

44
Q

En clinique et lors d’un test de validité de critère de type spécificité/sensibilité, quel est la tâche de l’évaluateur?

A

la tâche de l’évaluateur est plutôt de déterminer le niveau de confiance qui peut être accordé à des résultats positifs ou négatifs pour les individus qu’il évalue

45
Q

Lors d’un test de validité de critère de type spécificité/sensibilité, que veut savoir l’évaluateur?

A

la probabilité qu’un individu présente réellement le trouble, étant donné un résultat positif à un test