Cours 7

Question 1

Qu’est-ce que la fidélité d’un test psychométrique?

Answer 1

Aussi appelé la fiabilité, c’est la mesure de la qualité d’un test

Question 2

Quelle est la définition de la fidélité?

Answer 2

C’est le degré de précision et de constance des scores obtenus à un test

Constance: stabilité temporelle
Précision: on veut minimiser le plus possible l’erreur associée à la mesure

Question 3

Quelle est la définition formelle de la fidélité?

Answer 3

Le rapport de la variance vraie à la variance totale (tout en considérant l’erreur)

Question 4

À quoi sont liés les critères de fidélité d’un test?

Answer 4

À sa constance et sa précision.

On espère que les scores obtenus vont présenter la plus petite marge d’erreur (variance d’erreur) possible.

Question 5

Quelle est la formule de la variance observable? Élaborez votre réponse à l’aide du schéma.

Answer 5

X = t + e

X = variance observable
t = variance vraie
e = variance d’erreur

Exemple: la variance d’erreur est le construit (dépression) et nous allons donc mesurer dans le test les comportements (items)

Voir schéma NDC

Question 6

Comment le modèle “X = t + e” est considéré?
Expliquez votre réponse à l’aide d’exemples.

Answer 6

Voir explications NDC

Question 7

Essentiellement, qu’est-ce qui représente la variance d’erreur?

Answer 7

Essentiellement, toute condition non pertinente à l’objectif d’un test représente la variance d’erreur.

Question 8

Si les exterminateurs parviennent à maintenir ___________________________ en contrôlant (4), ils réduisent ____________________ et rendent les scores aux test ____________________.

Answer 8

Les conditions de testage uniformes

• L’environnement du testage
• Les consignes
• Limite de temps
• Climat interpersonnel (avec les sujets), etc.

l’erreur de mesure

plus fidèles

Question 9

Que doit accompagner tout test? Décrivez.

Answer 9

Un rapport sur son degré de fidélité (indice de fidélité)

L’indice de fidélité caractérise bien le test sous réserve qu’il soit administré dans les mêmes conditions standardisées et à des personnes similaires à celles qui composent l’échantillon normatif.

Question 10

Quand on parle de fidélité, on parle d’un ______________, soit le _____________________.

Answer 10

Chiffre
Coefficient de fidélité

Question 11

Qu’exprime le coefficient de fidélité.

Answer 11

Une corrélation et est donc compris entre 0 (aucune corrélation) et 1 (corrélation parfaite)

Question 12

Quel est le coefficient minimal requis pour:

• Un test au contexte clinique?
• Contexte de la recherche?

Les tests qui mesurent le QI comme ceux de ______________, ont de _________ coefficients de fidélité.

Les coefficients de fidélité de la plupart des tests d’intelligence sont aux alentours de ______________.

Answer 12

Clinique: minimum 0,80
Recherche: 0,70

Wechsler, bons

0,85 et 0,90

Question 13

Est-ce possible que le coefficient de fidélité soit de 0,95? Expliquez votre réponse.

Answer 13

Oui, mais cela veut sûrement dire que les items se ressemblent trop et mesurent la même chose (phénomène de colinéarité)

Question 14

Nommez les 5 types de fidélité.

Answer 14

• Test re-test
• Par versions parallèles
• Bissection
• Homogénéité
• Équivalence inter-juge

Question 15

TEST RE-REST

1. Comment est aussi appelée la fidélité test re-test?
2. En quoi consiste-t-elle?
3. Dans ce cas, quel est le coefficient de fidélité?
4. Qu’indique la fidélité test re-test?
5. Plus la fidélité test re-test est _____________, ____________ les scores des sujets sont susceptibles d’être _____________ par ces __________________.

Ainsi, plus le coefficient de fidélité est _____________, plus l’instrument a une bonne _______________.

6. Que comprennent les sources d’erreurs de la fidélité test re-test?

Answer 15

1. Stabilité temporelle
2. Consiste à administrer un même test à deux occasions différentes aux mêmes sujets
3. Le coefficient de fidélité, appelé rtr, est la corrélation entre les scores obtenus par les mêmes personnes au cours des deux administrations.
   Donc, la corrélation obtenue lors de la 1ère passation et celle obtenue lors de la 2e passation.
   Toutes les différences entre les deux passations = erreurs (mais on s’attend à avoir des résultats très similaires.)
4. Indique l’ampleur à laquelle les scores peuvent être généralisés à différentes occasions.
5. Élevée / moins / affectés /sources d’erreurs

Élevée / fidélité temporelle

6. Comprennent les fluctuations aléatoires de la performance d’une session à l’autre. Ces variations peuvent résulter en partie des conditions de testing qui sont mal contrôlées, mais aussi à des changements internes du sujet entre les deux passations.

Question 16

Quels sont les avantages de la fidélité test re-test?

Answer 16

1. Stabilité des résultats: mesure la cohérence des résultats lorsque le même test est administré au même échantillon à différents moments. Garantit que les résultats peuvent être reproduits (en respectant les mêmes conditions de passation).
2. Excellent indicateur de la qualité métrique d’un instrument de mesure psychologique.

Question 17

Quels sont les inconvénients de la fidélité test re-test?

Answer 17

1. Effet de pratique:
   Si le re-test est effectué trop rapidement, le test aura sensibilisé les participants au thème. Ils vont donc se remémorer ce qu’ils avaient répondu et ainsi répondre la même chose. Cela conduit à des indicateurs de fidélité biaisés à la hausse.
2. Changement d’opinions:
   En raison des influences situationnelles, donc variabilité non prévue à la baisse (vont répondre différemment)
3. Intervalle entre les 2 administration:
   Plus l’intervalle entre les 2 administrations est long, plus le coefficient de variation sera faible (mauvaise fiabilité par inclusion de sources d’erreur).

Question 18

FIDÉLITÉ PAR VERSIONS PARALLÈLES

1. Comment est-elle aussi appelée?
2. En quoi consiste-elle?
3. Par quoi le coefficient de fidélité est-il obtenu?
4. Lors de la création /utilisation de versions parallèles, quelles précautions faut-il prendre afin d’assurer un véritable parallélisme (fondamental)?

Answer 18

1. Méthode d’équivalence
2. Elle consiste à administrer 2 versions différentes mais équivalentes d’un même test aux mêmes sujets.
3. Obtenu par le coefficient de corrélation obtenu entre les scores des 2 passations.
4. • Contenir le même nombre d’items, forme, même contenu

• Niveau de difficulté moyen des items doit être statistiquement le même (p<0,05)
• Il faut assurer l’équivalence des consignes, des exemples, du format de présentation, minutage (bref tous les aspects du cadre de passation du test).

Question 19

Quel est l’avantage des versions parallèles?

Answer 19

Précision:
Permet d’évaluer la précision d’un test en éliminant les effets de la mémoire ou de la pratique qui peuvent survenir lors de l’administration répétée du même test.

Participants vont reconnaître que les deux tests sont environ la même chose, mais que c’est tout de même différent.

Question 20

Quels sont les inconvénients des versions parallèles?

Answer 20

1. Coût et temps (production)
2. Équivalence imparfaite:
   Deux formes parallèles ne sont jamais équivalentes à 100% (donc une part d’erreur). Cela vient s’ajouter à l’erreur de mesure, qui se traduit par une surestimation de l’erreur de mesure.

Question 21

FIDÉLITÉ PAR BISSECTION

1.Comment est-elle aussi appelée?

2. En quoi consiste-t-elle?
3. Que permet de mesurer cette méthode?

Answer 21

1. Aussi appelée méthode du partage / split-half
2. Consiste à diviser l’ensemble d’un test en 2 moitiés équivalentes et à calculer la corrélation entre les scores obtenus pour chaque moitié.
3. Cette méthode permet de mesurer la cohérence interne du test, soit à quel point les deux moitiés du test mesurent une même caractéristique psychologique.

Question 22

Quels sont les avantages de la bissection?

Answer 22

• Pas de double administration (ni la construction d’une version parallèle)
• Mesure de cohérence interne: permet de mesurer l’homogénéité des 2 parties du test.

Question 23

Quels sont les désavantages de la bissection?

Answer 23

• Équivalence des 2 parties: difficulté, car faut y porter attention
• Influence sur la fidélité de la méthode de bissection choisie (pair/impair, hasard, etc.)
• Sous-estimation de la fidélité: vu que sépare le test en 2 moitiés, moins d’items dans chaque test alors sous-estime la fidélité.

Question 24

Quelle est la méthode traditionnelle utilisée?

Answer 24

Fidélité par homogénéité

Question 25

FIDÉLITÉ PAR HOMOGÉNÉITÉ

1. Comment est-elle aussi appelée?
2. En quoi consiste-t-elle?

Answer 25

1. Cohérence interne
2. Consiste à évaluer le degré de cohésion des items qui composent un instrument psychométrique (ou chacune de ses échelles), lesquelles devraient être étroitement liées.
   L’indice de fidélité s’exprime alors par la mesure de cette cohérence entre les items.

Question 26

Quels sont les avantage de la méthode de l’homogénéité?

Answer 26

• Pas de double administration (ni construire une version parallèle)
• Mesure de la cohérence interne

Question 27

Quels sont les désavantages de la méthode de l’homogénéité?

Answer 27

• Ne tient pas compte de la stabilité temporelle. Implique plutôt un score composite obtenu par les corrélations des divers items d’un même instrument.
• Dépendance à la longueur du test, plus le nombre d’items du test est élevé, plus la fidélité par homogénéité a tendance à être élevée.

Question 28

Quelle est la différence entre augmenter la fidélité d’un test de façon concrète ou artificielle?

Answer 28

Concrète: Augmenter le nombre de répondants

Artificielle: Augmenter le nombre de choix de réponse et le nombre d’items.

Question 29

Fidélité par homogénéité: COEFFICIENT ALPHA

1. Par qui, quand et pourquoi a-t-il été proposé?
2. Valeurs comprises entre ______ et ______.
3. Que décrit la cohérence interne et à quoi est-elle liée?
4. Quand est-ce que l’alpha de Cronbach augmente?
5. Par quoi alpha est-il affecté?
6. Une valeur alpha supérieure à ________ est considérée comme satisfaisante.

Comment est vu une valeur alpha supérieure à 0,90?

7. Qu’est-ce que la tau équivalence?

Answer 29

1. Lee Cronbach, 1951, pour fournir une mesure de la cohérence interne d’un test.
2. 0 et 1
3. Décrit dans quelle mesure les questions d’un test mesurent le même concept et est lié à l’interrelation des éléments du test.
4. Augmente quand les différents items du test sont corrélés, mais un coefficient alpha élevé ne garantit pas toujours cohérence interne élevée.
5. Par le nombre d’items du tests.
   - trop court diminue
   - élevé augmente
6. 0,70 / une valeur alpha supérieure à 0,90 est parfois considérée comme souhaitable, mais veut sûrement dire que les énoncés sont trop similaires, ce qui peut faire diminuer la fiabilité réelle de l’échelle.
7. L’alpha de Cronbach (aussi connu sous le nom de fiabilité tau-équivalente) suppose la tau-équivalence.
   Cependant, cette hypothèse est violée en psychométrie.

La tau équivalence est une condition de fiabilité qui suppose que tous les items d’un test ont la même importance pour le construit. Cette condition peut être exprimée en termes de charges factorielles.

Question 30

Que suppose la fidélité par homogénéité de mesures parallèles?

Answer 30

Suppose que non seulement tous les items ont la même importance pour le construit sous-jacent ET aussi que les variances sont égales.

C’est-à-dire que chaque item à la même variance et la même corrélation avec le construit total.
Mais, on ne peut pas trouver de différence significative entre la variance des items (ex: Test F de Leveene).