Equité - validité différentielle Flashcards
Que cherche-t-on à regarder quand on regarde l’équité ?
Donnez des exemples.
On cherche à savoir si l’interprétation est similaire pour 2 individus de 2 groupes différents avec le même score ou s’il y a des biais qui favorise ou défavorise un groupe.
Ex : H/F, groupes socioculturels …
Quels sont les 3 types de biais psychométriques ?
- Biais de construit théorique
- Biais méthodologique
- Biais des items
Sur quoi se porte le biais de construit ?
Donnez un exemple.
Cherche à savoir si c’est exactement le même attribut (regarde la variance pertinente).
QIT : indicateur du niveau d’intelligence globale
Mais il y a des différences culturelles dans la définition de l’intelligence.
Sur quoi peuvent se porter les biais méthodologiques (4) ?
Donnez des exemples pour chacun des facteurs influençant la variance pertinente.
- contenu du test : en fonction de s’il est approprié pour tous les groupes, si c’est du langage, du test, des graphs, …
- contexte du testing : stéréotypes, interaction avec l’examinateur, bilingues, …
- format des réponses au test : expression verbale simple vs complexe, pointage, …
- exposition aux stimuli : différences selon le % d’exposition
Quelles sont les analyses possibles pour contrer les biais méthodologiques ?
- analyse des items : DIF : fonctionnement différentiel des items : recherche de paramètres identiques pour tous les groupes : moy, p-indice, d-indice, CCI
- validité différentielle à regarder avec le biais de prédiction
Qu’est ce que l’on se demande quand l’on veut faire attention aux biais psychométriques de prédiction entre deux groupes ?
On veut voir si les droites de régressions des prédictions sont bien similaires pour les groupes (ex : groupes culturels).
Il est bien sur possible d’avoir des mêmes droites de régressions et donc pas de biais mais pourtant une différence de performances moyenne (plus bas/ plus haut : voir 17/30).
Que mesure la corrélation ? Que ne traduit-elle pas théoriquement ?
Le degré d’association entre une variable X et Y.
La corrélation ne traduit pas une relation causale entre les variables.
Que permet de prédire la régression ? Qu’est ce qu’elle implique pour la VD et la Vi ?
La régression permet de prédire la valeur de la VD pour une valeur donnée de la Vi et implique du coup une relation causale.
Quels sont les 2 paramètres de la droite de régression ? Les définir.
- L’intercept : valeur prédite de Y lorsque X= 0
- La pente : changement moyen de Y lorsque que X augmente de 1 ET
Donner un exemple de biais de l’intercept avec un exemple des performances prédites en fonction du niveau de Qi de H/ F.
Pour un H et une F avec le même niveau de perf (score de QI), la performance prédite n’est pas la même pour H et F.
Dans une embauche, pour une valeur seuil critère du test, la relation test critère n’est pas la même pour groupe H et groupe F, selon le groupe de référence on peut avoir des sur/ sous estimation des performances sur le critère selon le groupe de référence.
Qu’est ce que le biais l’intercept ?
Deux groupes peuvent avoir une même pente et un intercept de leur droite de régression différente, la droite de régression commune peut donc être faussée : on sous estime les performances du groupe 1, et un sur estime celle du groupe 2.
Qu’est ce que le biais de la pente ?
Deux groupes peuvent avoir un même intercept et une pente de leur droite de régression différente, la droite de régression commune peut donc être faussée : on sous estime les performances du groupe 1, et un sur estime celle du groupe 2.
Que peut-on lire dans la littérature sur les biais psychométriques et les différences de groupes ?
Il y a peu de biais rapportés dans la littérature, ceux qui sont observés sont faibles et les scores ne sont pas invalidés.
S’il y a donc peu de biais psychométriques et pourtant des différences de groupes quelles sont les 3 stratégies que l’on peut-on appliquer pour améliorer l’équité des groupes ? Donner des exemples.
- Adapter les conditions de passation et de cotation (plus de temps, éliminer des items, répétition de l’instruction, traducteur, réponse dans une autre langue)
- Administer des tests non verbaux (Wechsler non verbal)
- Administrer des tests dans la langue “d’origine”
Est ce que les 3 stratégies proposées améliores réellement l’équité entre les groupes ?
Non, en réalité cela rend les scores non utilisables parce que non comparables car on perd la standardisation de la passation. On n’est donc pas plus avancé pour faire des prédictions pour l’enfant.
