Analyse des items

Question 1

Quels sont les buts dans l’analyse des items lors de la construction d’un test ?

Answer 1

• Estimer la qualité scientifique des items
• Estimer la pertinence des items pour une pop donnée
• Estimer l’attribut majoritaire évalué

Question 2

Quels sont les 3 types de validité que l’on évalue lors de l’analyse qualitative des items ?

Answer 2

• Validité d’apparence : on demande à des personnes naïves
• Validité de contenu : on demande à des experts
• Validité de processus de réponses : comment les personnes s’y sont pris

Question 3

Quelle analyse fait-on après l’analyse qualitative des items ? Quelles en sont les 2 théories encore en faveur ajd ?

Answer 3

L’analyse quantitative statistique.

• Théorie classique des tests (TCT) : fréquente avec les paramètre de difficulté et de discrimination
• Modèle de réponses à l’item (MRI) : moins fréquent et plus complexe, courbe caractéristique des items (CCI)

Question 4

Qu’est ce que l’effet plancher ? L’effet plafond ?

Answer 4

• Plancher : le test est trop difficile, personne n’y arrive
• Plafond : le test est trop facile, tout le monde y arrive

Question 5

Qu’est ce que la p-indice ? qu’est ce qu’elle évalue et comment l’interprétée ?

Answer 5

C’est un indice de facilité/ difficulté des individus, elle est calculée avec la division de la proportion d’indiv qui réussissent 1 item sur le nbr total d’individu

• p-indice < 20 % –> difficile
• 20% < p < 80 % –> medium
• p-indice > 80% –> facile

Question 6

Quels sont les indicateur de la discriminabilité/ utilité des items ?

Answer 6

• Corrélation inter-items
• Corrélation item - score total sans l’item concerné
• Sélection groupes extrêmes

Question 7

Comment peut-on interpréter les valeurs des corrélations inter-items ?

Answer 7

• Rcorr > .30 : bonne discrimination
• Rcorr < 0 : discrimination inverse
• Rcorr = 0 : pas de discrimination

Question 8

A quoi sert le coefficient Aloha de Cronbach ? Comment l’interprète-t-on s’il est positif ?

Answer 8

C’est un coefficient de fidélité qui utilise la méthode des covariances entre toutes les paires d’items pour avoir la moyenne de toutes ces covariances.
Covariation positive : bonne consistance interne (mais pas unidimentionnalité)

Question 9

Que peut-on faire pour modifier le coefficient alpha ? et que cherche-t-on à faire ?

Answer 9

On cherche à l’augmenter un maximum pour augmenter la covariation moyenne. Pour cela on test en éliminant des items et on recalcule la covariation moyenne.

Question 10

Qu’est-ce que le D-indice ? comment le calcul-t-on ? comment l’interprète t’on ?

Answer 10

Le D-indice est un moyen de sélectionner les items en comparant les groupes extrêmes.
D-indice = p-indice(27%sup) - p-indice(27%inf)

• D < .10 : aucune utilité
• .10 < D < .19 : limite, à améliorer
• .20 < D < .29 : modéré
• .30 < D < .39 : bon
• D > .40 : très bon