Cours 10 - Construction / Adaptation Flashcards

1
Q

Nommez les étapes de la construction (adaptation) d’un instrument de mesure.

A
  • 1 : Analyser les besoins;
  • 2 : Identifier les comportements;
  • 3 : Spécifier quelques principes;
  • 4 : Rédiger (adapter) les items;
  • 5 : Expertiser la première version (construite ou adapté);
  • 6 : Pré tester;
  • 7 : Analyser les items;
  • 8 : Dimensionner/Calibrer
  • 9 : Rédiger un manuel.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Expliquez l’étape 1 d’analyser les besoins.

A
  • identifier les motifs qui justifient les besoins d’évaluation
    -devons-nous créer ou adapter une mesure pour répondre à nos besoins?
  • quels sont les objectifs de cette nouvelle mesure?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Expliquez l’étape 2 d’identifier les comportements.

A

Quels sont les comportements observables susceptibles de représenter le construit qu’on veut mesurer ?

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Expliquez l’étape 3 Spécifier quelques principes.

A
  • Nombre d’items
  • Caractéristiques du matériel (et de la population);
  • L’échelle Likert (pair ou impair)? 4, 5, 6 ou 7 pts = Fortement en désaccord à fortement en accord (?)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

Expliquez l’étape 4 Rédiger (adapter) les items.

A

Besoin d’un très grand nombre d’items!!

Il faut observer:
- le contenu de questions (un contenu par question)
- la formulation de questions (mots familiers, évitez les mots ambigus)
- la séquence de questions (niveau de difficulté)
- le format des réponses souhaitées
- la présentation du matériel.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

Expliquez l’étape 5 Expertiser la première version (construite ou adapté).

A

Soumettre, au moins, à la vérification
- de la clarté du langage, - pertinence théorique
- et dimensionnalité par un groupe d’expert

(observer: combien d’années de formation, de pratique, localisation géographique, lieu de formation, etc.).

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

Expliquez l’étape 6 Pré tester.

A

Pré-tester la première version à l’aide d’un échantillon de la population ciblée, visant peaufiner cette première version (et peut-être déjà développer la version définitive).

Cet échantillon doit être suffisamment grand (la problématique de l’échantillonnage) pour garantir une bonne qualité des résultats au pré-test.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

Expliquez l’étape 7: Analyser les items.

A
  • Vérifier/explorer, premièrement, les résultats descriptifs (relation variance et écart-type) et corrélationnels ;
  • Explorer/détecter les possibles problèmes d’acquiescence (positive ou négative) ;
  • Tester la normalité des variables latentes
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Expliquez l’étape 8 Dimensionner/ calibrer.

A

Après une exploration minutieuse des indices de validité et fidélité, on doit créer les normes.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Expliquez l’étape 9 Rédiger un manuel.

A

On doit présenter:
- Les objectifs pour lesquels il a été créé
- Les bases théoriques du test;
- Les qualifications requises pour l’appliquer et l’interpréter;
- les consignes et les principes d’interprétation des résultats;
- Les données métriques.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Dans l’étape 4, rédigez les items.
Quels sont les façons/trucs pour rédigez les questions?

A
  1. Utilisez une communication simple et des mots familiers;
  2. Évitez des mots ambigus ou de compréhension difficile;
  3. Évitez des items qui suggèrent déjà les réponses; Ou, qu’une question répond à une autre (effet de halo);
  4. Évitez les items dont le contenu suscite des sentiments d’approbation ou de désapprobation émotionnelle;
  5. Éviter les questions longes (plus courte c’est mielleux);
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

dans l’étape 4 rédigez les items, que faut-il observer?

A
  • L’item est inutilement détaillé ou trop spécifique?
  • Plusieurs items sont nécessaires pour évaluer ce contenu ou l’une seule est déjà suffisante ?
  • Tous les éléments importants de ce contenu sont obtenus sur la façon dont les items ont été formulés ou adaptés?
  • Les gens ont les informations (les vécus, les formations, etc.) nécessaires pour répondre aux items proposés ?
  • Les items contiennent des jugements liés au sujet d’évaluation?
  • Les répondants sont prêts à répondre les contenus demandés ?
  • Faut-il que les items soient plus concrets, spécifiques et plus directement liés à l’expérience personnelle ?
  • Le contenu de la question est biaisé dans une certaine direction?
  • Quelles réactions (ou objections, ou résistance) pourrait-on avoir quand on va répondre aux items (aurons-nous de fausses réponses ?) ?
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Dans l’analyse d’items, de quelle manière peut-on tester la normalité des variables ?

A
  • Test de Mardia
  • Test de distance de Mahalanobis
  • Test univarié de normalité par le biais des test K-S
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qu’est-ce le biais d’acquiescement ?

A

un phénomène par lequel les individus sont susceptibles d’être d’accord avec quelque chose, indépendamment de ce qu’ils ressentent réellement. Dans les enquêtes, il s’agit d’un type de biais de réponse dans lequel les personnes interrogées ont tendance à être d’accord avec les énoncés de la question de l’enquête plutôt que de donner leur avis personnel et impartial.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Quel type d’erreur la matrice anti-image montre?

A

variance unique

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Dans la matrice anti-image, comment doit-être la corrélation?

A

Dans la diagonale principale: les corrélations doivent être élevées

Dans le reste de la matrice: les corrélations doivent être faibles.

17
Q

Que mesure la diagonale principale de la matrice anti-image?

A

mesure l’adéquation de la solution factorielle

  • il s’agit d’une mesure KMO pour chacune des variables à l’étude
18
Q

Dans la qualité de la représentation (communalities), que représente ‘‘Initial’’ ?

A

Item que l’on veut expliquer comme variable dépendante et le reste des items comme variable indépendante.

ex: régression de toute les items (1 à 12) pour prédire l’item 1. donc item 1 = variable dépendante, le reste des variables = indépendante

19
Q

Dans la qualité de la représentation (communalities), que représente ‘‘Extraction’’ ?

A

combinaison linéaire d’items pour former des facteurs qui vont expliquer une variable.

** mesure de la variance de chaque variable qui peut être expliquée par le nombre de facteurs retenus

20
Q

Dans la matrice de corrélation reproduite, qu’est-ce la section résidu?

A

la différence numérique de la première matrice (corrélation) et de la dernière matrice: matrice reproduite (corrélation) : On s’attend que ça soit plus petit que 50% (0,5).

21
Q

Dans la matrice de corrélation reproduite, qu’est-ce la section ‘‘coefficient de corrélation reproduite’’?

A

La première partie contient les coefficients de corrélation reproduite entre toutes les variables du modèle factoriel. La diagonale principale de la première partie de ce tableau présente les qualités de représentation. Si l’on compare les valeurs hors diagonale avec la matrice de corrélation originale, on voit que les résultats ne sont pas exactement les mêmes. En effet, la matrice de corrélation reproduite est la matrice de corrélation basée sur les facteurs extraits (ou retenus). On s’attend que les valeurs de la matrice reproduite soient les plus proches possible des valeurs de la matrice de corrélation originale.

22
Q

Que se passe-t-il avec la matrice lorsque l’on retire des degrés de liberté?

A

elle devient instable

23
Q

Qu’est-ce une matrice de forme?

A

Cette matrice présente les charges – saturations – factorielles.

24
Q

De quelles manières peut-on analyser la fidelité?

A
  • Test-retest
  • Formes parallèles
  • Méthode de moitié (split-half)
  • Homogénéité (consistance interne)
  • Accord inter-juges
25
Q

À l’étape 9, rédiger un manuel, on doit présenter les objectifs pour lesquels il a été créée. Quels sont ces objectifs?

A
  • A quoi serve-t-il ?
  • Dans quel contexte sera-t-il utilisé ?
  • Que doit-il mesurer ?
  • Est-ce une variante d’un test existant?
  • Quelle population est concernée ?
  • Précision de la forme (individuel, collectif, papier-crayon, internet, etc.