Cours 10 b Flashcards
Nommez les différentes étapes d’élaboration d’un test ( 9 étapes)
Le processus de construction :
* 1ère Étape: Analyser les besoins;
* 2ème Étape: Identifier les comportements;
* 3ème Étape: Spécifier les principes;
* 4ème Étape: Rédiger les items;
* 5ème Étape: Expertiser la première version;
* 6ème Étape: Pré tester;
* 7ème Étape: Analyser les items;
* 8ème Étape: Dimensionner/Calibrer
* 9ème Étape: Rédiger un manuel.
V/F Le processus de construction d’un test est relativement court
F TRÈS long
Un manuel devrait présenter tous les éléments qui vont permettre quoi au praticien?
D’évaluer la qualité de l’outil qu’il souhaite utiliser.
L’objectif du test, les aspects/nuances théoriques;
Sa forme finale, ses qualités métrologiques,
Son dimensionnement, sa date de publication, entre bien d’autres éléments, évidement!
En quoi consiste analyser les besoins?
Identifier les motifs qui justifient les besoins d’évaluation;
Quels sont les objectifs de cette évaluation?
Explorer d’autres mesures pourraient-elles servir pour répondre aux besoins?
Est-ce pertinent? On veut répondre à quoi? Va-t-on aider les gens en faisant un tel test? Est-ce qu’il y a déjà un test existant qui mesure environ la même chose?
En quoi consiste Identifier les comportements
Quels sont les comportements observables susceptibles de représenter le construit qu’on veut mesurer ?
Quels sont les comportements observables susceptibles de représenter le construit qu’on veut mesurer.
On doit donc identifier les comportements qui représentent les manifestations du construit.
Exemple : Certains items ne sont pas présent dans l’Échelle de Beck
En quoi consiste spécifier les principes?
Présenter comment on va devoir mesurer ces comportements :
Nombre d’items,
Caractéristiques du matériel (et de la population);
L’échelle Likert (pair ou impair)? 4, 5, 6 ou 7 pts = très faiblement à très fortement (?)
En quoi consiste rédiger les items? Quel problème fut observé par Gallup en ce qui concerne la formation d’échantillons et la rédaction d’items
« Trop d’attention est accordée à la constitution des échantillons et trop peu à la création des questions […].
Des différences dans la construction des questions conduisent souvent à des résultats qui présentent de plus grandes variations que celles habituellement observées en fonction des différentes techniques d’échantillonnage » (Gallup, 1947, p.383).
Rédiger les items
Gallup a dit Trop d’attention est accordée à la constitution des échantillons et trop peu à la création des questions.
Si on ne porte pas assez attention à la rédaction des items, on créer de la variance d’erreur. Parfois on tombe sur des Marcos qui ne vont pas répondre au reste car la question est pas claire.
ON va réduire considérablement le nombre d’items.
La formulation des items influence les réponses
Utilisez une communication simple, utiliser des mots familiers
- Éviter des références à des mots ou concepts qui impliquent une connotation positive ou négative
- Éviter des questions à deux contenu (une personne peut répondre je suis d’accord avec la partie 1 de la question mais pas avec la partie 2) **
- Éviter les questions longues (trop de contenus différent)
- Effet halo**
Il faut observer quoi au sujet des items? (5 éléments de réponse)
le __ de questions,
la __ de questions,
la __ de questions (__ de __),
le __ des réponses __,
la __ du __.
le contenu de questions,
la formulation de questions,
la séquence de questions (niveau de difficulté),
le format des réponses souhaitées,
la présentation du matériel.
V/F Il faut un nombre bien plus grand d’items au départ pour avoir un certain nombre d’items utiles
V
La formulation des items influence les réponses? Sachant cela on doit faire attention à quoi concernant la rédaction des items? (9 éléments)
Utilisez une communication __ et des mots __;
2. Évitez des mots __;
3. Évitez des questions qui __ déjà les __;
4. Évitez des __ avec de __ ou de possible réactions de __ d’__ ou de __ émotionnelle;
5. Éviter des __ à des __ ou __ qui impliquent de l’__ ou du __;
6. Éviter des __ implicites;
7. Éviter des questions à __ contenus;
8. Éviter des questions ___ (plus courte c’est mielleux);
9. Éviter qu’une __ répond l’__ (effet de halo)
- Utilisez une communication simple et des mots familiers;
- Évitez des mots ambigus;
- Évitez des questions qui suggèrent déjà les réponses;
- Évitez des questions avec de contenus ou de possible réactions de sentiments d’approbation ou de désapprobation émotionnelle;
- Éviter des références à des mots ou concepts qui impliquent de l’acceptation ou du rejet;
- Éviter des alternatives implicites;
- Éviter des questions à deux contenus;
- Éviter des questions longes (plus courte c’est mielleux);
- Éviter qu’une question répond l’autre (effet de halo)
Observer (rédiger les items)
Les __ sont prêts à donner (__) les contenus demandés ?
Quelles __ (ou objections) on pourrait avoir quand on va __ à cette question?
Le contenu est __, il __ les gens, il provoque de la __ et de __ réponses?
Les répondants sont prêts à donner (répondre) les contenus demandés ?
Quelles réactions (ou objections) on pourrait avoir quand on va répondre à cette question?
Le contenu est très intime, il expose les gens, il provoque de la résistance et de fausses réponses?
Observer (rédiger les items)
Faut-il que la question soit plus __, __ et plus __ liés à l’expérience __?
Le __ de la question n’est pas __ ou __ dans une certaine __?
La question est bien __ afin de ne pas __ les autres __?
Faut-il que la question soit plus concrète, spécifique et plus directement liés à l’expérience personnelle?
Le contenu de la question n’est pas biaisé ou chargé dans une certaine direction?
La question est bien neutre afin de ne pas influencer les autres réponses?
En quoi consiste Expertiser cette première version?
Faut-il que la question soit plus concrète, spécifique et plus directement liés à l’expérience personnelle?
Le contenu de la question n’est pas biaisé ou chargé dans une certaine direction?
La question est bien neutre afin de ne pas influencer les autres réponses?
En quoi consiste Pré-tester
Pré-tester la première version à l’aide d’un échantillon de la population ciblée, visant peaufiner cette version et développer la version définitive).
Cet échantillon doit être aussi suffisamment grand (la problématique de l’échantillonnage dans les études en psychométrie devrait être respectée) pour garantir une bonne qualité au pré-test.
Analyser les items
Vérifier/explorer, premièrement, les résultats _____ et ____;
Explorer/détecter les possibles ___ (positive ou négative) au niveau des réponses aux items;
détecter les possibles «inconvénients» de la variabilité des items (__ et __);
vérifier la ___ des dimensions («___», «__»), si cela s’applique (évidement);
chercher les possibles problèmes de ___, ou d’autres (si possible, explorer le niveau de __ des __ par la TRI).
Vérifier/explorer, premièrement, les résultats descriptifs et corrélationnels;
Explorer/détecter les possibles problèmes d’acquiescence (positive ou négative) au niveau des réponses aux items;
détecter les possibles «inconvénients» de la variabilité des items (relation variance et écart-type);
vérifier la normalité des dimensions («Kurtosis», «Skewness»), si cela s’applique (évidement);
chercher les possibles problèmes de colinéarité, ou d’autres (si possible, explorer le niveau de difficulté des items par la TRI).
