Cours 17- Les instruments de mesure et d'évaluation Flashcards

1
Q

Qu’est-ce que l’évaluation?

Quels pourraient être les objectifs de l’évaluation? (4)

A

Processus à travers lequel on utilise des
tests/instruments,soit des informations objectives et aussi subjectives (ex.:entrevues,…) afin de porter un
jugement clinique.« Processus d’évaluation ».

a) identifier les besoins (forces et lim pr avoir image juste de sa condition)
b) « prédire »le potentiel de récupération
c) évaluer l’effet/progression de l’intervention
d) recherche (collecter données objectives pr avoir données probantes)

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

Qu’est-ce que le PROCESSUS d’évaluation?

Quel ê le but du processus d’évaluation?

A

cueillette infos objective & subjective pr mieux comprendre mon client ou la problématique de recherche.

Organiser l’information pertinente (client)thérapeute
puisse planifier intervention.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

Nomme quelques types d’évaluation (6)

A
  • test de dépistage
  • évaluation globale (éval où on veut le profil général du patient) versus évaluation spécifique (ex: sa force musculaire)
  • évaluation initiale
  • réévaluation
  • évaluation périodique (un peu mm chose que rééval)
  • évaluation finale
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

Nomme diverse méthodes d’évaluation (3)

A

1- l’entrevue

a) structurée (ex: questionnaire avec choix de rép)
b) semi‐ structurée (questionnaire avec rép ouvertes)
c) non structurée (on a un guide, mais sans questions nécessairement)

2- l’observation (a,b,c comme entrevue)

3- mise en situation: réelle ou simulée

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

LES INSTRUMENTS DE MESURE/TESTS: Définis ce qu’est la mesure

A

La mesure = Le test = instrument de mesure

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

LES INSTRUMENTS DE MESURE/TESTS: Que vise la mesure? (2)

LES INSTRUMENTS DE MESURE/TESTS: pourquoi utiliser la mesure? (4)

A
  1. Construit– {opérationnaliser}–>comportements observables:
    * J’ai qqch d’abstrait que je vx rendre + concret. Ex: Test d’intelligence. Cmt je mesure l’intelligence? (abstrait –> concret. Opérationnalisation= dans l’exemple: dév un instrument d’éval pr “mesurer” l’intelligence.
  2. Donner une valeur quantitative à un ensemble de comportements recueillis en utilisant un test. 1986).Cette assignation de nombres doit se faire selon des règles clairement préétablies
  • comprendre, faire le lien entre les connaissances et les observations cliniques.(Théorie (données probantes) –> empirisme (observation))
  • structurer l’information
  • mieux saisir une problématique
  • interpréter en fonction des résultats au test et des fondements théoriques.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

UTILITÉ DES INSTRUMENTS DE MESURE/ D’ÉVALUATION (suite…) Décris en quelques mots ce qui se passe avec les instruments de mesure/ pk les utiliser.

A

Quantifier —>Objectiver

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

À quoi faut-il faire attention avec les instruments de mesure?

A

• N’est pas une fin en soi
• *Dangers
Usage à d’autres fins, Modifier l’instrument

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

Nomme les 4 échelles de cotation.

A

ÉCHELLES DE COTATION

  1. Échelle nominale
  2. Échelle ordinale
  3. Échelle par intervalle
  4. Échelle par ratio
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

Qu’est-ce qu’une échelle nominale?

A

Échelle nominale
- « L ‘échelle nominale comprend des valeurs numériques utilisées strictement pour étiqueter des éléments et ne tiennent pas compte d’un ordre,de distances égales entre les unités,ou d’une origine fixe »

  • Ils ‘agit d’indiquer si des objets sont équivalents ou différents
  • Ex: joueur 1, joueur 9, les # permettent seulement d’identifier les joueurs.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
11
Q

Donne un exemple d’échelle nominale.

A

Ex.:0= masculin et 1= féminin

  • la forme la plus rudimentaire.
  • des nombres sont assignés à des fins de distinction, de classification, de catégorisation.
  • les nombres ne correspondent pas à des valeurs numériques significatives.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
12
Q

Qu’est-ce qu’une échelle ordinale?

A
  • ” Une échelle de mesure qui permet d’ordonner les sujets par rapport à une variable. La différence entre les rangs n’est pas égale”
  • Les valeurs numériques les plus élevées sont attribuées aux individus qui présentent le plus la caractéristique mesurée.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
13
Q

Donne un exemple d’échelle ordinale.

A

Ex.:Placer des gens selon leur taille(grandeur)
allant du plus petit individu au plus grand;
Échelle de Likert
- elle est la plus fréquemment rencontrée.
- Tout comme la précédente échelle,elle permet de distinguer des éléments; cependant,elle indique un ordre de grandeur(>,

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
14
Q

Qu”est-ce que l’échelle par intervalle?

A
  • « Une échelle de mesure qui décrit des variables de façon à ce que la distance entre deux unités de mesure (intervalle)soit la même,sans avoir de 0 significatif »
  • Cette échelle indique aussi des rangs mais la distance entre les nombres est significative selon les caractéristiques mesurées.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
15
Q

Donne un exemple d’échelle par intervalle.

A

Ex.:La mesure de la température en Celsius.0° C ne représente pas une absence de la caractéristique.
- les nombres assignés sont ordonnés comme dans l’échelle ordinale.
- la distance entre chacun des rangs est
constante.
- les nombres représentent la distance effective entre chacun des niveaux.
- le zéro n’est pas significatif

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
16
Q

Qu’est-ce que l’échelle par ratio?

A
  • « L’échelle de ratio est une échelle par intervalle avec un zéro”réel” plutôt qu’un zéro arbitraire »
  • Cette échelle présente un zéro absolu.
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
17
Q

Donne un exemple d’échelle par ratio.

A

Ex.: le poids en livres ou kilogrammes
- mêmes caractéristiques que l’échelle par intervalle sauf que le zéro est significatif, i.e. qu’il indique une
absence de la caractéristique mesurée.

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
18
Q

Qu’est-ce que les qualités métrologiques?

A
  • Techniques et principes reliés à la Mesure

- Fidélité et validité

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
19
Q

x= T+e, quelle sont les variables dans cette équation?

A
T: valeur réelle
e: error (vient contaminer le résultats)
x: score observé
ex: Poids de la pers sur balance (x), ce serait la mesure noté. 
x= valeur réelle + marge d'erreur
Fidélité --> erreur la + petite possible
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
20
Q

Qu’est-ce que la fidélité/ fiabilité?

A
  • Erreur aléatoire
  • « Étendue à laquelle une expérience, un test une procédure de mesure tend à donner les même résultats lors d’essais répétés »
  • Focus: indicateurs empiriques (constance lors de mesures répétées)
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
21
Q

Quels sont les 3 types de fidélités?

A
  • inter‐ examinateurs
  • test‐ retest
  • consistance interne
22
Q

Qu’est-ce que la fidélité de type inter-examinateur?

A

Degré de concordance entre 2 ou+examinateurs lors de la passation d’un test pour un même sujet dans des conditions identiques

23
Q

Qu’est-ce que la fidélité de type test-retest?

A

Concordance obtenue entre les scores de 2 passations d’un même test, séparées par un délai, par une même personne (même évaluateur)

24
Q

Qu’est-ce que la fidélité de type consistance interne?

A
  • Estimation de la fidélité basée sur la corrélation moyenne entre les items d’un test (en considérant le nombre d’items)
  • homogénéité du test
25
Q

Y-a-t-il des coefficient pour évaluer la validité et la fidélité? si oui, lesquels?

A

Validité: Ø coefficient (exception)
‐ Fidélité: coefficient entre 0 et+1
exception: kappa (‐ 1 et +1)
–> fidélité, près de 0: fidélité pas bonne. + le coefficient est près de 1: dim l’erreur aléatoire, meilleur fidélité.

26
Q

Dans le coefficient de fidélité, que signifie une proximité à 0? à 1?

A

+ proche de 0: résultat pas précis (p-t dû au hasard?) j’évalue pas seulement un seul construit.
+ proche de 1: j’évalue un seul construit.

27
Q

Sur quelles variables peut-il y avoir des biais lorsque j’évalue la fidélité? (5)

A

Biais possibles

  1. participant (motivation, anxiété,…) (biais liés à mon participant)
  2. caractéristique étudiée
  3. instrument de mesure
  4. personne qui recueille l’information
  5. conditions de passation
28
Q

Nomme quelques moyens pour améliorer la fidélité. (6)

A

Moyens d’améliorer la fidélité

  1. définir les variables.
  2. valider les instruments, les procédures; clarifier les consignes et échelles de cotation.
  3. fournir un entraînement aux évaluateurs.
  4. s’assurer de la stabilité des évaluateurs.
  5. vérifier régulièrement les instruments de mesure (ex.:calibrer le pèse personne).
  6. utiliser la moyenne de plusieurs mesures (ex.: données au pèse‐ personne)
29
Q

Qu’est-ce que la validité? (4)

A
  • démarche théorique, de réflexion
  • x=T+e
  • Processus par lequel on recueille des évidences pour supporter les inférences supposées se confirmer par les scores à un test
  • Intérêt: concept —– indicateurs
30
Q

Nomme quelques types de validité. (5)

A
  1. validité apparente
  2. validité de contenu
  3. validité de critère
  4. validité de construit
  5. validation transculturelle
31
Q

Qu’est-ce que la validité apparente?

A
  • « Évidence» (apparence) que les items semblent mesurer un construit
  • Est‐ ce que l’instrument semble mesurer ce qu’il est supposé mesurer?

*pas très utile. Il n’y a pas de démarche scientifique. On fait juste réfléchir à l’instrument

32
Q

Qu’est-ce que la validité de contenu?

A
  • Dépend du degré auquel une mesure empirique (instrument d’évaluation) reflète un contenu spécifique
  • Ex: on demande aux experts en psychiatrie: Quel cpt devrait-on cibler pr voir un risque ou une dépression chez notre clientèle?

En validité, on a rarement un coefficient. On décrit ce qui en est ex: la validité a été testée et l’instrument semble mesurer ce pour quoi il a été conçu.

33
Q

Qu’est-ce que la validité de critère ou pragmatique?

A

inférence à partir du score à un test en rapport avec la performance à un comportement

34
Q

Quels sont les 2 types de la validité de critère ou pragmatique? + explique.

A
  1. Prédictive: peu de test ont été soumis sur celui-ci, car demande bcp de test à faire préalablement. Elle me permet de prédire ce qui arrivera plus tard. Je dois m’assurer que les @ instruments de métrologies soient OK. Ex: pilote d’avion doivent simuler des vols pour passer à d’@ étapes de leur formation. S’ils réussissent ces tests, alors ils feront d’@ test. Ex#2: Médecine dentaire: premier test= sculpté un savon.
  2. concomitante (de convergence): ex: GDS. Ici on compare l’instrument avec un goal standard. On compare le GDS avec un @ instrument qui permet de regarder la dépression. Cet instrument de testage a déjà fait ses preuves et a été approuvé.
35
Q

Qu’est-ce que la validité de construit?

A

S’effectue par une série d’études avec un ou plusieurs instruments dans le but de confirmer ou non des relations hypothétiques concernant un construit

**la + complexe. On va faire des analyse stats très sophistiquées pr se repencher sur notre concept. On remet en quest’ les items de nos instruments: e-c-q j’ai seulement 1 concept? E-c-q mon concept pt ê subdivisé. Ex: Un instrument mesurant l’intelligence, mais je me rend compte que certains items n’ont pas nécessairement de lien avec les @ items. Donc ex: sect’ 1 du test= mémoire, section 2: capacité d’abstraction. Ce sont des analyses qui me permettent vrm de confirmer mes hypothèses sur mon concept.

36
Q

Qu’est-ce que la validation transculturelle?

A
  • Adaptation d’un instrument d’évaluation dans une autre langue:
  • Il ne s’agit pas d’une simple traduction dans une autre langue

*On pt pas directement le traduire, car on touche aux qualités métrologiques ex: à la validation ex: validation de contenue, etc.

37
Q

A/n de la validation transculturelle, on tient compte de 5 niveau d’équivalence transculturelle, quels sont-ils? + explique

A
  1. contenu: ex: expert dans le domaine (si GDS) –> version anglais, on le fait traduire par traducteurs professionnels en français (habituellement 2 traducteurs indépendants), une fois qu’on a leur traduction on la compare avec l’original et ensuite d’@ experts pour analyser tt ça.
  2. sémantique: Au niv de la terminologie, des énoncés…
  3. technique: S’assurer que la traduction de techniques ne changent pas les techniques d’une culture à une @.
  4. critère(ex.:interprétation,normes): il y a instruments qui peuvent avoir des interprétation différente d’une culture à l’@. ex: MCRO, il y a aspect lié à la spiritualité qui diffère d’une culture à une @. On s’assure que cela ne modifie pas la validité de nos interprétations.
  5. conceptuelle(ex.:construit)
38
Q

Nomme quelques coefficients qui évaluent la fidélité

A
  • ICC (coefficient corrélation-intra‐ classe)
  • r (coefficient de corrélation)
  • kappa (+kappa pondéré)
  • alpha de Cronbach
39
Q

Exemple:
MOCA,
-Internal consistency: Cronbach’s alpha (alpha= 0.83)
-Test-retest: test‐ retest reliability(r= 0.92)
Que peux-tu déduire?

A
  • alpha 0,83 ê très bien. Les items sont assez cohérents pr évaluer les fct cognitives.
  • coefficient de corrélation (r). Il est très élevé, donc fidélité test-retest est très bonne. Cependant, il faudrait vérifier quel était le délais entre le test-retest. Donc, ici, le délais dt ê assez long pr pas que le client se souvienne de ses réponses, mais pas trop de temps pr que sa condition ne se soit pas modifié.
40
Q

Fidélité et validité des formes parallèles

Lien: test‐ retest?

A

Ex: Une personne âgée arrive à l’urgence confuse, déstabilisée. Le médecin lui administre MoCA 8,1. Le lendemain, la condition de la pers a changé, elle est bcp - confuse. Elle est plus stable. On vt lui adminitré un nouveau MOCA, mais sa condition a changé et le délais est très court (- de 24h). Donc, on lui administre MOCA 8,2 pr diminuer le biais relier à la notion de test re-test (délais extrêment court et condition changeante). Le MOCA 8,2 est un test équivalent à 8,1. On l’appelle une forme parallèle.

41
Q

Nomme 3 éléments en lien avec la validité.

A
  • Coefficient: pas toujours (exception)
  • réflexion
  • cadre théorique
42
Q

Quels pourraient être les dangers en lien avec la validité?

A

La validité d’un instrument sera affectée si on l’utilise avec une autre population que celle prévue.

43
Q

Qu’ê-ce que l’échelle de Borg?

A

Échelle de Borg: conçu pr évaluer la percept’ à l’effort: de 6 à 20 pr les adultes. 6-7 très très léger, 8-9: très léger, 10-11: léger, 12 et 13 mi léger, mi-dur.

ICI c’est échelle ordinale plus précisément de Likert (mm terminologie, mais avec des nuances différentes pr donner une certaine intensité à mes différentes cotes ). Originalement, échelle pr adulte, mais après il y a aussi échelle pr enfant. Celle avec enfant il y a image, donc un peu différents. Les cotes sont les mm. Adulte et enfants différents pcq la percept’ à l’effort n’ê pas la mm. Donc, il faut prendre stratégie un peu diff pr mesurer là chez l’enfant. Donc ici, on refait l’instrument pr valider pr une @ population.

44
Q

Quelles 2 autres caractéristiques métrologiques peut-on étudier outre la fidélité et la validité?

A
  • Sensibilité

- Spécificité

45
Q

Qu’est-ce que la sensibilité?

A

probabilité d’avoir un résultat positif au test parmi les patients qui ont un diagnostic positif.

-on vt voir sa capacité à voir les vrais positifs. Ex: GDS: Je vx ê sure de détecter les gens qui sont vrm en risque de dépression. Les vrais positif et NON les faux positifs.

46
Q

Qu’est-ce que la spécificité?

A

probabilité d’avoir un résultat négatif au test parmi les patients qui ont diagnostic
négatif.

Je vx que mon instrument détecte les vrai négatifs, GDS: Qd qql n’ê pas dépressif, je vx que mon test puisse me le dire

47
Q

Que veut-on dire lorsqu’un instrument est standardisé? Que regarde-t-on pour le qualifié de standardisé?

A

instruments (ou mesures ou tests) standardisés:

  • Normes
  • Particularité

*qd on dit qu’un instrument est standardisé c’est pcq il y a étude de norme, mais aussi pcq il pourra avoir un guide de passassion ultra précis méthode de cotation précisément décrite. Donc on pt appeler instrument standardisé mm s’il n’y a pas eu de norme, mais puisque le guide de passation est très très précis et on doit se conformé exactement aux règles qui y sont énoncé.

48
Q

Quel est le danger avec l’instrument-maison?

A

Danger= pas soumis à étude de validité/fidélité, donc très haut risque de biais de l’ergo. On n’a pas nécessairement de lien cibler entre les concepts… grande composante de subjectivité. La portion du E dans la formule prendra bcp de place dans ma formule. Meilleure stratégie= se pairé avec chercheur pr rafiné l’objectivité de l’instrument.

49
Q

Pourquoi doit-on vérifier les qualités métrologiques?

A

Pour s’assurer de:
Rigueur
-scientifique
- clinique

Formation

  • Parfois nécessaire pour certains instruments
  • Expertise requise
50
Q

Quels sont les risques d’utiliser instruments sans qualités métrologiques?

A
  • Erreur d’interprétation
  • Diagnostic (mauvais dx)
  • Problèmes non identifiés;faux problèmes
  • Mauvais traitement