NOTION D'ERREUR DE MESURE

La fidélité réfère à la reproductibilité des scores obtenus par les mêmes individus lorsque:

• On administre le même test à différentes occasions
• On administre un ensemble différent d'items jugés équivalents
• On administre le test sous différentes conditions

ERREUR DE MESURE

En principe, si on suppose que la caractéristique effectivement mesurée est insensible à ces différents facteurs non pertinents, les scores obtenus devraient être identiques pour un individu donné dans diverses circonstances

• En pratique, ce n'est pas le cas puisque les scores fluctuent
• Ces fluctuations seront attribuées à l'erreur de mesure
• Il est important de noter ici que la notion de fidélité s'intéresse à ce qui est effectivement mesuré et non à ce qui «devrait» être mesuré
• C'est pourquoi l'erreur dont il est question ici est supposée parfaitement aléatoire et non systématique
• Exemple: même si quelqu'un utilise un thermomètre pour mesurer l'«intelligence», la mesure peut être parfaitement fidèle en autant que les scores (i.e. les valeurs lues sur le thermomètre) soient reproductibles

De façon plus technique, on suppose que le score obtenu à un test est une somme d'une composante «vraie» et d'une composante d'erreur

• En formule:
  
• X_t = le score effectivement obtenu
• X_v = le score «vrai»
• X_e = l'erreur de mesure
• Plusieurs postulats sont sous-jacents à cette décomposition
• Le score «vrai»: existe ou vu comme tendance centrale
• Le score «vrai» et l'erreur sont indépendants
• etc.
• Chacune de ces deux composantes introduira de la dispersion au niveau des scores individuels

VARIANCE D'ERREUR

Comme chacune des composantes («vraie» et d'erreur) introduit une certaine variation, l'analyse de la fidélité d'un test consistera à déterminer dans quelle mesure les différences individuelles observées sur les scores peuvent être attribuées:

• À de «vraies» différences quant à la caractéristique effectivement mesurée
• ou
• À des erreurs de mesure dues au hasard

De façon technique, la mesure de la fidélité consistera à estimer la proportion de variance totale des scores attribuable

• À la variance «vraie» quant à la caractéristique
• ou
• À la variance d'erreur

Le problème est de définir la nature de cette variance d'erreur

• Selon les contextes, certaines fluctuations peuvent être vues comme «vraies» ou comme de l'erreur de mesure
• Exemple: des scores qui fluctuent à l'intérieur d'une même journée
• «Vrai» s'il s'agit du degré de «vigilance intellectuelle»
• «Erreur» s'il s'agit de «capacités intellectuelles générales»
• Globalement, on pourrait dire que toute variance introduite par des facteurs autres que la caractéristique constitue de la variance d'erreur

SOURCES DE L'ERREUR

En principe, il existe autant de types de mesure de la fidélité qu'il existe de facteurs pouvant introduire de la variance d'erreur dans les scores

En pratique, on distingue quelques classes de mesure de fidélité qui s'intéressent aux grandes catégories d'erreur de mesure

• Stabilité: variations temporelles
• Équivalence: variations des contenus (et temporelles)
• Cohérence interne: variations des contenus
• Homogénéité: variations des contenus
• Fidélité entre les correcteurs: variations inter-correcteurs

Les sources d'erreur peuvent se combiner ou même interagir

• Le fait qu'un test soit insensible à une certaine source d'erreur ne garantit pas qu'il soit insensible à d'autres sources
• Exemple: un test peut être stable sans pour autant être homogène

FIDÉLITÉ ET CONTEXTE

Il est important de noter qu'un test n'est pas fidèle «en soi», mais que sa fidélité dépend du contexte d'utilisation

• «On devrait parler de la fidélité d'un certain instrument, administré à une certaine population, sous certaines conditions»
• Par conséquent, toute étude de fidélité d'un test devrait préciser
• Le type de fidélité évalué
• Les conditions d'administration
• La population à laquelle réfère l'échantillon de l'étude
• Toute déviation par rapport au contexte de l'étude de fidélité d'un test risque de modifier le degré de fidélité de l'instrument

Suite > COEFFICIENT DE FIDÉLITÉ