STABILITÉ: FIDÉLITÉ PAR TEST-RETEST
DÉFINITION
La fidélité par test-retest consiste simplement à administrer à nouveau le même test aux mêmes sujets après un certain intervalle de temps
- Coefficient de fidélité -> corrélation entre les scores obtenus à chacune des deux (ou plus) passations
- Variance d'erreur -> fluctuations aléatoires des performances d'une session de passation à l'autre
- Sources d'erreur
- Conditions d'administration mal contrôlées
- Correction non uniforme (même correcteur)
- Changements (non pertinents) chez l'examiné (anxiété, fatigue, ...)
- etc.
Postulat important: la caractéristique mesurée est stable (ne change pas) à l'intérieur de l'intervalle de temps considéré
- Il faut donc que cette caractéristique soit bien définie, à l'intérieur d'un certain «cadre théorique»
La stabilité d'un test indique donc à quel point on peut généraliser les résultats au test à diverses occasions
- Plus le test est stable, moins les scores sont sensibles à des variations temporelles non pertinentes par rapport à ce qui est mesuré
Lorsque ce type de fidélité est évaluée, il faut considérer:
- L'intervalle de temps entre les deux passations
- Les expériences vécues par les examinés
CHOIX DE L'INTERVALLE DE TEMPS
Habituellement, la corrélation test-retest diminue à mesure que l'intervalle de temps est augmenté
- Exemple: les tests d'intelligence sont relativement stables sur de courtes périodes (e.g. moins d'un an), mais peu stables sur de plus longues périodes
Le problème est de déterminer si l'instabilité est attribuable à des changements réels quant à la caractéristique mesurée, ou à des fluctuations non pertinentes
- Exemple: on mesure la température extérieure à deux reprises avec le même thermomètre et on obtient successivement 28C et -10C
- Si ces mesures sont séparées par un intervalle de 5 minutes, la mesure fournie par le thermomètre est probablement instable (infidèle)
- Si ces mesures sont séparées par un intervalle de 5 mois, la mesure est peut-être stable et la différence est peut-être pertinente
En pratique, selon la caractéristique mesurée, on distinguera
- Les fluctuations à court terme, qui affectent d'abord la performance au test
- Selon ce qui est mesuré: de quelques heures à quelques mois
- On les attribue à l'erreur de mesure, i.e. instabilité
- Les fluctuations à long terme, qui affectent l'ensemble de la caractéristique
- Selon ce qui est mesuré: quelques jours, mois, années...
- On les attribue à des facteurs externes à la situation de testage, tels que le développement, les expériences particulières, etc.
DIFFICULTÉS
La détermination de l'intervalle de temps (c.f. ci-dessus)L'«effet de pratique» peut modifier de façon différentielle la performance au test
Certains facteurs peuvent hausser artificiellement le coefficient de stabilité, surestimant ainsi la fidélité de la mesure
- Exemple: la mémorisation des réponses
De plus, le fait d'avoir déjà passé le test peut modifier la mesure elle-même
- Exemples: découverte de stratégies, «introspection» suite au test, etc.
Par conséquent, l'analyse de la fidélité par test-retest n'est pertinente que dans la mesure où le test est peu ou pas sensible à l'effet de la répétition
- Exemple: discrimination sensorielle (si le nombre de répétitions est sensé)