Accord interjuges des nouveaux domaines, la littératie et la numératie, de l’AEPS/EIS Inter-rater agreement of the news areas, literacy and numeracy of the AEPS/EIS

Résumé

Cet article présente les degrés d’accord interjuges entre deux évaluateurs pour les nouveaux domaines, la littératie et la numératie, du Programme EIS Évaluation Intervention Suivi, une adaptation francophone de l’Assessment, Evaluation, and Programming System (AEPS). Depuis plusieurs années, les tests d’évaluation conventionnels du développement sont source d’insatisfaction pour les intervenants oeuvrant auprès d’enfants présentant des incapacités, en raison des protocoles d’administration rigides et des exercices d’évaluation éloignés des comportements naturels de l’enfant, ce que pallie l’AEPS/EIS. Ce dernier, un outil d’évaluation du développement de l’enfant, vise dans sa nouvelle édition l’introduction des domaines de la littératie et de la numératie. Les questions de recherche de la présente étude concernent les degrés d’accord interjuges entre deux évaluateurs pour chacun des deux domaines et pour chacun des buts qui les composent. L’échantillon est constitué de 32 enfants, évalués dans leur milieu de vie. Les résultats montrent un degré d’accord excellent pour la littératie et substantiel pour la numératie. Seul un but en littératie présente un degré d’accord faible. De même, seule une absence d’accord est notée pour un but de la numératie. En conclusion, les nouveaux domaines présentent des qualités psychométriques intéressantes sur le plan de la fidélité. Cette étude est un apport au processus d’élaboration des domaines de la littératie et de la numératie de l’AEPS/EIS. Néanmoins, la poursuite de la validation de l’ensemble de la nouvelle édition demeure incontournable.

Mots-clés :

• Évaluation authentique,
• développement de l’enfant,
• fidélité,
• test conventionnel,
• littératie,
• numératie

Abstract

This article presents the degree of interjudge reliability between two raters in regard to the new literacy and numeracy domains found in the Programme EIS Évaluation Intervention Suivi, which is the French traduction of the Assessment, Evaluation, and Programming System (AEPS). For several years now, actors working alongside children with disabilities have been unsatisfied with conventional tests evaluating the child’s development due to the rigid nature of the administrative protocols and the inconsistency of the assessment exercises when comparing them to the natural behavior of the child, two issues that are remedied with the AEPS. This tool for the assessment of the development of the child aims to introduce the domains of literacy and numeracy to its latest edition. The research questions tackled in the study are concerned with the interjudge reliability between two raters tasked with evaluating both domains as well as the objectives that constitute them. The sample is composed of 32 children who have been evaluated in their natural living environment. The results show an excellent interjudge reliability for literacy and a substantial one for numeracy. In conclusion, as far as their fidelity is concerned, the new domains present some interesting psychometric qualities. While this study contributes to the elaboration process surrounding AEPS’s domains of literacy and numeracy, more studies are required in order to further validate the new edition of the program, as a whole.

Keywords:

• Authentic assessment,
• children development,
• fidelity,
• conventional test,
• literacy,
• numeracy