Does Portfolio-Based Language Assessment Align with Learning-Oriented Assessment? Evidence from Literacy Learners and their Instructors

Abstract

A high-stakes Portfolio-Based Language Assessment (PBLA) protocol that was fully implemented in all Language Instruction for Newcomers to Canada (LINC) programs in 2019 requires instructors and students to set language-learning goals and complete, compile, and reflect on numerous authentic language tasks. Due to the language barriers incurred when communicating with beginner English-as-a-second-language literacy learners (BELLs), no PBLA research has been conducted with BELLs. To address this gap, we interviewed 26 BELLs (n = 2 from 13 L1s) and their instructors (n = 4) about their understanding and use of PBLA. Student interviews were conducted with the assistance of bilingual interpreters in the students’ L1s. All the interviews were then transcribed and thematically analyzed in relation to PBLA’s alignment with the six dimensions in Turner and Purpura’s (2016) learning-oriented assessment framework: contextual, elicitation, proficiency, learning, instructional, interactional, and affective. Results have implications for optimizing learning, and task-based instruction and assessment practices in LINC.

Résumé

Le protocole d’évaluation linguistique basé sur le portefolio (Portfolio-Based Language Assessment - PBLA) à enjeux élevés a été entièrement mis en œuvre dans tous les programmes des cours de langue pour les immigrants au Canada (Language instruction for Newcomers to Canada - LINC) en 2019.  Ce protocole exige que les enseignants et les élèves fixent des objectifs d'apprentissage des langues et accomplissent, compilent et réfléchissent à de nombreuses tâches linguistiques authentiques. En raison des barrières linguistiques rencontrées lors de la communication avec des apprenants débutants en anglais langue seconde peu littératiés, aucune recherche PBLA n'a été menée auprès des apprenants. Pour combler cette lacune, nous avons interviewé 26 apprenants (n = 2 de 13 L1) et leurs enseignants (n = 4) au sujet de leur compréhension et de leur utilisation du PBLA. Les entretiens avec les élèves ont été menés avec l’aide d’interprètes bilingues dans les L1 des élèves. Ensuite, tous les entretiens ont été transcrits et analysés de manière thématique en relation avec l'alignement du PBLA avec les six dimensions du cadre d'évaluation axé sur l'apprentissage de Turner et Purpura (2016): contextuel, élicitation, compétence, apprentissage, pédagogique, interactionnel et affectif. Les résultats ont des implications pour l'optimisation de l'apprentissage et les pratiques d'enseignement et d'évaluation basées sur les tâches dans l'enseignement de la langue pour les nouveaux arrivants au Canada.