Mesure et évaluation en éducation
Volume 40, numéro 1, 2017
Sommaire (5 articles)
-
Les conceptions des futurs enseignants du secondaire en matière d’évaluation : entre un accord de principe et une vision limitée de l’évaluation formative
Annick Fagnant et Christelle Goffin
p. 1–32
RésuméFR :
S’appuyant sur un questionnaire soumis à l’entrée en formation initiale, l’étude cherche à cerner la façon dont les futurs enseignants du secondaire perçoivent les liens entre évaluation et apprentissage. Elle s’intéresse aux différentes fonctions de l’évaluation, aux différentes formes d’évaluation formative que les futurs enseignants ont rencontrées dans leur parcours scolaire et à la façon dont ils peuvent imaginer des modalités d’évaluation variées. Alors que les résultats des questionnaires fermés montrent que les participants soutiennent une vision élargie de l’évaluation formative, les questions ouvertes témoignent quant à elles d’une vision étroite dans laquelle le versant régulation n’est pas suffisamment présent et où les élèves semblent peu impliqués. Les expériences vécues par les futurs enseignants au cours de leur scolarité semblent limitées et ils imaginent difficilement qu’il soit possible d’intégrer pleinement l’évaluation aux situations d’apprentissage.
EN :
Based on a questionnaire submitted at the very beginning of initial training, the study aims to identify how future secondary school teachers perceive the links between assessment and learning. The study also looks at different functions of assessment, at different kinds of formative assessment that future teachers encounter during their schooling and at the way they can image different evaluation procedures. When the results coming from Likert-type questionnaires show that participants sustain an enlarged vision of formative assessment, open questions show indeed a narrower view of assessment in which regulation is poorly represented and where students are few involved. Their experiences as students seem limited and they encounter difficulties to imagine how to fully integrate assessment in learning situations.
PT :
Com base num questionário submetido à entrada da formação inicial, o estudo pretende identificar o modo como os futuros professores do secundário concebem as ligações entre a avaliação e a aprendizagem. O estudo aborda as várias funções da avaliação, as diferentes formas de avaliação formativa com as quais os futuros professores se confrontam nos seus percursos escolares e o modo como podem imaginar modalidades de avaliação variadas. Embora os resultados dos questionários fechados mostrem que os participantes sustentam uma visão abrangente da avaliação formativa, as perguntas abertas refletem, em contrapartida, uma visão estreita na qual o lado de regulamentação não está suficientemente presente e onde os alunos parecem pouco envolvidos. As experiências vividas pelos futuros professores durante a sua escolaridade parecem limitadas, encontrando dificuldades para imaginar a possibilidade de integrar plenamente a avaliação nas situações de aprendizagem.
-
Évaluation des apprentissages en classe et évaluation à grande échelle : quels sont les effets des épreuves externes sur les pratiques évaluatives des enseignants ?
Gonzague Yerly
p. 33–60
RésuméFR :
Dans la plupart des systèmes éducatifs, les enseignants font face aujourd’hui à l’expansion des évaluations à grande échelle. Néanmoins, les effets de ces dispositifs sur les pratiques enseignantes sont encore peu connus. L’objectif de cet article est de proposer une analyse spécifique des effets des épreuves externes sur les pratiques d’évaluation des apprentissages. L’analyse qualitative compréhensive porte sur l’expérience de 16 enseignants du primaire confrontés aux épreuves externes du canton de Fribourg en Suisse (entretiens semi-dirigés). Les résultats montrent que ceux-ci se servent des contenus et de la forme des épreuves externes pour ajuster certaines démarches du processus d’évaluation sommative. Par contre, ils ne mobilisent que très peu les résultats, et les ajustements observés sont parfois réalisés de manière plutôt instrumentale afin d’optimiser la réussite des élèves aux épreuves. Dans le contexte étudié, ces effets plutôt modérés s’expliquent par différentes postures des enseignants quant à l’évaluation externe et/ou par leurs perceptions de certaines caractéristiques des dispositifs locaux.
EN :
Teachers must nowadays deal with large-scale external testing in most educational systems. Nevertheless, the impact of the uses of external testing by the teachers are still not well known. The aim of this study is to analyse specifically the impact of external testing on teacher’s assessment practices. A qualitative comprehensive analysis was carried out on the experiences of 16 primary teachers in the canton of Fribourg in Switzerland (semi-directive interviews). Results show that teachers may use external tests’ form and contents to adjust their assessment practices. In contrast, they seldom use their results, and the observed adjustments are sometimes made in an instrumental way, to optimize pupils’ achievement to the tests. In the studied context, moderate impact is due to different postures of teachers about external testing and/or to their perceptions of specific characteristics of local devices.
PT :
Na maioria dos sistemas educativos, os professores enfrentam hoje em dia a expansão das avaliações em larga escala. No entanto, os efeitos destes dispositivos nas práticas de ensino ainda são pouco conhecidos. O objetivo deste artigo é propor uma análise específica dos efeitos das provas externas sobre as práticas de avaliação das aprendizagens. A análise qualitativa compreensiva centra-se na experiência de 16 professores primários com provas externas no cantão de Friburgo na Suíça (entrevistas semiestruturadas). Os resultados mostram que os professores primários se servem do conteúdo e da forma das provas externas para ajustar certos procedimentos do processo de avaliação sumativa. Em contrapartida, praticamente não mobilizam os resultados, e os ajustamentos observados são por vezes realizados de maneira meramente instrumental para maximizar o sucesso dos alunos nas provas. No contexto estudado, estes efeitos bastante moderados explicam-se devido a diferentes posturas dos professores sobre a avaliação externa e às suas perceções de certas características dos dispositivos locais.
-
Production semi-automatisée d’une carte conceptuelle en science et technologie
Maxim Morin et Jean-Guy Blais
p. 61–99
RésuméFR :
Cet article décrit la conception et la mise à l’essai d’un programme informatique de production semi-automatisée de cartes conceptuelles. Cette technique dérivée de l’extraction d’information a pour but de produire une représentation simple et signifiante du contenu d’un ou de plusieurs textes sous forme d’un schéma de connaissances. Le programme a été mis à l’essai à partir de deux corpus de textes choisis pour couvrir deux thèmes du Programme de formation de l’école québécoise de quatrième secondaire en science et technologie. Les résultats de l’étude sont très encourageants et montrent le potentiel d’une telle approche pour faciliter la construction d’une carte conceptuelle, une tâche qui est généralement réalisée par des humains. Les résultats suscitent également quelques réflexions quant aux modalités courantes d’élaboration et d’évaluation de cartes conceptuelles.
EN :
This article presents the development and testing of a computer program for semi-automatic production of concept maps. This technique derived from information extraction intends to provide a simple and significant representation of the content of one or many texts by a knowledge diagram. The application was tested with two text corpora chosen for covering two themes coming from the Programme de formation de l’école québécoise of Secondary 4 in science and technology. The very encouraging results demonstrate the potential of this approach for easing the construction of concept maps, a process that is usually performed by humans. The results arouse as well some questions about the current methods for creating and assessing concept maps.
PT :
Este artigo descreve a conceção e o teste de um programa informático de produção semiautomatizada de mapas concetuais. Esta técnica derivada da extração de informação destina-se a produzir uma representação simples e significativa do conteúdo de um ou mais textos sob a forma de um esquema de conhecimentos. O programa foi testado a partir de dois corpus de textos selecionados para cobrir dois temas de ciência e tecnologia do Programa de formação do 4.º ano do secundário da escola quebequense. Os resultados do estudo são muito animadores e demonstram o potencial de uma tal abordagem para facilitar a construção de um mapa concetual, uma tarefa que geralmente é realizada por seres humanos. Os resultados suscitam também algumas reflexões sobre as modalidades atuais de elaboração e de avaliação de mapas concetuais.
-
Effets du Réseau d’enseignement prioritaire à Genève : comment mesurer les effets d’un dispositif implanté en plusieurs phases ?
Anne Soussi et Gianreto Pini
p. 101–128
RésuméFR :
Les précédentes évaluations n’ont pas permis de mettre en évidence des effets de la politique d’éducation prioritaire implantée à Genève (Réseau d’enseignement prioritaire) sur les compétences des élèves, pas plus en les comparant avec celles d’élèves scolarisés dans d’autres établissements ni même d’établissements présentant des caractéristiques sociodémographiques similaires n’ayant pas bénéficié du dispositif. Dans cet article, nous allons explorer une voie inspirée de l’analyse des séries temporelles afin de mesurer les effets d’un dispositif d’éducation prioritaire mis en place de manière progressive et de tenir ainsi compte du temps d’exposition différent des élèves. La méthode utilisée consiste à considérer pour chaque établissement quatre moments différents. Ce plan expérimental permet de répondre aux questions suivantes : Existe-t-il une évolution positive des résultats des élèves après l’introduction du dispositif ? Qu’en est-il deux ans plus tard ?
EN :
Previous research did not highlight any positive effects of Geneva Educational Priority Policy on students’ skills (the Réseau d’enseignement prioritaire). Students in educational priority school underperformed compared to their counterparts in other schools, even when these schools had similar sociodemographic characteristics. In this article, we will explore a different method to measure the effects of this progressive educational priority device. More specifically, we will use a method based on time series analysis, and thus take account of different exposure time of students. This method consists in four different times for each school. This experimental design will give answers to the following questions: Is there a positive evolution of students’ results after the introduction of the device? And two years later?
PT :
As avaliações anteriores não conseguiram demonstrar os efeitos da política de educação prioritária implementada em Genebra (criação da Rede de ensino prioritário) sobre as competências dos alunos, nem compará-los com os efeitos nos alunos de outras escolas nem mesmo com escolas que apresentam características sociodemográficas similares. Neste artigo, vamos explorar um caminho inspirado pela análise de séries temporais para medir os efeitos do dispositivo de educação prioritária implementado gradualmente e, assim, ter em conta o diferente tempo de exposição dos alunos. O método utilizado consiste em considerar para cada estabelecimento quatro momentos diferentes. Este plano experimental permite responder às seguintes questões: Há uma evolução positiva dos resultados dos alunos após a introdução do dispositivo? E dois anos mais tarde?
-
La méthode de notation d’un questionnaire importe-t-elle ?
Christophe Chénier
p. 129–154
RésuméFR :
Bien qu’il existe plusieurs méthodes de notation pour assigner des scores aux répondants d’un questionnaire, peu d’études ont comparé les effets que pourraient avoir les méthodes choisies sur les corrélations entre les scores obtenus et d’autres variables. Cette recherche vise à combler ce manque en comparant les coefficients de corrélation entre les scores générés par sept méthodes de notation à partir de données réelles et, à défaut de données réelles accessibles, huit variables générées aléatoirement. Les résultats montrent que les corrélations sont presque identiques et qu’aucune méthode de notation n’a d’effet systématique sur la force des corrélations obtenues. Ce résultat est conforme aux résultats antérieurs et il est recommandé aux chercheurs de privilégier l’utilisation d’une méthode de notation simple et pouvant être utilisée avec des données manquantes.
EN :
Even though several scoring methods exist for scoring questionnaires, few studies have compared the potential effects of scoring methods on the correlations between the scores and other variables. This study seeks to fill this void, by comparing the correlation coefficients between the scores obtained with seven scoring methods from real datasets and, in lieu of available real data, eight randomly generated variables. The results show that the correlations are nearly identical and that no scoring method has a systematic effect on the strength of the resulting correlations. This result reinforces previous results and it is thus recommended that researchers favor the use of simple scoring methods able to handle missing data.
PT :
Embora existam vários métodos de pontuação para atribuir pontuações aos respondentes de um questionário, poucos estudos compararam os efeitos que poderiam ter os métodos escolhidos sobre as correlações entre as pontuações obtidas e as outras variáveis. Esta investigação visa preencher esta lacuna através da comparação dos coeficientes de correlação entre as pontuações geradas por sete métodos de pontuação com base em dados reais e, na ausência de dados reais disponíveis, oito variáveis geradas aleatoriamente. Os resultados mostram que as correlações são quase idênticas e nenhum método de pontuação tem um efeito sistemático sobre a força das correlações obtidas. Este resultado é consistente com resultados anteriores e é recomendado que os investigadores privilegiem a utilização de um método de pontuação simples e que pode ser utilizado com dados ausentes.