
Mesure et évaluation en éducation
Volume 47, Number 2, 2024
Veuillez prendre note que des articles peuvent s’ajouter à ce numéro.
Table of contents (2 articles)
-
La validité de l’examen pratique sous le regard des experts en formation professionnelle initiale dans la branche du commerce de détail en Suisse
David Jan
pp. 1–38
AbstractFR:
En Suisse, en formation professionnelle initiale dans la branche du commerce de détail, la diplomation passe par l’examen pratique dans l’entreprise formatrice de l’apprenti. Cet examen, certificatif et éliminatoire, dure entre une heure et une heure et demie, selon le type de formation. Il est conduit par deux professionnels du domaine nommés experts. Les buts de cette étude sont, d’une part, de comprendre la validité attribuée par les experts à l’examen pratique et, d’autre part, de définir les raisons de cette évaluation. Pour y parvenir, un échantillon de 189 experts a répondu à un questionnaire sur la validité de cet examen. Les données ont été traitées par des analyses factorielles exploratoires. Nous avons ensuite extrait trois profils d’experts par classes latentes. Les résultats de cette étude ont permis de mettre en évidence, parmi les experts, une hétérogénéité de profils. Ils se différencient selon leur expérience en tant qu’expert et selon leur langue.
EN:
In Switzerland, at the end of their initial vocational education, retail apprentices take a practical examination at the company where they are being trained. This examination, which is both certifying and eliminating, lasts between one and one and a half hours, depending on the type of training. It is conducted by two professionals in the field known as examiners. The objectives of this study are, firstly, to understand the validity attributed to the practical examination by the examiners and, secondly, to define the reasons for this assessment. To achieve this, a sample of 189 examiners answered a questionnaire on the validity of this examination. The data were processed by exploratory factor analysis, and three expert profiles were extracted by latent classes. The results of this study highlighted the heterogeneity of the examiners profiles. They differ according to their experience as examiners and their language.
PT:
Na Suíça, na formação profissional inicial no setor do comércio a retalho, a atribuição de diplomas é feita através de um exame prático realizado na empresa formadora do aprendiz. Este exame, de caráter certificativo e eliminatório, tem uma duração de uma hora a uma hora e meia, dependendo do tipo de formação. É conduzido por dois profissionais da área, designados como peritos. Os objetivos deste estudo são, por um lado, compreender a validade atribuída pelos peritos ao exame prático e, por outro, identificar as razões dessa avaliação. Para tal, foi utilizado um questionário sobre a validade do exame, respondido por uma amostra de 189 peritos. Os dados foram analisados por meio de análises fatoriais exploratórias, a partir das quais foram extraídos três perfis de peritos através de classes latentes. Os resultados deste estudo evidenciaram uma heterogeneidade de perfis entre os peritos, diferenciando-se pela sua experiência enquanto peritos e pela sua língua.
-
Le développement d’une échelle de mesure de la littératie de l’intelligence artificielle chez les enseignants et les enseignantes du postsecondaire
Alexandre Lepage and Normand Roy
pp. 39–69
AbstractFR:
Le personnel enseignant des cégeps et des universités est de plus en plus confronté à des outils d’intelligence artificielle (IA), notamment des outils proposés par leurs établissements ou utilisés par les étudiants et les étudiantes. Or, l’utilisation pédagogique de ces outils exige une certaine compréhension de leur fonctionnement, surtout lorsqu’il est question d’en identifier les limites ou les risques éthiques. À l’heure actuelle, il n’existe aucune mesure précise du niveau de littératie de l’IA du personnel enseignant du postsecondaire. Cette étude propose un questionnaire de 25 items pour mesurer ce niveau de littératie, à partir d’une version initiale de 29 items. Un échantillon de 395 enseignants et enseignantes a été recruté via des listes institutionnelles dans des cégeps et des universités. Des analyses factorielles (exploratoire et confirmatoire) ont été réalisées et ont permis de détecter trois facteurs, soit les connaissances techniques liées à l’IA, la capacité à utiliser des outils d’IA en contexte pédagogique et le niveau de sensibilité aux enjeux éthiques.
EN:
Teaching staff in colleges and universities deal with the growing presence of artificial intelligence (AI) tools, for instance offered by their institution or used by their students. However, the pedagogical use of these tools requires some knowledge about how they work, especially when it comes to address their limitations and recognize the ethical risks they carry. As of today, there is no precise way to measure the level of AI literacy of higher education teachers. This study proposes a questionnaire with 25 items to address this issue, based on a first draft of 29 items. A sample of 395 teachers was recruited through mailing lists of colleges and universities. Exploratory and confirmatory factorial analyses were conducted and allowed the detection of three latent variables: technical knowledge related to AI, level of sensitivity to ethical concerns, and capacity to use AI tools in a pedagogical setting.
PT:
O corpo docente dos cégeps (Colégios de Ensino Geral Profissional) e das universidades confronta-se, cada vez mais, com ferramentas de inteligência artificial (IA), seja por meio de ferramentas propostas pelas suas instituições ou utilizadas pelos próprios estudantes. No entanto, a utilização pedagógica dessas ferramentas exige uma certa compreensão do seu funcionamento, sobretudo para identificar as suas limitações ou os riscos éticos associados. Atualmente, não existe nenhuma medida precisa do nível de literacia em IA dos docentes do ensino pós-secundário. Este estudo propõe um questionário de 25 itens para medir esse nível de literacia, a partir de uma versão inicial de 29 itens. Uma amostra de 395 docentes foi recrutada por meio de listas institucionais em colégios e universidades. Foram realizadas análises fatoriais (exploratória e confirmatória), que permitiram identificar três fatores: conhecimentos técnicos relacionados à IA, nível de sensibilização para questões éticas e capacidade de utilizar ferramentas de IA em contexto pedagógico.