FR:

Les programmes de dépistage précoce et continu visent à préciser les besoins d’apprentissage que tout élève âgé entre quatre et huit ans peut rencontrer dans son développement physique, cognitif, social et émotif. Qu’arrive-t-il lorsque des conseils scolaires, convaincus de l’importance de procéder à pareil dépistage, adoptent un programme conjoint ? Pour répondre à cette question, les chercheures procèdent à une analyse des questionnaires d’opinion portant sur le niveau de satisfaction perçu par les directions d’école, les enseignantes et les parents d’élèves du premier cycle de l’élémentaire. En comparant les attentes préimplantation aux résultats postimplantation, les chercheures mettent en évidence certaines tendances quant à l’effet perçu d’un tel programme. D’une part, nos résultats indiquent que les répondants sont confiants que le programme permet effectivement de relever les problèmes de développement des élèves. D’autre part, ils révèlent que leur degré de satisfaction s’inverse lorsque ces répondants constatent l’absence de ressources appropriées, une fois le dépistage effectué. L’absence perçue de programmes d’appui adaptés fait en sorte que la confiance ressentie quant à la pertinence d’un tel programme est sérieusement compromise. En fait, le personnel scolaire en vient à considérer ses tâches liées au dépistage comme un fardeau d’autant plus lourd qu’il ajoute à leurs fonctions un profond sentiment d’impuissance à répondre aux besoins des élèves identifiés.

EN:

Early and ongoing screening programs aim at identifying the needs faced by 4 to 8-year-old school children in regards to their physical, cognitive, social and emotional development. The question at stake here is what happens when several schoolboards adopt a joint program designed to respond to such needs? To answer this question, the researchers undertake an opinion survey addressing the degree of satisfaction of parents and the school personnel vis-à-vis one such program. By comparing the expectations that precede and follow program implementation, the reseachers identify interesting patterns with respect to family and school perceptions of program impact. On the one hand, our findings show how the program under study is thought to foster a better understanding of the special needs of the school children. On the other hand, they also highlight the perceived lack of appropriate follow-up measures. To this deficiency should be added the absence of adequate physical and human resources being provided throughout program implementation, a reported deficiency that seriously undermines program efficiency. Lastly, there is a tendency for school personnel to view this program as increasing their workload, creating feelings of frustration that further reduce perceptions of program success.

FR:

Les modèles multiniveau ont été conçus pour modéliser des structures hiérarchisées, où les individus (par exemple, des élèves) sont groupés dans des unités d’un niveau supérieur (par exemple des classes). Ils permettent d’analyser les effets de l’environnement sur les comportements des individus. Nous nous attacherons ici plus spécifiquement aux effets de l’environnement scolaire sur les acquis des élèves dans le cadre des recherches sur ce qu’il est convenu d’appeler l’évaluation des effets-maîtres et des effets-écoles. Cet article, après avoir rappelé les fondements des modèles multiniveau, présente, sur la base de cas empiriques, de nouveaux champs d’application des modèles multiniveau. Ces champs d’application apparaissent particulièrement importants pour l’évaluation en éducation : il s’agit de la modélisation des courbes de croissance et de celle des effets aléatoires croisés.

EN:

Multilevel models have been conceived to analyse hierarchical structures in which individuals (e.g., students) are nested within higher level units (e.g., classrooms). Multilevel models allow one to analyse the effects of the environment on individuals’ behaviour. In this article, we focus on schooling environments and their effects on students’ achievement within the framework of teacher effectiveness and school effectiveness research. After reviewing the principles of multilevel modelling, this article presents — on the basis of empirical data — new applications of multilevel models. These new applications are particularly fruitful for evaluation in education. They involve modelling of growth curves and of random crossed effects.

FR:

L’analyse de la documentation a permis d’établir une importante variabilité dans la façon de définir et de mesurer l’efficacité d’un programme. Comment alors vérifier si différents acteurs d’un même programme conçoivent de façon similaire l’efficacité de ce programme ? Grâce à la collaboration de 35 acteurs provenant d’une organisation du domaine de la santé de la région de Québec, 20 programmes fictifs ont été élaborés. Le cadre conceptuel utilisé est présenté, les programmes fictifs élaborés sont décrits, les différentes étapes de construction de ces programmes fictifs sont détaillées et une synthèse des résultats obtenus lors de leur préexpérimentation est présentée. Les résultats démontrent que ces programmes fictifs constituent un outil valide et pratique permettant d’observer les comportements des acteurs en situation d’évaluation, et de là, ils permettent de saisir la conception de l’efficacité privilégiée par ces mêmes acteurs. Les applications possibles de l’approche par simulation dans d’autres contextes d’évaluation sont également présentées.

EN:

The analysis of the documentation on effectiveness allows to establish an important variability in the way the effectiveness of a program is defined and measured. How can we verify if differents actors of a same program conceptualize the effectiveness of a program in the same way? Following the collaboration of 35 actors from an organization in the health field in the Québec City area, 20 simulated programs were developped. An overview of the conceptual framework that served as the basis for the 20 simulations, a description of the simulations including a summary of the process used to develop it and a report of the data regarding the preexperimentation of the program simulations are presented. The 20 simulations were found to be valid and a practical instrument that allows the observation of the behavior of the actors in a situation of evaluation of the effectiveness of a program, and from there, capturing the conception of the effectiveness favoured by these actors. The possible applications of the simulation approach in other contexts of evaluation will be presented.

FR:

Cette recherche vise à vérifier les qualités psychométriques de la version canadienne-française du Stress Appraisal Measure (Pelchat, Ricard, Lévesque, Perreault & Polomero, 1994) dans un contexte de stress réel. Originalement, cet outil a été élaboré et validé par Peacock et Wong (1990) pour mesurer l’appréciation cognitive d’une situation anticipée pouvant engendrer le déclenchement de mécanismes de réponse au stress. La présente étude est réalisée auprès d’un échantillon de 1458 infirmières vivant une situation de précarité d’emploi. Cette situation est considérée ici comme une situation génératrice de stress. Les résultats de l’analyse en composantes principales avec rotation varimax révèlent une structure à cinq facteurs plutôt qu’à six tel que prescrit par le cadre théorique. Les coefficients de cohérence interne pour les six dimensions varient de 0,65 à 0,89.

EN:

This research aims to verify the psychometric caracteristics of the French Canadian version of the Stress Appraisal Measure (Pelchat, Ricard, Lévesque, Perreault & Polomero, 1994) with subjects actually living an ongoing stressful situation. The original English version of the instrument was designed and validated by Peacock and Wong (1990) for measurement anticipatory stress appraisal. This study was conducted with a sample of 1458 nurses living uncertainty regarding their job status. The uncertainty regarding the job status was seen as a stressor. Principal component analysis with varimax rotation showed a five-factor structure instead of six-factor structure prescribed by the theoretical framework. Internal consistency coefficients for the six dimensions range from .65 to .89.