FR:

Devant les difficultés des enseignants et des chercheurs à évaluer efficacement l’oral, les grilles critériées semblent une solution pertinente. Cependant, l’interprétation des critères de la grille varie en fonction du cadre de référence de l’évaluateur. Dans cette étude, une comparaison a été réalisée entre un groupe de cinq enseignants et un groupe de quatre chercheurs dans la conception de deux grilles critériées permettant d’évaluer la compétence à communiquer oralement des élèves de fin de primaire. Les résultats de notre analyse qualitative montrent que les difficultés, les modalités d’utilisation de la grille, les types de justifications et les solutions apportées par les deux groupes professionnels varient quelque peu. Les propos des enseignants sont plus ancrés dans le concret et fortement liés au contexte de la classe. Le groupe des chercheurs, quant à lui, s’est assuré que l’outil construit permet une mesure fine de la compétence à communiquer oralement et s’est interrogé sur l’organisation structurelle de la grille construite.

EN:

Assessment rubrics seem to be a relevant solution when teachers and researchers have difficulties in assessing oral language effectively. However, the interpretation of the rubrics depends on the evaluator’s frame of reference. In this study, a comparison was made between a group of five teachers and a group of four researchers in the conception of two rubrics to assess pupils’ oral communication skills at the end of elementary school. The results of our qualitative analysis show that the difficulties, the ways of using the rubrics, the types of justifications and the solutions experimented by the two groups of professionals somewhat vary. Teachers opted for more grounded solutions, strongly linked to their experience and their classroom context. As for researchers, they had to make sure that the constructed rubric allows a precise measure of oral communication skills and had to question the structural organization of the rubric.

PT:

Perante as dificuldades de professores e investigadores em avaliar eficazmente a oralidade, as rubricas parecem ser uma solução pertinente. No entanto, a interpretação dos critérios de uma rubrica varia em função do quadro de referência do avaliador. Neste estudo, foi feita uma comparação entre um grupo de cinco professores e um grupo de quatro investigadores na conceção de duas rubricas para avaliar a competência de comunicação oral de alunos no final do 1.º ciclo do ensino básico. Os resultados da nossa análise qualitativa mostram que as dificuldades, as modalidades de utilização da rubrica, os tipos de justificações e as soluções apresentadas pelos dois grupos profissionais variam um pouco. Os comentários dos professores estão mais ancorados no concreto e fortemente vinculados ao contexto da sala de aula. O grupo de investigadores, por sua vez, certificou-se de que a ferramenta construída permite uma medição fina da competência para se comunicar oralmente e questionou-se sobre a organização estrutural da rubrica construída.

FR:

Cet article vise à proposer une consolidation du domaine de la sociologie de l’évaluation scolaire, dans la suite des efforts entrepris en ce sens dans les années 1990. La mise à jour de ce domaine est cruciale, entre autres pour comprendre les changements survenus dans les pratiques d’évaluation des apprentissages des élèves à la suite de la mise en place de la nouvelle gestion publique. Pour ce faire, nous proposons une synthèse des connaissances adossée à l’analyse de 59 textes en français entretenant des liens étroits avec une sociologie de l’évaluation scolaire. Notre analyse fait ressortir quatre catégories d’enjeux sociologiques découlant de cette littérature : 1) la fonction formative de l’évaluation et la progression des apprentissages ; 2) l’évaluation d’un savoir agir et l’adaptation aux contextes complexes ; 3) l’évaluation externe et standardisée, et la fabrication des résultats mesurables ; et 4) l’évaluation comme matérialisation des normes d’excellence et la démocratisation de la réussite scolaire. Nous concluons avec la présentation de perspectives de recherche qui favoriseraient la consolidation de ce domaine.

EN:

This article aims to consolidate the field of the sociology of educational assessment, following the efforts made in this direction in the 1990s. Updating this field is crucial to better understand, among other things, the changes that have occurred in student learning assessment practices following the implementation of the new public management. We offer a literature review of 59 French-language texts maintaining close links with the field of the sociology of educational assessment. Our analysis highlights four categories of sociological issues arising from this literature: 1) the formative function of assessment and the progression of learning; 2) the assessment of an ability to act and the adaptation to complex contexts; 3) the external and standardized evaluation, and the production of measurable results; and 4) the assessment as the materialization of standards of excellence and the democratization of academic success. We conclude with the presentation of research perspectives that would favour the consolidation of this field.

PT:

Este artigo tem como objetivo propor a consolidação do campo da sociologia da avaliação escolar, a partir dos esforços empreendidos neste sentido na década de 1990. A atualização deste campo é fundamental, entre outras coisas, para compreender as mudanças ocorridas nas práticas de avaliação das aprendizagens dos alunos após a implementação da nova gestão pública. Para isso, oferecemos uma síntese dos conhecimentos apoiada na análise de 59 textos em francês, mantendo uma estreita ligação com uma sociologia da avaliação escolar. A nossa análise destaca quatro categorias de questões sociológicas decorrentes dessa literatura: 1) a função formativa da avaliação e a progressão das aprendizagens; 2) a avaliação do saber-fazer e a adaptação a contextos complexos; 3) a avaliação externa e estandardizada e produção de resultados mensuráveis; e 4) avaliação como materialização de padrões de excelência e a democratização do sucesso escolar. Concluímos com a apresentação de perspetivas de investigação que poderão favorecer a consolidação deste campo.

FR:

Cette étude présente la conception et le processus de validation d’un instrument de mesure de la socialisation au travail des enseignants débutants. Un total de 1487 enseignants de différents niveaux d’enseignement obligatoire ont été interrogés. Les fondations théoriques ainsi que les analyses factorielles exploratoires et confirmatoires mettent en évidence quatre dimensions de socialisation au travail : la socialisation au groupe de travail, au climat micropolitique, aux tâches d’enseignement ainsi qu’à l’organisation. L’instrument proposé présente, en respect de différents critères consensuels quant aux processus de validation d’échelles, des arguments de validité élevés. Cette contribution nourrit l’enjeu majeur d’une approche globalisante de l’insertion des enseignants qui va au-delà des approches centrées sur le travail de l’enseignant en classe.

EN:

This study presents the development and validation process of an instrument to measure early career teachers’ work socialization. A total of 1487 teachers of different levels of education participated is this study. The theoretical foundations as well as the exploratory and confirmatory factorial analyses highlight four dimensions of work socialization: socialization into the workgroup, into the micro-political climate, into the teaching tasks and into the organization. According to commonly used validity process standards, the proposed instrument demonstrates high validity evidences. This contribution offers support for the adaptation of a holistic approach towards teacher induction that goes beyond classroom work tasks.

PT:

Este estudo apresenta a conceção e a validação de um instrumento de medida da socialização no trabalho de professores principiantes. Foram entrevistados 1.487 professores de diferentes níveis de escolaridade obrigatória. Os fundamentos teóricos, bem como as análises fatoriais exploratórias e confirmatórias, destacam quatro dimensões da socialização no trabalho: a socialização no grupo de trabalho, no clima micropolítico, nas tarefas docentes e também na organização. O instrumento proposto apresenta, de acordo com diferentes critérios consensuais para validação de escalas, fortes argumentos de validade. Trata-se de um contributo para o grande desafio de uma abordagem globalizante da indução docente que ultrapasse as abordagens centradas no trabalho docente em sala de aula.

FR:

Au cours des dernières décennies, certains auteurs ont suggéré de rejeter le coefficient alpha (α) de Cronbach (1951) pour adopter le coefficient oméga (ω) de McDonald (1985, 1999) basé sur un modèle d’analyse factorielle. Après avoir présenté certaines limites inhérentes à l’α, nous présentons le coefficient ω et ses déclinaisons en poursuivant deux objectifs : comprendre la logique théorique derrière les coefficients de fidélité oméga et exposer les spécificités des coefficients ω sur le plan de leur méthode de calcul. À cet effet, nous distinguons les conditions d’usage des différentes formes d’ω (total ou hiérarchique, dans le cadre d’une AFE ou d’une AFC). Un exemple d’analyse et des recommandations sont proposés pour mieux argumenter la fidélité des scores.

EN:

In recent decades, some authors have proposed rejecting Cronbach’s alpha (α) coefficient (1951) to adopt McDonald’s omega (ω) coefficient (1985, 1999) which is based on a factor analysis model. After presenting some inherent limits of the α, this article follows two aims : (i) understanding the theoretical logic behind omega coefficients and (ii) presenting ω coefficients’ specificities regarding their computation method. To this end, we identify conditions for the use of the different forms of ω (total or hierarchical, with an EFA or CFA). An example of analysis and recommendations are suggested to better argue the score reliability.

PT:

Nas últimas décadas, alguns autores sugeriram a rejeição do coeficiente alfa (α) de Cronbach (1951) para se adotar o coeficiente ómega (ω) de McDonald (1985, 1999) baseados num modelo de análise fatorial. Após a apresentação de certas limitações inerentes ao α, apresentamos o coeficiente ω e as suas variações, prosseguindo dois objetivos : compreender a lógica teórica subjacente aos coeficientes de fidelidade ómega e expor as especificidades dos coeficientes ω em termos do seu método de cálculo. Para este fim, distinguimos as condições de uso das diferentes formas de ω (total ou hierárquico, no quadro de um AFE ou AFC). Um exemplo das análises e das recomendações são propostas para melhor argumentar a fidelidade das pontuações.