Abstract: This paper examines the way in which five Chilean universities have implemented the mandatory initial diagnostic assessment in pre-service teacher training. The law states that the outcomes of this assessment will be used to enhance students’ learning processes. In addition, universities are entitled to autonomy to define what to evaluate and how to carry it out. Considering the purpose and scope of this evaluation, the aim of this paper is to better understand how these assessments have been implemented by universities and how institutional settings have affected the way in which universities have put this assessment into practice. In order to explore this phenomenon, the research employed a multiple case study approach. In this context, semi-structured interviews were carried out with institutional representatives, along with analysis of a set of diagnostic assessments and their psychometric test results. Drawing upon the triangulation of the information generated, the paper concludes that the most important elements affecting the implementation of this initial diagnostic assessment are, on the one hand, professionals’ technical skills and, on the other, the resources that teacher training programs or faculties have. There was a lack of relationship between the assessment and the admission profiles and training programs.

Resumen: En este artículo se estudia la implementación, en cinco universidades chilenas, de una ley que mandata la aplicación de una evaluación diagnóstica inicial en las carreras de pedagogía. La ley indica que los resultados de esta evaluación serán referenciales y tendrán un uso formativo para los estudiantes; asimismo, da autonomía a las universidades para definir qué y cómo evaluar. Considerando la importancia de esta evaluación y su alcance, el objetivo de este artículo es entender cómo se implementan estas evaluaciones y cómo su aplicación se relaciona con el contexto de cada institución. La metodología utilizada corresponde al estudio de casos y los datos analizados corresponden a entrevistas a representantes institucionales, al análisis de las evaluaciones efectuadas y a sus resultados psicométricos. Se concluye que los aspectos contextuales más importantes para definir las evaluaciones diagnósticas fueron las capacidades técnicas y los recursos a los que pudieron acceder las escuelas de pedagogía y se observó una desarticulación con los perfiles de ingreso o programas formativos.

Abstract This study analyzes the capacity of two classroom observation instruments, Classroom Assessment Scoring System (CLASS) and Mathematical Quality of Instruction (MQI), to describe the functioning of mathematical classrooms in Chilean public schools with improved trajectories. In fact, it seeks to investigate how the two instruments correlate and agree on finding certain traits of teaching, and the qualitative descriptions that hide the scores assigned to each room. Results indicate that just the Instructional Dialogue dimension of CLASS correlates significantly with some of the dimensions of MQI, and that the scores assigned to the classrooms effectively discriminate the quality or frequency with which each trait of teaching appears in every class. However, qualitative descriptions showed that in each classroom it is possible to find multiple positive traits of teaching that allowed teachers to lead a good mathematics class, with errors and absent elements, but which were successfully replaced by other elements of effective teaching.

Resumen El presente estudio analiza la capacidad de dos instrumentos de observación de aula, Classroom Assessment Scoring System (CLASS) y Mathematical Quality of Instruction (MQI), para describir el funcionamiento de aulas de matemática que pertenecen a escuelas municipales chilenas con trayectorias de mejoramiento. En concreto, se busca indagar, por una parte, cómo ambos instrumentos correlacionan y coinciden en encontrar determinados rasgos de la enseñanza, y por otra, en las descripciones cualitativas que esconden los puntajes asignados a cada sala. Los resultados nos indican, por un lado, que solamente la dimensión Diálogo Instruccional de CLASS correlaciona significativamente con algunas de las dimensiones de MQI y que los puntajes asignados a las aulas efectivamente permiten discriminar la calidad o frecuencia con que cada rasgo de la enseñanza aparece en cada aula. Sin embargo, las descripciones cualitativas mostraron que en cada sala es posible encontrar múltiples rasgos positivos de la enseñanza que permitieron a los profesores conducir una buena clase de matemática, con errores y elementos ausentes, pero que fueron reemplazados exitosamente por otros elementos de la enseñanza efectiva.

This article explores the characteristics of pedagogical interactions in math classes of Chilean schools with improvement trajectories, which are contrasted with other classrooms in the same educational level. The study uses two instruments, the external and standardized observation by international protocol using CLASS and also explores the perspective of children by analyzing their drawings of the same classes. Both approaches deliver relevant, consistent and complementary data, showing significant differences between classroom from schools with improvement trajectories and schools of the comparison group. Studied classrooms exhibited better pedagogical interactions and the exacerbation of teacher-centered practices, which are negatively correlated with quality interactions.

En este artículo se exploran características distintivas de las interacciones pedagógicas en clases de matemática de escuelas chilenas con trayectorias de mejoramiento, las que se contrastan con otras aulas del mismo nivel educacional. El estudio utiliza dos instrumentos, la observación externa y estandarizada mediante el uso protocolo internacional CLASS y además se indaga en la perspectiva de los niños analizando sus dibujos de las mismas clases. Ambas aproximaciones entregan información relevante, consistente y complementaria, que muestra significativas diferencias entre las aulas en estudio y las de referencia. Las aulas estudiadas exhiben una mejor calidad de las interacciones pedagógicas y una exacerbación de prácticas de enseñanza centradas en el profesor, que a su vez correlacionan negativamente con las interacciones de calidad.