¿El suministro de información sobre el desempeño de las escuelas puede conducir a un mejoramiento?
Disponible en:
También disponible en: Inglés
En los países de ingreso alto, los resultados del aprendizaje han mejorado gracias a un tipo de intervención que aumenta la transparencia y la rendición de cuentas y que consiste en el uso de las calificaciones obtenidas en las pruebas por los estudiantes. En un blog (i) anterior, mencioné algunos ejemplos de sistemas de rendición de cuentas que incluyen “exámenes estandarizados”, como la ley “No Child Left Behind” (Que ningún niño se quede atrás). Este tipo de pruebas tiene importantes consecuencias para quien toma el examen, la escuela o las autoridades escolares. Aporta importantes beneficios si se pasa la prueba, como por ejemplo obtener un diploma, recibir recursos adicionales para la escuela, o conseguir una mención positiva. Algunas de estas intervenciones también usan el mecanismo de la “denuncia pública” (i) de las autoridades escolares, tal como se hace en Inglaterra.
También existen evidencias que indican que el solo hecho de proporcionar información sobre los resultados de los exámenes puede dar lugar a mejoras. Este es el caso de los sistemas que dan libertad a los padres de elegir la escuela, como en los Países Bajos. (i)
No obstante, incluso en un entorno “en que no hay mucho en juego” (que no acarrea ninguna de las consecuencias los exámenes estandarizados; incluso ni siquiera se impone una sanción por el bajo desempeño), la información puede tener un efecto poderoso. Hasta ahora, los datos disponibles acerca de la rendición de cuentas menos estricta han sido desiguales, pero hay algunas señales prometedoras.
Evidencias de India, Chile y Pakistán
Evidencias experimentales obtenidas en India (i) indican que un programa que incluyó exámenes de diagnóstico no estandarizados y comentarios a los maestros no tuvo impacto en los resultados de aprendizaje de los alumnos. En Chile, la distribución de información con respecto al valor agregado de las escuelas no tuvo efectos sobre la matrícula, los niveles de enseñanza o la composición socioeconómica de los estudiantes. Sin embargo, los datos disponibles de un estudio aleatorio realizado en Punjab, (i) Pakistán, muestran que dar a conocer los resultados de los exámenes a los hogares y las escuelas llevó a un aumento de 0,11 desviaciones estándar en los puntajes de las pruebas posteriores, un año después de que se implementara la intervención.
Rendición de cuentas y transparencia en México
En el documento Impact of an Accountability Intervention with Diagnostic Feedback: Evidence from Mexico (i) (Impactos de una intervención de rendición de cuentas con un informe de diagnóstico: Evidencias de México), Rafael de Hoyos, Vicente García-Moreno y yo informamos sobre un mecanismo diseñado para mejorar el desempeño de los estudiantes de 100 escuelas primarias de bajo rendimiento en Colima, México.
Colima es un pequeño estado que se sitúa en la costa del Pacífico, en la región centro-occidental de México. Desde la descentralización del sistema educativo iniciada en 1992, Colima ha desarrollado un sistema escolar eficiente adaptando los programas educativos nacionales a las características y necesidades específicas locales.
A lo largo de la década de 1990, Colima adoptó políticas educativas innovadoras, como la implementación y difusión de una de las primeras pruebas estandarizadas del país. En 2003, Colima superó a todos los estados mexicanos en la prueba del Programa para la Evaluación Internacional de Alumnos (PISA, por sus siglas en inglés) y se acercó a la media de la Organización para la Cooperación y el Desarrollo Económicos (OCDE). Sin embargo, en 2009, de acuerdo con las pruebas estandarizadas de México (ENLACE), el estado se ubicó por debajo del promedio nacional. Y aunque todas las escuelas de Colima tuvieron acceso a esta información desde 2006, la situación no mejoró. Entonces, las autoridades educacionales de Colima iniciaron el diseño del Programa de Atención Específica (PAE) para la Mejora del Logro Educativo.
El PAE se ejecutó en el estado entre enero de 2010 y finales de 2011. El programa, diseñado originalmente como una intervención de educación integral, se interrumpió cuando se aprobó un programa federal similar para evitar duplicaciones. Por este motivo, solo se implementó un subconjunto de los componentes. Las escuelas recibieron información acerca de los puntajes en las pruebas y de su participación en el programa.
Una vez que el programa se puso en marcha y se difundió públicamente la lista de las escuelas del PAE, se asignó un asesor técnico a cada uno de los establecimientos participantes. Esta persona visitaría la escuela y ayudaría a hacer un diagnóstico de los resultados obtenidos en los exámenes y a diseñar un plan de mejoramiento escolar.
Aprovechando las estrictas normas de elegibilidad del PAE, empleamos un diseño de regresión discontinua (y una estrategia de diferencias en diferencias). Encontramos que el PAE aumentó significativamente los puntajes en las pruebas —en 0,12 desviaciones estándar— solo unos pocos meses después del lanzamiento del programa.
Sostenemos que cuando los estudiantes, los profesores y los padres son conscientes de que sus calificaciones son bajas, se activa un proceso de autoevaluación y análisis. El proceso en sí puede llevar a un mejoramiento de los resultados de aprendizaje. Incluso sin la adopción de sanciones, la información sobre la calidad escolar —en el marco de un entorno de apoyo y colaboración— mejoró de manera suficiente los resultados en materia de aprendizaje.
El hecho de que el PAE llegara a su fin después de solo 18 meses indica que la intervención principal del programa se limitó principalmente al anuncio público y la información detallada proporcionada a las escuelas. En otras palabras, fue la evaluación pública del desempeño de los directores de las escuelas participantes en el PAE lo que posiblemente hizo que las escuelas lograran pequeños pero significativos avances en el aprendizaje.
Evidencias de otros sectores
A diferencia de las intervenciones de rendición de cuentas más estrictas que a veces conducen al cierre de escuelas en Estados Unidos, o el despido de los directores en Inglaterra, o la libertad de cambiarse de escuela en los Países Bajos, las políticas (y los eventos de facto) en Colima no conllevan sanciones contra las escuelas o sus directores.
Los datos disponibles de otros sectores indican que, en algunos casos, la información sobre un mal desempeño, cuando es correctamente divulgada, puede conducir a mejoras. Por ejemplo, los restaurantes que exhiben tarjetas de calificaciones de la calidad de la higiene (i) dieron lugar a un aumento del puntaje de la inspección sanitaria de estos locales comerciales. Esto se debe a que los propios establecimientos hicieron mejoras en la calidad de la higiene.
En el sector de la energía, existen evidencias experimentales que muestran que la entrega de información a los clientes sobre el uso de la electricidad y el gas natural en el hogar, (i) poniendo énfasis en las comparaciones entre pares, puede llevar a una reducción significativa en el consumo de energía a un bajo costo. Esto puede ser equiparado con lo que sucede cuando el puntaje de las pruebas se muestra de manera destacada en las escuelas públicas. La publicación de los resultados hace que los maestros, los padres y la dirección recuerden que el mandato y la prioridad de la escuela es proporcionar servicios de educación de alta calidad para todos.
Se necesita más investigación
Uno puede preguntarse por qué las escuelas no mejoraron antes de la puesta en marcha del programa PAE, a pesar de que la misma información ya se había dado a conocer públicamente. Quizás la información no fue bien entendida o difundida. Tal vez las atribuladas autoridades escolares en las escuelas con bajo desempeño no pudieron, sin el adecuado apoyo logístico y de redes, comenzar a usar de manera proactiva los resultados de las pruebas estandarizadas para generar un debate y diseñar un plan de mejoramiento escolar. Estas son áreas para investigaciones futuras, pero el suministro de información sigue siendo el primer paso en el camino hacia el logro de mejoramientos.
Siga a Harry Patrinos en el blog Education for the Global Development (i) y en Twitter. (i)
También siga en Twitter a: Rafael de Hoyos (@rafadehoyos) y al equipo de Educación del Grupo Banco Mundial (@WBG_Education).
La calidad de la educación a nivel mundial, según mi apreciación, debe ser un ciclo completo en el que se debe trabajar de manera mancomunada, aportando desde las familias, las instituciones y los estudiantes como tal, además de un apoyo gubernamental. Porque si bien los indicadores, son de vital importancia, lo es aún más el desarrollo del país, su infraestructura, apoyo a los educadores y transparencia, como lo menciona el autor.
Porque si efectivamente, la educación, marca el futuro de la sociedad, es un futuro que plenamente podría ser elaborado; y es donde éstos Programas de Atención Específica (PAE), implementados a gran escala, generarían un costumbrismo positivo a la mejora de una educación continuada y voluntaria, menos materialista y más conciente.
Excelente resumen de la experiencia en Colima, y en el país y si es de considerarse la transparencia en la información, en relación a los resultados de las evaluaciones, y quiza tambien la información de lo que busca lograr cada programa dándolos a conocer con los padres de familia para provocar su mejor participación.
La precision de la colaboración de Gobierno, familia escuela, es conocida en México desde hace muchos años los años 60, en donde se daba énfasis a la presentación de los resultados de los educandos y de la propia escuela en sus programas educativos con reuniones de padres de familia cada mes.
Se destacaba el papel de la familia y lo complementario de la escuela en la formación del educando, tambien en relación a lo que se tenia de expectativas del comportamiento y la impartición de conocimiento de los maestros y de los padres y de los propios alumnos.
La participación de los padres de familia, resultaba muy activa y como apoyo los inspectores escolares que brindaban herramientas de mejora, sin sanciones en un principio, a las escuelas o maestros permitía ir corrigiendo sobre la marcha para lograr los objetivos de los programas y el nivel educativo de los alumnos.
Desconozco si estos nuevos programas fomentan la iniciativa en los maestros y en las escuelas, lo que si se daba en ese tiempo.
Hoy creo que el destacar la transparencia es excelente, sin embargo veo que falta la información de como participan los padres de familia, y el mismo gobierno, queda claro que no buscan sancionar sino resultados de mejora, pero sigue faltando el "como# ya que los asesores se envían cuando los resultados no son los deseados y no como se hacia en los años sesentas, que se trabajaba permanentemente en logística, herramientas educativas capacitación para la participación con los padres de familia e incluso con programas para dichos padres que les dieran elementos para apoyar a sus hijos en su formación.
Bien por estos esfuerzos que se están realizando, espero que se establezcan en forma permanente con todos los actores y que se evite la discontinuidad.
La educación es responsabilidad de todos, no solo de la escuela.
Gracias por permitir que les de mi opinión, que es con el afán de colaborar a lograr un México mejor.
Actualmente se esta desarrollando la plataforma "escueliZate" cuya misión es Mejorar la Vida Escolar de los estudiantes de nuestra región.
El esfuerzo de este grupo de profesionales del área de sistemas y del entorno de la pedagogía esta orientado en mejorar el rendimiento escolar en nuestras escuelas.
Se trata de una plataforma de Gestión Escolar intuitiva y amigable que integra a los padres en el proceso educativo de sus hijos en conjunto con sus maestros y la escuela, mejorando considerablemente el rendimiento escolar de los alumnos, optimizando en tiempo de los docentes y permitiendo a las escuelas tener una visión holística del desempeño escolar, incluso la capacidad de la analítica basada en indicadores académicos y de gestión escolar.
Pueden solicitar más información en su cuenta twitter @escuelizate
Si todos apoyamos a iniciativas profesionales como @escuelizate seguro que más pronto que tarde obtendremos resultados en favor de nuestros niños, jóvenes y en el desarrollo de nuestros países.