Hacer que las evaluaciones funcionen para la igualdad y la inclusión educativas

Por Karen Mundy, Instituto de Estudios en Educación de Ontario/GEM Report

Las organizaciones internacionales suelen tener unidades de evaluación bien desarrolladas, que generan grandes volúmenes de evidencia sobre sus políticas, programas y prácticas. Sin embargo, si bien la síntesis de evidencia sobre el desarrollo de la educación internacional ha evolucionado considerablemente en los últimos años, la síntesis de evidencia de las evaluaciones independientes realizadas por organizaciones internacionales no lo ha hecho.

Una nueva ‘ síntesis de evidencia ‘ lanzada esta semana por la Oficina de Evaluación IOS de la UNESCO y un grupo de socios internacionales llena en parte esta brecha. El estudio revisa 147 evaluaciones independientes encargadas por 13 organizaciones internacionales, todas enfocadas en medir y evaluar algunos aspectos de la igualdad educativa o la equidad de género. Mediante un riguroso proceso de búsqueda, codificación sistemática y análisis narrativo, el estudio ofrece una vista panorámica de los tipos de intervenciones que están siendo evaluadas por organizaciones internacionales y sintetiza los resultados de la evaluación. También propone recomendaciones importantes para ayudar a mejorar las evaluaciones encargadas por organizaciones internacionales y garantizar que estas evaluaciones apoyen el progreso del país en el logro del Objetivo de Desarrollo Sostenible (ODS) 4.5.

¿Cuáles son los principales hallazgos del estudio ?

El volumen de evidencia es impresionante: en una búsqueda abierta de las bases de datos de evaluación de 16 organizaciones internacionales, encontramos que 147 de un total de 156 evaluaciones de educación publicadas entre 2015 y 2019 incluían objetivos o resultados relacionados con la paridad, igualdad e inclusión de género. Aproximadamente 30 a 40 evaluaciones educativas fueron publicadas cada año.

Hay fortalezas y lagunas en estas evaluaciones. Su enfoque predominante es en intervenciones para apoyar el acceso y la participación. Muy pocos incluyen el aprendizaje como un área de impacto medida. Además, si bien el tema de la educación de las niñas está bien cubierto en estas evaluaciones, el impacto de los programas en otros aspectos de la equidad, relacionados con la inclusión de las personas con discapacidad y las desventajas relacionadas con el origen étnico y el idioma, se estudiaron con menos frecuencia. Geográficamente, el mayor número de evaluaciones en el conjunto de datos se basa en África, lo que indica un nuevo cuerpo de evidencia importante sobre la educación en el continente.

Solo 28 de las evaluaciones utilizaron métodos cuantitativos rigurosos con contrafactual. La evidencia más sólida aparece en las evaluaciones de transferencias de efectivo y programas de alimentación escolar. Muy pocas de las evaluaciones analizan el impacto en la equidad de las intervenciones que apuntan directamente a las mejoras en la prestación de servicios, con una notable falta de evidencia sólida sobre lo que funciona para mejorar las prácticas de enseñanza para obtener resultados de aprendizaje más equitativos.

Con algunas excepciones, las evaluaciones en este conjunto de datos no pueden mostrar un vínculo convincente entre los programas de reforma a gran escala en todo el sistema y las mejoras en la equidad de aprendizaje y el alivio de otras formas de desigualdad educativa, en parte debido al uso riguroso y consistente de la teoría. El diseño de evaluación es raro.

Además, como se señaló en un estudio anterior (y también en un podcast ), hay pocos intentos de comparar y aprender de los programas de reforma del sistema observando países o las diferentes formas organizativas de apoyo que se brindan en un solo país. Sin embargo, los programas complejos y multiples «en todo el sistema» forman una parte cada vez mayor de intervenciones financiadas por donantes en educación. Los hallazgos tentadores pero incompletos de las evaluaciones de los programas de reforma del sistema incluyen el hecho de que la descentralización y la gestión basada en la escuela pueden tener impactos negativos en la equidad y la inclusión; y que el financiamiento basado en resultados tiene un impacto mixto en la implementación.

 

En conclusión, este nuevo informe llama a las organizaciones internacionales a fortalecer su evaluación del ODS 4.5 de cuatro maneras específicas.

Primero, aborde las brechas de evidencia mejorando la evaluación del impacto de la equidad de las intervenciones centradas en cambiar la prestación de servicios de primera línea (mejorando las aulas, los maestros y las escuelas), incluso incorporando medidas más fuertes de equidad de aprendizaje.

En segundo lugar, utilice la empresa de evaluación para contribuir a una generación y uso de datos más fuertes y de propiedad del país .

Tercero, fortalecer las metodologías de evaluación.

Finalmente, basado en talleres de validación en cinco países, el informe hace un llamado a las organizaciones internacionales para que la evidencia de la evaluación sea más útil y útil para las partes interesadas nacionales , asegurándose de que participen en la selección y el momento de los estudios de evaluación, y preparando síntesis de evidencia para apoyar aprendizaje.

Además del informe completo, puede encontrar una nota metodológica y una base de datos de búsqueda de las evaluaciones en m.bilagher@unesco.org .

Fuente: https://gemreportunesco.wordpress.com/2019/09/19/making-evaluations-work-for-education-equality-and-inclusion/