La evaluación y la mejora de la educación

1. La evaluación y la mejora de la educación Alejandro Tiana Ferrer Director General del Centro de Altos Estudios Universitarios (CAEU-OEI)

2. Principales desafíos de las políticas educativas en las dos últimas décadas • Extensión del acceso • Educación secundaria o media • Educación infantil o preescolar • Mejora de la calidad • Aumento de las tasas de titulación • Elevación de los niveles de logro • Mejora de la equidad • Acceso más equitativo a los niveles postobligatorios • Mejora de los resultados independientemente del origen social y familiar del alumnado

3. Un contexto de cambios que afectan a los sistemas educativos • Procesos de cambio de carácter general • Globalización y competencia internacional • Redefinición de los límites del Estado del Bienestar • Demanda de mejora de la calidad de los servicios públicos • Procesos de cambio en el ámbito educativo • Flexibilidad, descentralización y autonomía escolar • Devolución de responsabilidades y rendición de cuentas

4. Una consecuencia: el desarrollo de la evaluación de la educación • Distinción entre evaluación en y de la educación • La evaluación, tarea consustancial a la educación • Transformaciones recientes • Progresiva expansión de los ámbitos de evaluación • Evaluación de los aprendizajes y del currículo • Evaluación de los programas educativos • Evaluación de los centros docentes y de las universidades • Evaluación internacional del rendimiento • Evaluación general de los sistemas educativos • Constitución de los sistemas nacionales de evaluación • Creación de institutos y agencias de evaluación

5. Una mirada a los sistemas nacionales de evaluación: una multiplicidad de propósitos • ¿Para qué evaluamos? • Para ayudar a las escuelas y profesores a adoptar estrategias de mejora de la calidad de la educación que imparten • Para saber en qué medida estamos alcanzando los objetivos y estándares propuestos • Para forzar el cambio en las instituciones y agentes educativos • Para rendir cuentas y eliminar la opacidad del sistema educativo • Para promover la competencia entre escuelas • Para establecer sistemas de incentivos • Para certificar, acreditar o seleccionar instituciones o estudiantes • Para conocer la situación educativa y el impacto de las políticas adoptadas • Para introducir elementos de racionalidad en el debate público y en la construcción de políticas

6. Una mirada a los sistemas nacionales de evaluación: una diversidad de actuaciones • ¿Qué evaluamos? • Los logros conseguidos por los estudiantes • En áreas curriculares seleccionadas • En el conjunto de su proceso de aprendizaje • El rendimiento de las escuelas • En su organización y funcionamiento • En sus resultados • El desempeño de los docentes • El impacto de las políticas educativas • Evaluación de “programas estrella” • Seguimiento de procesos de reforma

7. Una mirada a los sistemas nacionales de evaluación: una pluralidad de usos • ¿Qué usos hacemos de la información? • Difusión pública de información acerca de la educación • Elaboración de informes (nacionales, regionales, sectoriales) • Devolución confidencial de resultados a las escuelas • Publicación y difusión de tablas de resultados • Comparación entre escuelas, regiones o países • Realización de actividades de orientación pedagógica y didáctica

8. Una primera conclusión • Ante su multiplicidad de propósitos, diversidad de actuaciones y pluralidad de usos… • ... hay que concluir que los sistemas de evaluación son muy diversos y no poseen estrategias ni enfoques uniformes… • … lo que avala la necesidad de adecuarlos a las necesidades y demandas del entorno

9. Una mirada a las principales actuaciones evaluadoras • Los sistemas nacionales de evaluación han desarrollado diversas actividades en cuatro campos principales: • Evaluación de los logros de los alumnos • Evaluación de los programas y las políticas • Evaluación de las escuelas y las universidades • Evaluación del profesorado • ¿En qué medida pueden contribuir esas actividades a la mejora de la educación?

10. Pruebas de logros: características • Áreas: • Logros en Lenguaje y Matemáticas, con carácter casi universal • Otras evaluaciones complementarias y minoritarias (otras áreas, otras capacidades o competencias no ligadas a áreas curriculares o transversales) • Momentos: • Grados terminales de etapas educativas • Otros grados de interés diagnóstico • Edades significativas (final de la escolaridad obligatoria) • Cobertura: • Poblaciones completas o muestras representativas • Pruebas nacionales o internacionales • Periodicidad: • Ciclos anuales • Ciclos plurianuales

11. Pruebas de logros: problemas y discusiones • Relación entre currículo y pruebas • Selección de áreas evaluadas y representatividad de la evaluación • Contenidos (de diverso tipo) o competencias • Interpretación de los resultados • Pruebas criteriales o normativas • Limitaciones de los factores asociados clásicos para la explicación • Exceso en la recogida de datos y limitaciones en el análisis • Distintos usos de la información • Uso formativo (desarrollo institucional y profesional) • Estímulo de la competición (políticas de mercado en educación) • Usos comparativos • Varios tipos posibles de comparación (criterial, transversal, longitudinal) • Término adecuado de referencia • Justicia de la comparación (valores brutos vs. “valor añadido”)

12. Una segunda conclusión • La aplicación de pruebas de logro constituye hoy en día la práctica evaluadora más habitual y parece bastante asentada, tanto a nivel nacional como internacional • No obstante, suscita discusiones y plantea algunos problemas y desafíos que habrá que solventar en el futuro, si se quiere que contribuyan a la mejora de la educación

13. Otros ámbitos de la evaluación (1):programas y políticas • Un ámbito clásico pero con eventuales tensiones: evaluación de programas y políticas • Alto compromiso de este tipo de evaluación • Apuesta subyacente a los programas educativos • Riesgo de politización de la evaluación de políticas • Tentación de maquillaje de los resultados • Dificultades para realizar una evaluación externa e independiente • Deseabilidad y dificultad del seguimiento de los procesos de reforma

14. Otros ámbitos de la evaluación (2):instituciones educativas • Un ámbito insuficientemente desarrollado: evaluación de instituciones educativas • Desarrollo de una conciencia nueva acerca de la importancia de esta práctica (instrumento más vinculado a la mejora de la educación que las pruebas nacionales) • Experiencias aún limitadas en la mayoría de los países (un campo todavía en constitución, como complemento de otros) • Cierta indefinición acerca de los métodos y los enfoques a utilizar • Evaluación interna o externa • Rendición de cuentas o desarrollo institucional

15. Otros ámbitos de la evaluación (3):desempeño docente • Un ámbito conflictivo: evaluación del desempeño docente • El profesorado, factor determinante de la calidad • Distintas posibilidades de evaluación • Conocimientos de los profesores • Desempeño profesional (procesos de centro y de aula) • Conexión del desempeño con el rendimiento de los estudiantes • Una relación compleja • Necesidad de tener en cuenta factores influyentes • Conexión individual o institucional

16. Una tercera conclusión • Estos otros ámbitos de la evaluación están infradesarrollados actualmente en relación con las pruebas de logros • No obstante, la evaluación de algunos de estos aspectos puede contribuir notablemente a la mejora de la calidad de la educación, de donde procede el interés que despiertan

17. Reflexiones finales (1) • La evaluación de la educación es una realidad amplia que cuenta con varios componentes • Estudios internacionales de evaluación • Pruebas diagnósticas nacionales o de certificación • Evaluación de las instituciones educativas • Otras evaluaciones (preparación y desempeño de los docentes, impacto de las políticas) • Dichos componentes han de ser concebidos y desarrollados de manera integrada con el fin de obtener sus mejores frutos

18. Reflexiones finales (2) • La evaluación es un instrumento para la mejora y no una panacea para la solución de los problemas de la educación • Evaluar no equivale sin más a mejorar • La evaluación no resuelve por si misma los problemas • No existe una sola concepción acerca del uso de la evaluación, lo que influye en su finalidad • Concepción instrumental • Concepción iluminativa

19. Reflexiones finales (3) • Una convicción profunda: la evaluación solo tiene sentido en tanto contribuya a la mejora de la educación • La evaluación es una práctica potencialmente peligrosa para el objeto evaluado • Se debe prestar atención a sus efectos, tanto los deseados como los no deseados • Hay que contemplar su dimensión ética, para los promotores, los evaluadores y los informadores

20. Reflexiones finales (4) • Para que la evaluación pueda concebirse como instrumento de mejora de la educación deben cumplirse varias condiciones: • Debe contar con la participación de los principales agentes implicados • Debe servir de base para el diseño de planes de mejora derivados del diagnóstico realizado • Debe promover el desarrollo de una capacidad institucional o personal de reflexión crítica encaminada a lograr un compromiso con la mejora