“El debate actual sobre evaluación y acreditación en América Latina” 3er Congreso de Directores SM Editores 24 de septiembre Lima – Perú
Pedro Montt L Chile
Agenda de Temas • El por qué de las evaluaciones. • La creación de capacidades, la tarea central. El diseño de estas reformas… • Cómo se crean capacidades y una cultura evaluativa. Balances: Exigencias/Apoyos; Prescripción/Profesionalismo.
• La agenda evaluativa de algunos países de LA. El caso brasilero.
• Posible tendencia. • Conclusiones.
El por qué y para qué de las evaluaciones… (1) • “Es imposible hablar de calidad sin medir” (McKinsey, 2007) • La evaluación debe permitir en lo fundamental establecer comparaciones “validas” y “confiables” entre agentes, instituciones e incluso países. • En general estos dispositivos han sido precedidos o se han dado en sistemas educativos descentralizados.
• Una ola de reformas de ese cuño, han dado origen en las últimas décadas, progresivamente a sistemas de evaluación (medición y acreditación)
El por qué y para qué de las evaluaciones…(2) • Detrás de este tipo de Reformas está el hecho de que es necesario crear capacidades en la base del sistema y para ello se debe tener un claro diagnóstico respecto de esas capacidades a la partida. Se afirma que las capacidades del sistema, entendidas como la existencia masiva de docentes y equipos directivos altamente competentes en el logro de los aprendizajes de los alumnos en todas y cada una de las instituciones educativas del sistema escolar, son la clave para lograr un sistema escolar exitoso.
• Dicho de otra forma, las capacidades de los docentes son directamente proporcionales a los resultados de aprendizaje que obtienen los países en las pruebas internacionales que buscan medir la calidad de los sistemas.
La creación de capacidades la tarea central. El diseño detrás las reformas que instalan la evaluación y rendición de cuentas: tendencias Internacionales Hopkins, Schleicher
Hacia una reforma sustentable : Todas las escuelas son efectivas Construyendo capacidades
Prescripción
Profesionalismo
Prescripción Nacional
Alta Excelencia
Rol Clave de Fuerte Ministerio
rol Ministerio
Alta Equidad
Prescripción detallada de lo que deben hacer las escuelas
Rol Clave de Construyendo Actores Locales capacidades
Liderazgo
a nivel
de
sistema
Fuerte rol Escuelas Escuelas liderando La Reforma
Cómo se crean capacidades y una cultura evaluativa… (1) Balances: Exigencias/apoyos
Grandes apoyos Progreso lento y disparejo
Mejoramiento Rápido
Mejoras de carácter particular
Mejora sistemática
Escasa exigencia
Dispersión Bajos resultados
Conflicto
Estancamiento
Desmoralización
Abandono
Resistencia
Gran exigencia
Escasos apoyos Fuente: Schleicher, 2005
Cómo se crean capacidades y una cultura evaluativa… (2) Balances: Prescripción/Profesionalismo
El futuro de los sistemas educativos Debe ser rico en conocimiento Prescripción informada
Criterio profesional informado; el profesor es un “trabajador del conocimiento”
Prescripción Nacional
Criterio Prescripción no informada; el profesor se limita a implementar el curriculum
Profesional Criterio profesional no informado
Tradición: Sistemas educativos Pobres en conocimientos Fuente: Schleicher, 2005
La agenda evaluativa de algunos países de LA Brasil • Sistema de evaluación del desempeño de los establecimientos a través de un índice: IDEB. Horizonte de logro al 2022.
Colombia • Estándares básicos de competencias de aprendizaje a partir del año 2001. • Se independiza el instituto evaluativo (ICFES)
Chile • Establecimiento de estándares de aprendizaje, de desempeño docente, sistemas de evaluación referidos a esos estándares. • Creación de una institucionalidad para el aseguramiento de la calidad educativa.
Ecuador • Se encuentran en experimentación y validación estándares para los centros escolares, docentes, directivos y de aprendizaje de los estudiantes. • Creación de institucionalidad para la evaluación (autonomía del ministerio)
Guatemala • Se dan a conocer los estándares de preprimaria y primaria en la década del 2000, actualmente se trabaja en los del nivel medio.
Perú • Se informan los resultados de las pruebas nacionales usando estándares de desempeño, ello hace algunos años.
IDEB – BRASIL Primeros años del enseñanza fundamental - Red Pública Brasil 2005
Hasta 3,7 De 3,8 a 5,9 6,0 o más Sin IDEB
Brasil 2007
Brasil 2009
•El Índice de Desarrollo de la Educación (Ideb) es el indicador nacional brasileño que mide la calidad de la Educación, considerando indicadores de flujo escolar (aprobación y reprobación escolar) y medias de rendimiento en las evaluaciones nacionales (Saeb e Prova Brasil) •El Ideb fue creado en una escala que va de cero a diez. Fueron establecidas metas de rendimiento a cada dos años para cada escuela y cada red de enseñanza , partió en 2005 y se proyecta con una meta de calidad país a alcanzar el 2022 .
¿Qué pueden hacer los gestores educativos con los resultados de la PROVA BRASIL? • Comparar la media de la escuela con aquella lograda anteriormente y verificar si fue obtenida sin afectar variables de equidad (cobertura y retención ). • Identificar cuantos estudiantes de la escuela están en cada uno de los niveles evaluados y desarrollar acciones pedagógicas para estudiantes según sus niveles diversos de aprendizaje. • Dirigir el soporte técnico y financiero ministerial para: La formación continua de los profesores, coordinadores pedagógicos y otro personal de apoyo; Reducir las desigualdades existentes en el sistema educacional.
Posible Tendencia: Un posible Camino crítico… Inicio década de los 80
Evaluaciones del Aprendizaje Nacionales Participación en Evaluaciones del Aprendizaje Internacionales Avances de las evaluaciones en teorías de la medición (IRT); Referencia a Estandares Proto-sistemas y desarrollo de instrumentos para su operación Aumentos del número de pruebas y su frecuencia
Evaluaciones del desempeño institucional
Estos procesos, en pleno desarrollo a la fecha, con seguridad y tal como
Constitución de sistemas de aseguramiento de la calidad Institucionalidad Evaluación, rendición de cuentas, consecuencias Diversos instrumentos y dimensiones evaluadas Creación de capacidades
Evaluaciones del Desempeño Docentes
P R E S E N T e
¿Futuro ?
Los componentes de dispositivos evaluativos de carácter sistémico Alumnos
Docentes
Directores
Establecimientos educativos
Municipios
Provincias
Regiones
Nación
Estándares de desempeño Evaluación de desempeño Notificación/ comunicación de resultados Evaluación de impacto de políticas Requisitos de operación Distribución equitativa de recursos Autonomía, apoyo e intervención Rendición de cuentas y consecuencias Fuente: El diseño institucional de un sistema efectivo de aseguramiento de la calidad de la educación en Chile, Banco Mundial, 2007
Conclusiones Los nudos políticos que deben enfrentar las evaluaciones …
•
Los métodos para construir la comunicación de resultados, el diálogo entre técnicos y políticos que llegó a ser central y a quedarse.
•
La comunicación de resultados: la tensión técnico política en la comunicación de resultados, los énfasis y acentos que se trasmiten a la sociedad (construcción de relato)
•
La compleja relación con los medios de comunicación: ¿Cómo estos interpretan los resultados luego de entregados?. La trampa del morbo (todo debe ser negativo)
•
Las tensiones en las evaluaciones fruto de presiones corporativas: ¿La evaluación docente como un valor o como una forma de derrotar a los sindicatos?
•
La evaluación con consecuencias que se convierten en centrales para los políticos y sus diseños.
Conclusiones Riesgos de una moda… •
La excesiva visibilización de estos dispositivos genera enconados adversarios, así como partidarios de estos sistemas de evaluación . • Se observan riesgos, del tipo de los que criticó muy recientemente la importante historiadora educativa Diane Ravith (*), los cuales ocurren al sacralizar estos sistemas (No Child Left Behind). – Mala política, el garrote y la zanahoria no funcionan. – Los sistemas que logran resultados apuestan más al desarrollo de capacidades: mejores mallas curriculares y materiales para las clases, entrenamiento y mejores sueldos docentes, más que a una lógica economicista de incentivos (incluidos los punitivos) – Las consecuencias punitivas, entre ellas el cierre de las escuelas, hace que las autoridades políticas pongan metas alcanzables por todos para no tener que enfrentar problemas –
Es un error importante amenazar a los docentes a través de pruebas estandarizadas. Vieja evidencia respecto del “estrechamiento curricular”
– Estas políticas pueden agudizar la segregación y la desigualdad.
•
También el Nobel de economía Eric Hanushek señala que este tipo de reforma basada en evaluaciones con consecuencias para los docentes y establecimientos se arriesga pervertir y desnaturalizar el sentido del trabajo pedagógico (la lógica de incentivos como la entienden los economistas no funcionaría)
(*) The Death and Life of the Great American School System: How Testing and Choice Are Undermining Education (New York: Basic Books, 2010)