¿Cómo evaluar un proyecto de Gestión institucional en la perspectiva de un marco lógico? El caso de la Articulación Escuela-Comunidad
Presentación
La siguiente es una herramienta para facilitar el proceso de
evaluación de
proyectos. Su propósito es brindar estructura para comunicar información esencial y confiable relativa al Proyecto. Aunque la evaluación es un proceso que debe tenerse en cuenta a lo largo de todo el Proyecto, los elementos que a continuación se señalan, resultan más pertinentes en momentos avanzados o terminales de éste. Los elementos que se analizarán a continuación, son parte de la Metodología de Marco Lógico, una de las herramientas mayormente utilizadas en la Evaluación de Proyectos Educacionales. La revisión de sus elementos le otorgará la posibilidad de sistematizar información para la exposición de resultados, reorientación de proyectos o articulación de nuevos proyectos.
¿cómo evaluar un proyecto?
No existe una estrategia de evaluación, ni un conjunto de indicadores que pueda utilizarse para la medición del impacto y la cuantificación de los resultados de cualquier proyecto. No debe confundirse esto con la existencia de
medidas
estandarizadas
calificaciones), ni
de
resultados
(por
ejemplo
escalas
de
tampoco con instrumentos validados para efectuar
mediciones respecto a variables específicas (baterías de pruebas o tests). Nos referimos
en
cambio,
a
la
necesidad
de
contar
con
indicadores
contextualizados, diseñados para los Fines, Objetivos y Metas del Proyecto en cuestión.
ya que una adecuada acción evaluativa de proyectos, debe contar con instrumentos precisos y pertinentes que permitan recoger información acerca de sus componentes centrales, . resulta fundamental contar previamente con OBJETIVOS y METAS claras que sirvan de guías para el proceso de evaluación. Si en la etapa de diseño del Proyecto, estos elementos aún no han sido definidos con claridad cabe la posibilidad que la estrategia evaluativa, a pesar de contar con instrumentos adecuados, no evalúe realmente los impactos esperados para el Proyecto. Para analizar la coherencia evaluativa de un Proyecto, se espera que exista una relación lógica entre todos sus componentes, para de esta forma garantizar la confiabilidad de los resultados y de la acción global de evaluación.
continúe en la página siguiente
Un Proyecto de "Proyecto de articulación Escuela -Comunidad" tiene las siguientes etapas:
Diagnóstico Existe un aumento sostenido de la demanda por matricula, producto del crecimiento poblacional del área de influencia del colegio
Objetivo Aumentar la oferta educativa del colegio en un curso por nivel
¿Cómo se logrará el objetivo?
ESTRATEGIA Desarrollo de un estudio de la población en edad escolar del sector, definición de las nuevas vacantes que se ofrecerán, la dotación necesaria para prestar el servicio educativo y determinación de los requerimientos físicos y didácticos que requiere el logro del objetivo.
¿Qué resultados se espera
METAS
obtener?
Aumento de un curso por nivel
¿Cuánto se espera lograr respecto
INDICADORES DE LOGRO
a los resultados?
Aumento de un 50% de la matrícula actual
¿Cómo se verificarán los
MEDIOS DE VERIFICACION
resultados?
Boletín Mensual de Subvenciones, Registros de Alumnos, Registros Contables, etc.
Como todo los procesos al interior de la Escuela, la Gestión Directiva se inserta en un desarrollo sucesivo de Proyectos, y por lo tanto se deduce que cada iniciativa se genera a partir de una anterior, la que a la vez posibilita la existencia de una propuesta posterior que puede continuar en el mismo propósito y/o abarcar otras áreas de interés. En el ejemplo tenemos un Diagnóstico, que probablemente en una iniciativa anterior, podría haber sido una actividad o una estrategia vinculada a un Proyecto que perseguía el Objetivo de “ Conocer, construir y analizar variables demográficas y poblacionales de interés, para caracterizar grupos humanos en el entorno de nuestra escuela” , o bien de un Plan Específico desarrollado por el Municipio que consistía en “ Caracterizar la población comunal para atender en forma más eficaz el conjunto de necesidades que van emergiendo producto de los cambios tecnológicos y el desarrollo urbano” , etc. De esta forma, los resultados de estos supuestos Proyectos dieron lugar a la Hipótesis que animó el actual proyecto "Proyecto de Articulación Escuela -Comunidad". Esta hipótesis podría relacionar directamente el aumento poblacional de la comunidad donde se inserta el Liceo, con la necesidad de aumentar la oferta educativa, La consistencia de esta hipótesis, dependerá de los instrumentos utilizados y de la medición específica en el ámbito señalado. En función de este propósito, se ha declarado el Objetivo de “ Aumentar la oferta educativa del colegio en un curso por nivel” . Como se observa, este ha sido amplificado a un alcance más general que el tema de caracterización sociodemográfica, atendiendo no sólo a este propósito, sino a la demanda educativa del sector, producto de las actuales condiciones: Oferta Educativa. Este alcance estratégico se fundamenta en la posibilidad de encontrar hallazgos significativos en otras áreas, y no tan sólo en las que señala el Diagnóstico. Por ejemplo con este objetivo, se podría explorar también la necesidad de implementar sistemas de financiamiento o subvención para gastos de locomoción.
Continuando con el ejemplo, debemos revisar los componentes de Estrategia, Metas, Indicadores de logro y Medios de Verificación. Aunque todos estos componentes caben en el ámbito de la Evaluación de Proyectos, cabe hacer ahora la distinción entre Impacto y Resultados. Cuando hablamos de Impacto , nos referimos a los cambios culturales por ejemplo a nivel de pautas de conducta, estilos de aprendizaje, métodos de trabajo, procedimientos sistemáticos, estilos de comunicación, etc., los que son evaluados fundamentalmente a través de métodos de recolección de datos cualitativos y cuantitativos, pero que son visualizables a muy largo plazo, estimados a más de dos años una vez finalizado el Proyecto. Por Resultado se habla en cambio, de la estimación actual de los cambios experimentados por la población objetivo del proyecto, en este caso de la población potencial de alumnos, a través de Metas, Indicadores de logro y Medios de Verificación. Las Metas son enunciados que especifican los resultados esperados del Objetivo del Proyecto. En algún sentido, son las áreas específicas donde necesariamente
deben
impactar
los
resultados
del
Proyecto,
que
coincidentemente son las variables componentes de la hipótesis. Estas caben en el ámbito de la Responsabilización de Resultados. Una clara definición de meta, en este ejemplo sería el Aumentar la oferta educativa, para así hacer coherentes la hipótesis con el propósito del Proyecto en marcha. Por otra parte tenemos los Indicadores de Logro, que no son otra cosa que la cuantificación de los resultados a los cuales se compromete el Proyecto. Es una expresión que establece la relación entre dos o más variables, que permite medir el nivel o magnitud del cumplimiento de una meta. Los indicadores de logro señalan en Compromiso de Resultados, es decir algo mediante el cual el Proyecto se compromete a cumplir y que además define el cumplimiento de la meta. La estimación de los Indicadores de Logro, dependerá de las expectativas, la magnitud y los alcances que se espera tenga el proyecto en cuanto a su objetivo. Por ejemplo es muy distinto enunciar un indicador como “ aumento de la matrícula anual en un 15%” o, “ aumentar la oferta educativa en un curso para 1º y 2º Medio en un año, y para 3º y 4º Medio en dos años. Obsérvese que el primero tiene un énfasis en el aumento de la oferta respecto
a la actual, y por lo tanto tiene como referente específico, la actual matrícula, a diferencia de la segunda, que pone énfasis en los plazos para la constitución de los logros. De todos modos, cabe la posibilidad que la unidad se haga cargo de ambos indicadores de igual forma. Por último, los Medios de Verificación, son instrumentos mediante los cuales el ejecutor o evaluador puede obtener información de los indicadores. Ello obliga a los planificadores del proyecto a identificar fuentes existentes de información o a hacer previsiones para recoger información, quizás como una actividad del proyecto. No toda la información tiene que ser estadística., también puede ser la observación de un especialista registrada en una bitácora, por ejemplo. Puede observarse que hay medios de verificación, de disposición directa de los ejecutores, tales como un libro de clases, un acta, el Boletín Mensual de Subvenciones (BMS), etc., pero así también existen medios de verificación que necesitan ser gestionados al interior del Proyecto, pues no son de uso administrativo del centro, como por ejemplo un Estudios de Dotación.