1.2 Metodología de la evaluación La EIPP se llevó a cabo de acuerdo con el proceso y la metodología aprobados por la Oficina Independiente de Evaluación (OIE) (véase el marco de evaluación completo en el Anexo 2) y se adhirió a las normas y estándares del Grupo de Evaluación de las Naciones Unidas.2 Al comienzo de la evaluación, el equipo (junto con la oficina del PNUD en el país) identificó y validó la lista de todos los proyectos de este ciclo de programación que constituirían la base para el análisis (lista completa de proyectos en el Anexo 3). A continuación, se realizó un examen documental del material de referencia, incluidas las estrategias programáticas a nivel de país, los documentos de proyectos y programas, los informes de supervisión, las auditorías, las evaluaciones (véase la lista completa en el Anexo 4) y un análisis de las partes interesadas. En la evaluación se buscó una representación equilibrada de los diferentes tipos de agentes que participan en el programa, incluidos los funcionarios gubernamentales, los asociados en la ejecución de los proyectos, los grupos beneficiarios, los organismos de las Naciones Unidas y otros socios para el desarrollo, incluidos los donantes, la sociedad civil, el sector privado y el mundo académico. La evaluación empleó un sistema de calificación para evaluar el desempeño del programa del país, utilizando los cinco criterios de evaluación acordados internacionalmente de pertinencia, coherencia, eficacia, eficiencia y sostenibilidad (OCDE-CAD, 2020). La pertinencia y la coherencia del programa se evaluaron a la luz de las principales políticas y estrategias nacionales de desarrollo, los cambios en el contexto nacional y las intervenciones de otros agentes internacionales en el país. También se examinó la capacidad del PNUD para adaptarse al contexto cambiante y responder a las necesidades y prioridades nacionales de desarrollo. La eficacia del programa del PNUD en el país se analizó mediante una evaluación de los progresos realizados en la consecución de los productos previstos y la medida en que esos productos contribuyeron a los resultados previstos del DPP. Para comprender mejor el desempeño del PNUD y la eficiencia y sostenibilidad de los resultados en el país, la EIPP examinó los factores específicos que han influido en el programa, de manera positiva y negativa. Debido al brote de la pandemia de COVID-19, y en consulta con la oficina en el país, la EIPP se llevó a cabo de forma remota. Para compensar algunos de los desafíos que enfrentan las evaluaciones remotas, la OIE contrató a un equipo de consultores nacionales para apoyar el proceso de recopilación y análisis de datos. La evaluación se basó en información recopilada de diferentes fuentes, triangulada antes del análisis final. Esto incluyó:
• Un examen de la documentación del PNUD sobre proyectos y programas en Bolivia, evaluaciones descentralizadas, documentos de investigación y otras publicaciones disponibles relacionadas con el país.3
• Un cuestionario de evaluación a fondo para reunir pruebas sobre los resultados comunicados, completado por la oficina del PNUD en el país y examinado y validado durante las entrevistas.
• Un análisis de los resultados del programa y las teorías del cambio (TdC) y el mapeo de los proyectos implementados en relación con los objetivos establecidos en el DPP.
2 3
Ver el sitio web del Grupo de Evaluación de las Naciones Unidas: http://www.unevaluation.org/document/detail/1914 En el período que se examina se realizaron ocho evaluaciones descentralizadas. La evaluación de la calidad de los informes fue: una satisfactoria, una moderadamente satisfactoria, tres moderadamente insatisfactorias, una insatisfactoria y dos evaluaciones pendientes de calificación. Los informes de evaluación se encuentran en https://erc.undp.org/evaluation/plans/detail/1460
Capítulo 1. Antecedentes e introducción
7
