CARACTERÍSTICAS
APLICACIONES
FUNCIONES
MODELO DE EVALUACIÓN
CIPP
C O N T E X T ,
I N P U T S ,
P R O C E S S
&
P R O D U C T
“No está hecho para probar, sino para perfeccionar” -Stufflebeam
OCTUBRE 2017 | $1.50
WWW.CIPP.COM
Sobre las Editoras Danalisse Claudio
Jayleen Malavé
Claudia Colón
UNIVERSIDAD DE PUERTO RICO • RECINTO DE CIENCIAS MÉDICAS FACULTAD DE CIENCIAS BIOSOCIALES Y ESCUELA GRADUADA DE SALUD PÚBLICA DEPARTAMENTO DE CIENCIAS SOCIALES PROGRAMA DE MAESTRÍA EN EDUCACIÓN EN SALUD PÚBLICA
TABLA DE CONTENIDO 04 PROPÓSITO, DESCRIPCIÓN & CARACTERÍSTICAS 05 ETAPAS DEL MODELO
07 ROL DEL EVALUADOR
08 VENTAJAS & DESVENTAJAS 09 APLICABILIDAD REFERENCIAS
CIPP: PROPÓSITO, DESCRIPCIÓN & CARACTERÍSTICAS El propósito del modelo de evaluación CIPP (Contexto, Entradas, Proceso y Producto) es aceptar, corregir o abandonar el programa o proyecto que se evalúe. Este modelo se dirige a promover el crecimiento y mejoramiento de programas. Además, a asegurar la utilización óptima de los recursos. Se puede describir el modelo como uno dividido en cuatro etapas: contexto, entrada (inputs), proceso y producto para la toma de decisiones democráticamente. Teniendo en
Dr. Daniel Stufflebeam / Via Western Michigan University
cuenta el escenario, virtudes y deficiencias del programa o iniciativa que se evalúa. El CIPP se crea como una alternativa a las limitaciones de modelos de evaluación tradicionales que ya tienen objetivos establecidos de principio a fin. Este modelo es uno dinámico, que como su creador, Dr. Daniel Stufflebeam, comenta: “no está hecho para probar, sino para perfeccionar” (not to prove, but to improve). De manera que, a diferencia de otros modelos de evaluación, el CIPP se aplica en todo momento del programa a evaluar. Como
Algunas características del modelo son: Adaptable Aplicable Orientado al servicio Promueve el crecimiento Asegura el uso óptimo de recursos Dinámico Integrador y global El CIPP enfatiza en la toma de decisiones y el perfeccionamiento del programa evaluado.
veremos más adelante, las etapas del modelo proveen una oportunidad de evaluación continua.
CIPP
| 04
octubre 2017
etapas del CIPP
Evaluación de Entradas
Evaluación de Contexto
Metas
CONTEXTO, ENTRADAS, PROCESO & PRODUCTO
Planes Valores
El modelo CIPP representa un enfoque de
Resultados
evaluación global y dinámico. Su estructura cíclica incluye cuatro etapas o tipos de evaluación. De manera que este modelo se lleva a cabo a lo largo del programa en su totalidad. La evaluación de contexto se dirige al
Métodos
Evaluación de Producto
establecimiento de metas. Mientras que la
Evaluación de Proceso Representación gráfica del modelo CIPP.
evaluación de entradas (inputs) se concentra establecer los planes para cumplir con las metas y objetivos. Además, la evaluación de proceso, es la encargada de dirigir cómo se harán las cosas. Por último, la evaluación de productos analiza los resultados para poder tomar decisiones futuras.
Evaluación de Contexto Identifica el entorno en el que el programa se lleva a cabo. Se puede realizar, por ejemplo, con un estudio de necesidades. Estos resultados responden a la pregunta: ¿qué se necesita hacer? (Stufflebeam & Shinkfield, 2007; Bausela, 2003) con el fin de establecer las metas y objetivos. Si ya están establecidos, en esta etapa se revisa la
Evaluación de Entradas (inputs) Determina cómo se utilizarán los recursos del programa, proyecto o estrategias propuestas asociadas con el plan de trabajo y presupuesto. Estas determinaciones tratan de responder si podemos hacerlo. (Bausela, 2003). Objetivos: diseñar un programa para satisfacer las necesidades, determinar los recursos necesarios para la realización del proyecto o programa y establecer si esos recursos son los adecuados. Métodos de recopilación: revisión de literatura y documentos, visitas a otros programas, técnica Delphi, perfil del programa, estudios comparativos, grupos focales, reporte final.
congruencia de los objetivos con los resultados del análisis de necesidades. (Zhang et al, 2011) Objetivos: identificar la población y sus necesidades, identificar oportunidades en el entorno, diagnosticar problemas, entre otros. Métodos de recopilación: análisis de sistemas, cuestionarios, revisión de documentos, análisis de fuentes secundarias, entrevistas, pruebas diagnósticas, técnica Delphi, audiencias, etc. (Zhang et al, 2011) CIPP
| 05
octubre 2017
etapas del CIPP
CONTEXTO, ENTRADAS, PROCESO & PRODUCTO
Evaluación de Proceso Verifica continuamente que el plan se esté desarrollando de manera adecuada. Contesta a la pregunta: ¿se está haciendo? Proporciona información sobre la efectividad, obstáculos y factores no previstos del programa para determinar si se deben corregir algunos aspectos. Objetivos: identificar las diferencias entre el diseño planificado y el ejecutado. Además, identificar los defectos durante la implementación del programa o proyecto. Métodos de recopilación: cuestionarios, revisión de documentos, base de datos, observación, estudios de caso, entrevistas con los interesados, grupos focales y análisis de gastos.
Evaluación de Productos
Este análisis es esencial para ajustes y para
Se enfoca en la calidad de la evaluación, las
tomas de decisiones.
lecciones aprendidas y cómo los participantes aplican lo que aprendieron (Sharma, 2014). Contesta a la pregunta: ¿fue exitoso el proyecto? Objetivos: examina si se han satisfecho las necesidades del grupo al que se ofreció el programa o proyecto. También se evalúa si se acepta, se enmienda o finaliza el programa utilizando los objetivos y metas establecidas. Método de recopilación: estudio de casos, análisis de tiempo. Se sugiere que se utilicen varios métodos
Cosas a Recordar: •Debe ser desarrollado por un experto(a). •Puede ser utilizado desde el principio hasta el final del programa • Para que la aplicación del modelo sea efectiva, es necesario la incorporación de los stakeholders. CIPP | 06
octubre 2017
Rol del evaluador El evaluador tiene un papel fundamental en la aplicación efectiva del CIPP. Lleva a cabo una evaluación sistemática y objetiva durante las etapas del modelo. Esta valoración se realiza mediante una combinación de técnicas creadas con principios acordados por los especialistas y las partes interesadas. El evaluador debe considerar los valores sociales, institucionales y profesionales del programa o entidad que evaluará. Al finalizar el proyecto o programa el evaluador utiliza la información obtenida para contestar: ¿Se abordaron necesidades importantes ? ¿El esfuerzo fue guiado por un plan y presupuesto defendible? ¿El diseño del servicio se ejecutó de manera competente y se modificó según fue necesario? ¿El esfuerzo tuvo éxito?
A continuación se presentan las funciones del evaluador: lleva a cabo entrevistas generara hipótesis realiza estudios de caso hace encuestas telefónicas, por correo postal o personalmente vigila los valores sociales, institucionales, programáticos y profesionales define roles de evaluación para el personal. capacita a los miembros del personal en los conceptos, estándares y métodos de evaluación define preguntas de evaluación aclara los criterios evaluativos verifica los hallazgos cualitativos y cuantitativos; construyendo un caso convincente a lo largo del tiempo escucha y evalúa los comentarios de las partes interesadas del programa busca e investiga ambigüedades, convergencia y contradicciones en los hallazgos al finalizar el informe sumativo, almacena la información obtenida en las etapas del modelo CIPP
| 07
octubre 2017
Ventajas & Desventajas El modelo CIPP tiene una variedad de características y métodos aplicables en diversos escenarios. Sin embargo, posee una serie de ventajas y desventajas que deben tomarse en consideración al momento de decidir utilizarlo.
Pros Es un modelo cíclico que permite evaluar el programa en su totalidad y provee una visión total del progreso en el diseño. Es práctico para la toma de desiciones y provee para la revisió n en cualquier etapa. El modelo posibilita aprovechar las oportunidades a medida que surgen. Facilita la toma de decisiones informadas en el momento en que esas deben tomarse. Permite desarrollar los objetivos Cons desde un contexto real , esto concede que se realice una • Requiere capacitación. evaluación más compleja y profunda. • No siempre se aplican las etapas Se evalúan los en un mismo orden. resultados esperados e inesperados. • La aplicación de la totalidad del modelo puede resultar sumamente complicada y cara. • El papel del evaluador es totalmente técnico, además, para utilizar el modelo, el evaluador debe tener peritaje en el CIPP. CIPP | 08
octubre 2017
Aplicación El modelo del CIPP ha sido utilizado para la evaluación de: programas de servicios, mayormente en educación proyectos en diferentes disciplinas revisión de Currículos funcionarios de acreditación
en salud pública Presentamos dos ejemplos de aplicación del modelo CIPP en la salud pública: Evaluation of Public Health Mothers’ Participation in Improving Communication Performance by Growth and Nutrition of the Stufflebeam's CIPP Model: A Case Study of Children: a Model for Community Thailand's Department of Disease Control Participation
En este artículo, los autores utilizan el modelo del CIPP para evaluar un esfuerzo de comunicación en salud pública. Los autores obtuvieron una mirada de las fortalezas y debilidades de estos esfuerzos. Haz click en la foto. CIPP | 09
En este artículo, los autores utilizan el modelo del CIPP para evaluar la participación de madres en un programa de educación en salud. Haz click en la foto. octubre 2017
Referencias Bauselas Herrera, E. (2003). Metodología de la investigación evaluativa: Modelo CIPP. Revista Complutense de Educación, 14(2), 361-376. Boochutima, S., Pinyopornpanich, B. (2012). Evaluation of public health communination performance by Stufflebeam’s CIPP model: A case study of Thailand’s Department of Disease Control. American Society of Business and Behavioral Sciences (ASBBS) Annual Conference: Las Vegas. Shams, B., Golshiri, P., Zamani, A.R., Pourabdian, S. (2008). Mother’s participation in improving growth and nutrition of the children: A model for community participation. Iranian Journal of Public Health, 37(2), 24-31. Recuperado de: http://ijph.tums.ac.ir/index.php/ijph/article/view/2052/2033 Sharma, M., Lingyak Petosa, R. (2014). Measurement and evaluation for health educators. Burlington, Massachusetts, Jones & Bartlett Learning. Stufflebeam, D.L. (2003). The CIPP model for evaluation: An update, a review of the model’s development and a checklist to guide implementation. Annual Conference of the Oregon Program Evaluators Network (OPEN), Portland. Stufflebeam, D.L. (2000). The CIPP model for the evaluation. In: Stufflebeam D.L., Madaus G.F., Kellaghan T. (eds) Evaluation Models. Evaluation in Education and Human Services. doi: https://doi.org/10.1007/0-306-47559-6_16 Zhang, G., Zeller, N., Griffith, R., Metcalf, D., Williams, J., Shea, C. & Misulis, K. (2011). Using the context, input, process, and product evaluation model (CIPP) as a comprehensive framework to guide the planning, implementation, and assessment of services-learning programs. Journal of Higher Education Outreach and Engagement, 15(4), 57-84. Recuperado de: http://openjournals.libs.uga.edu/index.php/jheoe/article/view/628 Zúñiga García, M. (2013). Evaluación orientada a la toma de decisiones. Universidad Nacional Autónoma de México. Recuperado de: https://issuu.com/disenoyevaluacion/docs/stufflebeam
Claudio, Colón & Malavé