Desarrollo de un Plan de Monitoreo y Evaluación
Un Plan de Monitoreo y Evaluación (M&E) es una guía sobre lo que debe evaluar, qué información necesita y para quién está evaluando.
El plan describe las preguntas clave de evaluación y las preguntas detalladas de monitoreo que ayudan a responder a las preguntas de evaluación. Esto le permite identificar la información que necesita recopilar y cómo puede recopilarla. Dependiendo del detalle del plan M&E, puede identificar a las personas responsables de las diferentes tareas, así como los plazos. El plan debe poder ser recogido por cualquier persona involucrada en el proyecto en cualquier momento y ser claro en cuanto a lo que está sucediendo en términos de monitoreo y evaluación.
también es importante recordar que hay muchos tipos de evaluación.
Un plan de evaluación debería realizarse idealmente en la etapa de planificación de un proyecto, antes de comenzar la implementación. Esto le permitirá planificar con anticipación las actividades de recopilación de datos que pueda necesitar realizar, como las encuestas previas a la intervención. Sin embargo, nunca es demasiado tarde para desarrollar un plan M& E. Adaptar un plan M& E a un proyecto existente puede significar que puede estar limitado en algunos de los datos que puede recopilar.
Cómo desarrollar un Plan de Monitoreo y Evaluación
Un breve tutorial sobre cómo desarrollar un plan M&E-se abre en PowerPoint
Paso 1. Identifique su público de evaluación
Identifique quiénes son el público de evaluación o las partes interesadas. La audiencia de evaluación incluye a las personas u organizaciones que requieren que se realice una evaluación. Puede haber múltiples audiencias, cada una con sus propios requisitos. Por lo general, esto incluye a la agencia de financiación, y también puede incluir organizaciones asociadas, el Consejo (o los Consejeros), el equipo del proyecto y los participantes o el grupo objetivo del proyecto. Recuerde que la evaluación generalmente se realiza para rendir cuentas, o para aprender, y preferiblemente ambas juntas.
Si tiene fondos limitados para la evaluación, es posible que tenga que priorizar su evaluación identificando quiénes son las personas más importantes a las que informar.
Descargar M&E Plantilla de Preguntas de Evaluación y Audiencia
Paso 2. Definir las preguntas de evaluación
Las preguntas de evaluación deben elaborarse por adelantado y en colaboración con la(s) audiencia (es) principal (es) y otras partes interesadas a las que se pretende informar. Las preguntas de evaluación van más allá de las mediciones para hacer preguntas de orden superior, como si la intervención vale la pena, o si podría haberse logrado de otra manera (ver ejemplos a continuación). En general, las preguntas de evaluación deben conducir a la adopción de medidas adicionales, como la mejora, la incorporación o el rediseño de proyectos.
También debe identificar en esta etapa si la audiencia de evaluación tiene plazos específicos para los que se requiere un informe de evaluación. Este será un factor importante para decidir lo que puede y no puede recolectar.
Al enmarcar sus preguntas de evaluación centradas en los resultados, manténgalas abiertas. Eg. «Hasta qué punto lo hizo…»
Tipos amplios de preguntas de evaluación por esfera prioritaria
Adaptado de: Davidson & Wehipeihana (2010)
| Enfoque de la evaluación | Pregunta de evaluación |
|---|---|
| Proceso |
Qué tan bien se diseñó e implementó el proyecto (es decir, su calidad) |
| Resultado |
¿En qué medida el proyecto satisfizo las necesidades generales? ¿Hubo algún cambio significativo y en qué medida fue atribuible al proyecto? ¿Cuán valiosos son los resultados para la organización, otras partes interesadas y participantes? |
| Aprendizajes |
¿Qué funcionó y qué no funcionó? ¿Cuáles fueron las consecuencias no deseadas? ¿Cuáles eran las propiedades emergentes? |
| la Inversión |
Fue el proyecto rentable? ¿Había otra alternativa que pudiera haber representado una mejor inversión? |
| ¿Qué siguiente |
Se puede ampliar el proyecto? ¿Se puede replicar el proyecto en otro lugar? ¿El cambio es autosostenible o requiere una intervención continua? |
| la Teoría del cambio |
¿el proyecto tiene una teoría de cambio? ¿Se refleja la teoría del cambio en la lógica del programa? ¿Cómo puede la lógica del programa informar las preguntas de investigación? |
A continuación se presenta otra forma de clasificar las preguntas generales de evaluación.
Adaptado de: Oficina de Cooperación para Europa
| Enfoque de la evaluación | Pregunta de evaluación |
|---|---|
| Relevancia |
¿El tema y los contenidos del taller satisfacen las necesidades de información del grupo destinatario? ¿Hasta qué punto el objetivo de intervención está en línea con las necesidades y prioridades de la comunidad? |
| Eficiencia |
¿El método de participación utilizado en este proyecto llevó a un número de participantes similar al de programas anteriores u otros a un costo comparable o menor? ¿Los enfoques de engagement más caros han dado mejores resultados que los enfoques de engagement menos costosos? |
| Eficacia |
¿En qué medida los talleres dieron lugar a un mayor apoyo de la comunidad a la acción para hacer frente al cambio climático? ¿En qué medida el método de participación animó al grupo objetivo a participar en el proyecto? |
| Resultado |
¿En qué medida el proyecto ha dado lugar a comportamientos más sostenibles en el grupo destinatario? ¿Hubo otros resultados positivos o negativos no deseados del proyecto? |
| Sostenibilidad |
¿En qué medida el proyecto ha conducido al cambio de comportamiento a largo plazo? |
Paso 3. Identificar las preguntas de monitoreo
Para responder a las preguntas de evaluación, se deben desarrollar preguntas de monitoreo que informen qué datos se recopilarán a través del proceso de monitoreo. Las preguntas de monitoreo son bastante específicas en lo que hacen, en comparación con las preguntas de evaluación. Por ejemplo, para una pregunta de evaluación de » ¿Qué funcionó y qué no?»es posible que tenga varias preguntas específicas, como» ¿Los talleres condujeron a un mayor conocimiento sobre la eficiencia energética en el hogar?»o» ¿Instalaron los participantes cabezales de ducha eficientes en el consumo de agua».
Las preguntas de monitoreo idealmente se responderán a través de la recopilación de datos cuantitativos y cualitativos. Es importante no saltar directamente a la recopilación de datos, sin pensar en las preguntas de evaluación. Saltar directamente puede llevar a recopilar datos que no proporcionan información útil, lo que es una pérdida de tiempo y dinero.
Descargue la Plantilla de Plan M&E para ingresar la información o descargue una plantilla de plan M&E completada de forma particular que incluye ejemplos de preguntas de evaluación, preguntas de monitoreo, indicadores y fuentes para un proyecto educativo de reciclaje en la acera.
Si ha desarrollado una lógica de programa, puede usarla para comenzar a identificar preguntas e indicadores de monitoreo relevantes. Haga clic aquí para ver cómo.
Una vez que haya identificado la pregunta de monitoreo en la lógica de su programa, puede transferirla a su plantilla de plan M&E. Haga clic aquí para ver cómo.
Un breve tutorial sobre cómo extraer información de la lógica del programa para desarrollar el plan M&E, se abre en PowerPoint
Paso 4. Identifique los indicadores y las fuentes de datos
El siguiente paso es identificar qué información necesita para responder a sus preguntas de monitoreo (indicadores) y de dónde vendrá esta información (fuentes de datos). Es importante considerar la recolección de datos, en términos del tipo de datos y cualquier tipo de diseño de investigación. Las fuentes de datos podrían ser los propios participantes o los hogares de las personas (p. ej. auditoría de tipos de iluminación)o medición, o incluso literatura. A continuación, puede decidir el método más adecuado para recopilar los datos de la fuente de datos.
El selector de herramientas de evaluación está ahí para ayudarle a seleccionar un método apropiado para sus necesidades.
Es importante asegurarse de que su marco de evaluación sea culturalmente apropiado. Cuando trabaje con comunidades Culturalmente Diversas y Lingüísticamente Diversas (CALD), considere involucrar a representantes de la comunidad o expertos culturales en el marco de evaluación para garantizar que los métodos de recopilación de datos sean apropiados (sensibles y comprensibles) para el grupo objetivo. Para obtener más información, consulte el blog de evaluación genuina
Paso 5. Identificar quién es responsable de la recopilación de datos y los plazos
Es aconsejable asignar la responsabilidad de la recopilación de datos para que todos estén claros de sus funciones y responsabilidades. Esto también permite que el personal nuevo se incorpore al proyecto y tenga una idea de quién es responsable de qué, y de lo que puede tener que asumir y cuándo.
La recogida de datos de vigilancia puede producirse regularmente a intervalos cortos, o con menor frecuencia, como semestral o anual. De nuevo, asignar líneas de tiempo limita la excusa de «no saber».
También es posible que desee anotar cualquier requisito que se necesite para recopilar los datos (personal, presupuesto, etc.). Es aconsejable tener alguna idea del costo asociado con el monitoreo, ya que puede tener grandes ideas para recopilar mucha información, solo para descubrir que no puede permitírselo todo. En tal caso, tendrá que priorizar o encontrar algo de dinero en otro lugar (lo siento, pero no tenemos una herramienta especial para eso).
Paso 6. Identifique quién evaluará los datos, cómo se reportarán y cuándo
Este paso es opcional pero muy recomendable, ya que completará el plan M&E como un documento completo. Recordando que la evaluación es la evaluación subjetiva del valor de un proyecto, es importante identificar quién hará esta «evaluación subjetiva». En la mayoría de los casos, será el equipo del proyecto, pero en algunos casos, puede involucrar a otras partes interesadas, incluido el grupo objetivo o los participantes. También puede considerar subcontratar una parte particular de la evaluación a una parte externa o independiente.
Para que una evaluación sea utilizada (y por lo tanto útil) es importante presentar los hallazgos en un formato que sea apropiado para el público. Esto puede significar un informe corto, o un memo, o incluso un póster o boletín informativo. Como tal, se recomienda que considere cómo presentará su evaluación desde el principio, para que pueda adaptar la forma de presentar sus hallazgos al formato de presentación (como gráficos, tablas, texto, imágenes).
Paso 7. Revise el plan M&E
Una vez que haya completado su plan M&E, resalte las fuentes de datos que aparecen con frecuencia. Por ejemplo, es posible que pueda desarrollar encuestas que cumplan con los requisitos de recopilación de datos para muchas preguntas.
También considere volver a ordenar el plan M& E de varias maneras, por ejemplo, por fuente de datos o por período de recopilación de datos. Finalmente, revise esta lista de verificación. Hace su plan M& E:
- ¿Centrarse en las preguntas clave de la evaluación y en el público de la evaluación?
- Capturar todo lo que usted necesita saber para hacer una evaluación significativa del proyecto?
- Solo hace preguntas de monitoreo relevantes y evita la recopilación de datos innecesarios?
- ¿Sabe cómo se analizarán, utilizarán y notificarán los datos?
- ¿Trabaja dentro de su presupuesto y otros recursos?
- ¿Identificar las habilidades necesarias para llevar a cabo la recopilación y el análisis de datos?