Evaluation methodological approach

¿De qué estamos hablando?

Se puede realizar una evaluación antes, durante o después de la intervención evaluada. Según el momento, la finalidad y su utilización éstas serán diferentes.

¿Qué hay que procurar?

• Optimizar los recursos asignados a la evaluación optando por lanzar la evaluación en el momento en el que tendrá el mayor valor agregado.
• Responder ante las necesidades de los principales usuarios de la evaluación en el mejor momento.
• Garantizar que una masa crítica de resultados y de impactos ya se haya materializado en el terreno y se preste a la recolección de información.
• Evitar entrar en conflicto con ejercicios concomitantes de balance o auditoría.

Los momentos de la evaluación

Ex ante

Se realiza la evaluación ex ante antes de la adopción o antes de la puesta en marcha de la intervención. Constituye una ayuda al diseño de la intervención y contribuye a garantizar la calidad del diseño. Está basada en los siguientes puntos:

• Necesidad a satisfacer a corto o a largo plazo.
• Objetivos a alcanzar.
• Resultados esperados e indicadores necesarios para su evaluación.
• Valor agregado de la intervención comunitaria.
• Riesgos vinculados a las propuestas.
• Opciones alternativas abiertas.
• Lecciones extraídas de experiencias similares ya realizadas.

Aspira a tener una influencia directa en las decisiones de puesta en marcha, siempre y cuando se tenga en cuenta las lecciones de las experiencias anteriores para definir el marco de la nueva intervención.

En el transcurso o al final de la puesta en marcha

La evaluación realizada durante o al final de la puesta en marcha apunta a extraer las lecciones de los primeros años de puesta en marcha de la intervención y a hacer ajustes en el contenido de la intervención en curso según las realidades del terreno y/o la evolución del contexto. A menudo comprende un balance de los productos acabados y un análisis de los primeros resultados directos e impactos obtenidos. Su intención es mejorar la intervención en curso y sus conclusiones pueden apoyarse en observaciones realizadas en el terreno.

Ex post

La evaluación ex post se realiza directamente después o mucho tiempo después de terminada la puesta en marcha. Está abocada principalmente a verificar los impactos obtenidos, identificar y juzgar los impactos inesperados y evaluar la sostenibilidad de los beneficios de la intervención.



Permite observar los cambios reales efectuados sobre el terreno, y si el plazo no es demasiado largo, analizarlos para estimar cuáles son atribuibles a la intervención.



La evaluación ex post a menudo tiende a rendir cuentas ante las instituciones que han asignado los recursos. Del mismo modo, ayuda a transferir la experiencia adquirida a otros países o sectores (intención recapitulativa).

Recomendaciones

• La evaluación concomitante ofrece el mejor arreglo entre utilidad y fiabilidad, en particular si se interviene en la segunda parte del ciclo.
• A fin de que la evaluación extraiga enseñanzas a partir de la experiencia obtenida con los programas previos en beneficio de una mejora para los programas posteriores, una solución interesante es establecer un plan plurianual de evaluación que cubra varios ciclos de programación.

¿De qué estamos hablando?

La evaluación puede programarse:

• Al inicio del ciclo en el momento del diseño;
• Durante el transcurso del ciclo (en la mitad o al final del período de la puesta en marcha);
• Después del final del ciclo.

¿Existe un mejor momento para evaluar o hay que evaluar tres veces en cada ciclo?

¿Qué hay que procurar?

Muchas intervenciones están organizadas en ciclos sucesivos y presentan una relativa continuidad de un ciclo al otro.



A menudo se observa que un nuevo ciclo comienza incluso cuando la intervención del ciclo anterior no ha producido aún todos sus efectos.



Estos hallazgos llevan a elegir el momento de la evaluación considerando varios ciclos.

• Para extraer lecciones a partir de la observación de los efectos de la intervención del ciclo "n-1".
• Para nutrir la reflexión sobre la intervención del ciclo "n+1".
• Para observar la puesta en marcha de la intervención del ciclo "n" y permitir una rápida retroalimentación.

¿Cómo tener en cuenta los ciclos?

A los fines de la evaluación:

• Si la evaluación interviene al inicio del ciclo, verifica la pertinencia y la coherencia de los objetivos de la intervención "n" gracias al análisis de las necesidades pero además al análisis de los efectos de las intervenciones previas "n-1", y "n-2".
• Si la evaluación interviene en la mitad del ciclo, busca mejorar la intervención "n" habida cuenta de sus primeros efectos observables y también del análisis de los efectos de las intervenciones "n-1".
• Si la evaluación interviene al final del ciclo, extrae lecciones del análisis de los primeros efectos observables y también de los efectos de las intervenciones "n-1", con miras a preparar la estrategia y los objetivos de la próxima intervención "n+1".

Para elegir las preguntas de evaluación

• Preguntas retrospectivas sobre los impactos y la sostenibilidad de las intervenciones precedentes.
• Preguntas concomitantes sobre los resultados directos y la pertinencia de la intervención en curso.
• Preguntas prospectivas sobre la estrategia de la intervención del ciclo siguiente.

Recomendaciones

Cuando sea posible, hacer que la evaluación termine alrededor de un año antes del final del ciclo. A esa altura, aún es posible y útil modificar la puesta en marcha, porque esta última siempre se prolonga durante uno a dos años después del final del ciclo. En ese momento, también se podrá aportar una ayuda al diseño de la estrategia de intervención para el ciclo siguiente. Por último, no es demasiado tarde para hacer un buen análisis de los impactos de la intervención del ciclo anterior.