|
.
¿Por qué utilizar esta herramienta en evaluación?
El análisis de problemas es un medio para juzgar la validez de los objetivos de un proyecto, programa o estrategia. En la medida en la que un programa se asigna objetivos que buscan resolver un determinado número de problemas, resulta útil que la evaluación valide el análisis que se ha realizado en este sentido. En ese caso, en la evaluación debe verificarse:
- La validez del proceso: ¿cómo se han identificado y jerarquizado los problemas?
- La coherencia manifiesta de su articulación: ¿son pertinentes los vínculos de causalidad?
Los programas y estrategias se apoyan en un análisis de la situación en el momento de la concepción de la estrategia o del programa. Puede pedirse explícitamente al equipo de evaluación que se pronuncie sobre la calidad del análisis y sobre la correspondencia entre el análisis de la situación y la estrategia/programa. El diagrama de problemas, como construcción retrospectiva, permite comprobar la coherencia y pertinencia del análisis respecto a los problemas, tanto prioritarios como contextuales. Permite en especial validar la pertinencia de la estrategia presentada en los diagramas de objetivos y de efectos.
¿Cuándo utilizar el diagrama de problemas?
El diagrama de problemas es un instrumento de la fase de estructuración de la evaluación, especialmente útil cuando no es posible establecer directamente un diagrama de objetivos. Ofrece une visión sintética de los aspectos de la situación que debe, al menos parcialmente, mejorar la estrategia. Así, los objetivos, jerarquizados de ésta deben poder deducirse del diagrama.
La elaboración del diagrama de problemas comprende una etapa en la que se diferencia entre los problemas de contexto y los problemas de intervención. El diagrama resultante se tiene que poder transponer íntegramente en diagrama de objetivos: al problema central le corresponde el objetivo global y a cada nivel de problemas un nivel equivalente de objetivos.
¿Cómo construir el diagrama de problemas?Etapa 1: ¿cómo identificar los problemas?
Los problemas se reconocen mediante la identificación de referencias a ellos en los documentos básicos de la evaluación: el documento estratégico y el programa o cualquier documento preliminar (actas de reuniones, notas de fin de misiones de avanzada, correspondencia y notas internas o entre servicios) pueden mencionar los problemas contra los que se dirige la estrategia.
A veces sólo aparecen en forma de objetivos de la ayuda o de efectos que se esperan de la misma. Así pues, se trata de identificar los problemas, que pueden aparecer como:
- Problemas (expresados como tales).
- Objetivos que intentan resolver explícita o implícitamente un problema.
- Efectos intencionales de la ayuda que prevé el documento estratégico de la Comisión.
Los problemas que sean directamente objeto de la intervención pueden no estar explícitamente identificados. En ese caso, los problemas prioritarios y contextuales se confunden, lo que dificulta la construcción del diagrama. El evaluador solamente podrá distinguir los diferentes tipos de problemas al final de ésta.
La identificación del problema principal entre los numerosos problemas identificados constituye la etapa crucial del proceso. Pueden darse tres situaciones:
- En los documentos se indica el problema principal.
- El problema principal no se indica claramente, pero el objetivo global sí. El evaluador puede entonces deducir el problema principal a partir del objetivo global.
- Ni el problema principal ni el objetivo global están explícitamente indicados.
En este último caso, el evaluador debe seleccionar uno de los problemas como problema principal. Puede:
- Realizar personalmente la elección que le parezca más lógica.
- Proceder mediante consulta individual a especialistas, o mediante un debate en el marco de una reunión de especialistas.
La elección del problema principal es indisociable de la clasificación de los problemas por niveles. La selección del problema central tiene su justificación en la coherencia del conjunto del diagrama. Una vez hecha la elección, el evaluador debe proceder a una primera clasificación de los problemas por niveles.
Etapa 2: establecer el diagrama
La práctica demuestra que los problemas principales y las causas profundas son los más identificables, mientras que las causas intermedias son más difíciles de identificar, y todavía más de jerarquizar. Por lo tanto, se recomienda comenzar simultáneamente por ambos extremos.
Fig. 4 - Diagrama de los problemas identificados en el sector del transporte de Tanzania
|
|
|
Comprobar el diagrama provisional
Es indispensable comprobar el diagrama con los autores de los documentos utilizados con el fin de validar las clasificaciones establecidas por niveles y los vínculos entre los problemas. Se trata de comprobar que las interpretaciones del equipo de evaluación reflejen correctamente las intenciones de los autores. Con o sin los autores, toda otra persona que haya contribuido en la elaboración (redacción, debate) de los documentos puede aportar un testimonio útil.
Establecer la versión definitiva del diagrama de problemas
Esta versión incluye las opiniones recogidas durante el test de la versión provisional. Por lo tanto, se considerará que da cuenta fielmente de los análisis iniciales de la Comisión Europea, presentes en los documentos oficiales.
¿Qué recursos se necesitan?
La mayoría de los problemas gráficos pueden resolverse con la ayuda del programa MS PowerPoint. También se pueden probar los programas concebidos como herramientas de ayuda a la decisión, tales como MS Visio, TeamUP-PCM para Windows o Palisade PrecisionTree.
| Fig. 5 - Recursos necesarios |
| En tiempo |
Recopilación y examen de documentos: de 5 a 10 días.
Análisis y construcción del diagrama: de 5 a 10 días.
Test: de 0,5 a 5 días. |
| Humanos |
Conocimiento de los procedimientos de elaboración de las estrategias y programas que utiliza la Comisión Europea.
Dominio de las herramientas informáticas.
Rigor lógico.
Experiencia en los campos cubiertos por las estrategias y los programas.
Conocimiento del país, del sector o del tema en cuestión. |
| Económicos |
Es necesario un presupuesto de menos de 5.000 €, que también permita en parte la construcción de los diagramas de objetivos, efectos y decisiones. |
¿Cuáles son las ventajas y los límites de esta herramienta?
| Fig. 6 - Ventajas y límites |
| Ventajas |
Presentación de los problemas
El diagrama presenta de forma explícita los problemas y los diferentes niveles en los que éstos se sitúan con relación al problema principal. Asimismo, expresa los vínculos lógicos de causalidad entre estos problemas o, por el contrario, las carencias lógicas de dichos vínculos.
Problemas prioritarios y problemas de contexto
El diagrama lleva a distinguir en el análisis de la situación entre lo que concierne al contexto de la intervención y los problemas a los que la estrategia y la programación buscan dar solución. Así pues, contribuye a actualizar las prioridades de la ayuda y a justificar por qué determinados problemas se han considerado como prioritarios y otros no.
Definición de los objetivos
El diagrama de problemas permite:
- Mostrar los objetivos no explícitos de la estrategia o del programa.
- Comprobar si los objetivos que se han presentado en los documentos de estrategia y de programación están bien fundados.
Contribuye a organizar la evaluación, con el fin de responder a la pregunta esencial de toda evaluación: ¿en qué medida se han alcanzado los objetivos? |
| Límites |
Calidad del análisis
El método de análisis no garantiza la buena calidad de los datos. El evaluador debe ampliar sistemáticamente su estudio al origen del análisis producido por esos documentos y preguntarse por el método utilizado, las fuentes principales de información e identificar a los redactores.
Elección del problema principal
La elección del problema principal, esencial para la construcción del diagrama de problemas, es especialmente ardua cuando hay que considerar el conjunto de los problemas del país (de la región). Además, no hay que excluir la posibilidad de que los documentos indiquen dos problemas principales, sin vínculo directo entre ellos, o que no permitan designar un solo problema principal.
Conocimiento del contexto
El equipo de evaluación no dispone generalmente de un conocimiento suficiente sobre la situación del país o de la región para apreciar el grado de pertinencia del análisis que se ha hecho, del carácter prioritario atribuido a ciertos problemas, de la elección del problema principal y de la organización lógica de los problemas prioritarios. |
.
|
