TÉCNICAS PARA MEDIR RESULTADOS (recomendaciones para la evaluabilidad)

Nomenclatura: 15

Que un proyecto sea evaluable significa que permite:

•Entender la lógica de intervención, sus principales hipótesis y marco temporal;

•Identificar las partes interesadas y los datos clave que se deberán tomar en consideración al momento de realizar las actividades de monitoreo y evaluación. 

A. OBJETIVOS

§Realistas, es decir, se deben poder alcanzar con los recursos disponibles dentro de las condiciones generales dadas.

§Eficaces, es decir, no sólo deben responder a los problemas presentes, sino a aquellos que existirán en el tiempo futuro en el que se ubica el objetivo.

§Coherentes, si el cumplimiento de un objetivo no imposibilita el cumplimiento de otro.

§Cuantificables, es decir, que puedan ser medibles en el tiempo.

B. INDICADORES

En la matriz de marco lógico los indicadores definen operacionalmente lo escrito en la columna del resumen narrativo, aparecen en cada nivel jerárquico, y se refieren al resultado esperado al completarse un componente, lograrse el propósito o lograr una contribución significativa al fin del proyecto. Para el caso de las actividades, la columna de indicadores se ocupa del presupuesto de cada actividad.

a. Pasos para la formulación de indicadores

b. Papel del indicador en los proyectos

c. Indicadores apropiados

d. Atributos del indicador

e. Elementos para formular indicadores “inteligentes”

f. Indicadores “proxy” o sustitutos

g. Indicadores de avanzada o intermedios

C. MEDIOS DE VERIFICACIÓN

Indican donde el ejecutor o el evaluador pueden obtener información acerca de los indicadores; deben ser prácticos y económicos y que proporcionan, ambos, la base para supervisar y evaluar el proyecto.

§Precauciones para establecer los medios de verificación

§Medios de verificación expandidos

D. SUPUESTOS

Son las condiciones suficientes para obtener los resultados. Son factores críticos, que están fuera del control de la gerencia del proyecto o de la agencia ejecutora (que implican riesgo) cuya ocurrencia es necesaria para que el proyecto logre sus objetivos y, por lo tanto, afectará sus probabilidades de éxito.

Los supuestos reconocen que existe incertidumbre en el proyecto y son condiciones “suficientes” de la MML, por lo que su especificación tiene gran importancia en el diseño y la ejecución del proyecto.

i. Fuentes para identificar los supuestos

ii. Problemas detectados en la formulación de supuestos

iii. Elementos importantes para formular los supuestos

MATRIZ DE (PLANIFICACIÓN) MARCO LÓGICO

Nomenclatura: 14

La Matriz de Marco Lógico presenta en forma resumida los aspectos más importantes del proyecto.

Posee cuatro columnas que suministran la siguiente información:

a)Un resumen narrativo de los objetivos y las actividades.

b)Indicadores (resultados específicos a alcanzar).

c)Medios de verificación.

d)Supuestos (factores externos que implican riesgos). 

Y cuatro filas que presentan información acerca de los objetivos, indicadores, medios de verificación y supuestos en cuatro momentos diferentes en la vida del proyecto:

a) Fin al cual el proyecto contribuye de manera significativa luego de que el proyecto ha estado en funcionamiento.

b) Propósito logrado cuando el proyecto ha sido ejecutado.

c) Componentes/resultados completados en el transcurso de la ejecución del proyecto.

d) Actividades requeridas para producir los componentes/resultados.

IDENTIFICACIÓN DEL PROBLEMA Y ALTERNATIVAS DE SOLUCIÓN

NOMENCLATURA 13:

El proceso de planificación nace con la percepción de una situación problemática y la motivación para solucionarla.

Dicha percepción o necesidad de estudiar y analizar determinada situación puede surgir de distintos ámbitos, algunos de ellos pueden ser:

•Aplicación de una política de desarrollo.

•Recuperación de infraestructura.

•Necesidades o carencias de grupos de personas.

•Bajos niveles de desarrollo detectado por planificadores.

•Condiciones de vida deficitarias detectadas en algún diagnóstico en el ámbito local.

•Acuerdos internacionales como la viabilidad necesaria para el intercambio comercial entre países. 

La Metodología Marco Lógico incorpora cuatro elementos importantes:

A.ANÁLISIS DE INVOLUCRADOS.

Permite optimizar los beneficios sociales e institucionales del proyecto y limitar los impactos negativos.

Implica:

I. Identificar a los que se beneficien de manera directa o indirecta.

II. Investigar roles, intereses, poder relativo y capacidad de participación.

III. Identificar su posición, de cooperación o conflicto, frene al proyecto y diseñar estrategias con relación a dichos conflictos.

IV. Interpretar los resultados del análisis y definir cómo pueden ser incorporados en el diseño del proyecto.

B. ANÁLISIS DEL PROBLEMA.

§ Analizar e identificar lo que se considere como problemas principales de la situación a abordar.

§ A partir de “lluvia de ideas” establecer el problema central que afecta a la comunidad, aplicando criterios de prioridad y selectividad.

§ Definir los efectos más importantes del problema en cuestión, de esta forma se analiza y verifica su importancia.

§ Anotar las causas del problema central detectado. Esto significa buscar qué elementos están o podrían estar provocando el problema.

§ Una vez que tanto el problema central, como las causas y los efectos están identificados, se construye un árbol de problemas.

§El árbol de problemas da una imagen completa de la situación negativa existente. 

C. ANÁLISIS DE OBJETIVOS.

Permite describir la situación futura a la que se desea llegar una vez resuelto los problemas.

Consiste en convertir los estados negativos del árbol de problemas en soluciones, expresadas en forma de estados positivos. De hecho, todos esos estados positivos son objetivos y se presentan en un diagrama de objetivos en el que se observa la jerarquía de los medios y de los fines.

D. IDENTIFICACIÓN DE ALTERNATIVAS DE SOLUCIÓN AL PROBLEMA.

Proponen acciones probables que puedan en términos operativos conseguir el medio.

E. SELECCIÓN DE LA ALTERNATIVA ÓPTIMA.

Consiste en la selección de una alternativa que se aplicará para alcanzar los objetivos deseados.  Durante el análisis de alternativas o estrategias, conviene determinar los objetivos DENTRO de la intervención y de los objetivos que quedarán FUERA de la intervención.

Todas las alternativas deben cumplir con el propósito y los fines.

Se selecciona la estrategia, no sólo más factible en términos económicos, técnicos, legales y ambientales, sino también pertinente, eficiente y eficaz; para lo cual se hace necesario realizar una serie de técnicas y de estudios respectivos que permitirán utilizar criterios de selección.

Para seleccionar una alternativa, se realizan diferentes análisis como:

ü Diagnóstico de la situación.

ü Estudio técnico de cada alternativa.

ü Análisis de los costos de las actividades que cada alternativa demanda.

ü Análisis de los beneficios.

ü Comparación a través de algunos criterios e indicadores y de esta comparación tomamos la que muestra los mejores resultados.

F. ESTRUCTURA ANALÍTICA DEL PROYECTO (EAP).

Es un esquema de la alternativa de solución más viable expresada en sus rasgos más generales a la manera de un árbol de objetivos y actividades, que resume la intervención en 4 niveles jerárquicos y da pie a la definición de los elementos del Resumen Narrativo de la Matriz Lógica del Proyecto.

Para construir la EAP deberíamos seguir los siguientes pasos:

I.Partiendo de arriba hacia abajo, obtener los fines fin, dependiendo del proyecto, los cuales se toman del árbol de objetivos.

II.El problema central se identifica a partir del árbol del objetivos.

III. Para identificar los productos o componentes se puede analizar la información obtenida en la identificación de alternativas, mirar cual de ellas es la seleccionada y el análisis de costos de la misma. En la configuración de las alternativas aparecen enunciados el producto y además estos se desarrollan en actividades cuando se hace el estudio de costos de cada alternativa.

IV. Para identificar las acciones es preferible revisar el presupuesto de la alternativa óptima donde un rubro o grupo de estos, se proponen como acciones.

V. El siguiente paso enmarca la EAP en una matriz de cuatro por cuatro, que contiene elementos en orden vertical (filas): fin, propósito, componentes y actividades, y en sentido horizontal (columnas): resumen narrativo, indicadores, medios de verificación y supuestos.

DESCRIPCIÓN DEL PROCESO SMART

Nomenclatura:  12

EQUILIBRIO DEL PROCESO SMART TRES VARIABLES:

RESULTADOS: Cambio de estado o situación derivado de una relación causa – efecto.

ALCANCE: Ámbito geográfico, la finalidad, la amplitud y la intensidad de la influencia y la cooperación con las principales partes interesadas (los beneficiarios y los asociados).

RECURSOS: Financieros, humanos e institucionales que se emplean directa o indirectamente en las intervenciones.

ETAPAS DE LA GBR (RBM)

Nomenclatura:  11

Definición de la Contribución a los resultados esperados de nivel superior.

Garantizar la coherencia programática global, que empleen todos los recursos con miras al logro de los resultados esperados de nivel superior de la Organización.

Análisis de las necesidades que hay que atender y los problemas que hay que resolver. CAUSAS – EFECTOS.

Tener en cuenta los recursos disponibles; al calcular los recursos que se necesitan, importa no sólo centrarse en los recursos que requiere la ejecución, sino incluir también recursos para la programación, la gestión, el seguimiento, la presentación de informes y la evaluación.

El objetivo de esta apreciación es definir el alcance de los resultados esperados que han de conseguirse.

Concepción de los marcos de resultados y, en particular, formulación de los resultados esperados de modo que resulte claro y mesurable. 

Para cada resultado esperado, hay que establecer indicadores del desempeño y sus correspondientes referencias, así como metas cuantitativas y/o cualitativas.

Elaboración de una estrategia de ejecución.

Mediante un marco conceptual en el que se explique cómo pasar de la situación actual a la que se describe en el enunciado del resultado o resultados esperados.

§ Principales necesidades y principales problemas; referencia.

§Lógica de intervención: “porqué/cómo” de los productos y de los resultados esperados a largo plazo previsto.

§Los beneficiarios directos y las principales asociados, y las funciones que se espera que desempeñen.

Seguimiento de los progresos realizados en la consecución de los resultados esperados.

Mediante un seguimiento adecuado del desempeño y del impacto a partir de información sobre los productos y los resultados reales alcanzados.

OBJETIVO: Situación real entre lo esperado y lo logrado, brinda la oportunidad de facilitar la apropiación y la sostenibilidad mediante la movilización de las principales asociados y los beneficiarios directos.

Presentación de informes.

A las principales partes interesadas; información basada en datos empíricos sobre el desempeño y el impacto, analizando las discrepancias que pueda haber entre resultados “esperados” y “logros”.

Con el objeto de informar a la dirección de la Organización y al donante, facilitar la toma de decisiones, orientar la concepción de los programas y la formulación de las políticas en el futuro.

Difundir, examinar y aprender las enseñanzas.

Evaluación.

Proporciona valoraciones oportunas de la pertinencia, la repercusión, la eficacia, la eficiencia y la sostenibilidad de los programas, las actividades o los proyectos.

La cadena de resultados se establece a partir de la lógica de intervención (proceso de transformación). Resultado es un cambio de estado o de situación, derivado de una relación de causa – efecto.

ESQUEMA DE LA CADENA DE RESULTADOS DE LA UNESCO

Nomenclatura: 10 

¿QUÉ ES LA GBR (RBM)? Y LA GBR (RBM) EN EL MARCO DE GESTIÓN DE LA UNESCO

Nomenclatura: 9

¿QUÉ ES LA GBR (RBM)?

Estrategia de gestión encaminada a modificar el funcionamiento de las Instituciones, mediante el mejoramiento de los desempeños, las orientaciones programáticas prioritarias y la ejecución.

FASE DE PROGRAMACIÓN: Número de intervenciones necesario y suficiente para alcanzar el resultado. PROGRAMA, GESTIÓN Y TOMA DE DECISIONES.

FASE DE EJECUCIÓN: Garantizar y comprobar que se siguen empleando todos los recursos financieros, humanos e institucionales disponibles para la obtención de los resultados que se persiguen. 

CADENA DE RESULTADOS

El vínculo establecido entre los resultados esperados en distintos niveles del programa, garantiza que la Organización concentre sus recursos en la consecución de los resultados esperados definidos en los niveles más elevados aprobados por la Conferencia General.

RESULTADOS SMART

Cambios de estado o de situación que se derivan de una relación de causa – efecto.

CAMBIO DESEADO: Se espera generar resultados mediante la ejecución de los programas, las actividades o los proyectos llevados a cabo en el marco del Programa y Presupuesto.

El desempeño en el logro de resultados se medirá con arreglo tanto a indicadores cuantitativos como cualitativos. Al formular los resultados esperados, conviene utilizar los criterios del planteamiento SMART para verificar que son realizables y significativos.

SMART

ESPECÍFICO (Specific): Resultado preciso y bien diferenciado, claramente formulado. Debe ser lo m as detallado posible sin ser verboso.

MESURABLE (Measurable): Medido de algún modo; cuantitativo/cualitativo.

REALIZABLE (Achievable): Realista en los recursos financieros, humanos e institucionales disponibles.

PERTINENTE (Relevant): Contribuir a la consecución del resultado o resultados esperados de nivel superior y atender necesidades o retos reconocidos como tales en el marco del mandato de la Organización.

DURACIÓN LIMITADA (Time – bound): Poder alcanzarse en un plazo determinado.

LA GBR (RBM) EN EL MARCO DE GESTIÓN DE LA UNESCO

A)LA ESTRATEGIA A PLAZO MEDIO DE LA UNESCO. En su condición de organismo especializado de las Naciones Unidas, la UNESCO – de conformidad con su Constitución – contribuye a la consolidación de la paz, la erradicación de la pobreza y el desarrollo sostenible y el diálogo intercultural, mediante la educación, las ciencias, la cultura, la comunicación y la información. Se han definido dos prioridades globales para toda la estrategia: la prioridad “África” y la prioridad “Igualdad de género”.

El documento 37 C/4, contribuir a:

•La consecución acelerada de los objetivos de desarrollo convenidos internacionalmente, incluidos los Objetivos de Desarrollo del Milenio (ODM), antes de que concluya 2015.

•La configuración de la Agenda para el Desarrollo después de 2015;

•El logro de los Objetivos de Desarrollo Sostenible (ODS).

•

La Nueva Estrategia a Plazo Medio se estructura, en torno a dos objetivos globales gobernados por el programa y pertinentes para toda la Organización, concebidos de modo que responden a retos mundiales específicos y representan las competencias básicas de la UNESCO en el sistema multilateral:

PAZ – Contribuir a una paz duradera;

DESARROLLO EQUITATIVO Y SOSTENIBLE – Contribuir al desarrollo sostenible y a la erradicación de la pobreza.

Cada objetivo estratégico incorpora un vínculo entre las tareas normativas y las tareas operacionales.

La estrategia a Plazo Medio muestra cómo concibe la UNESCO la tarea de atender estas dos exigencias:

Ø Centrar los esfuerzos de la Organización en un número limitado de áreas prioritarias a fin de lograr que su acción tenga efectos duraderos y sea congruente con el papel que desempeña en la reforma del sistema de las Naciones Unidas.

Ø Velar por la coherencia de las estrategias y los objetivos globales de la Organización.

B. PROGRAMA Y PRESUPUESTO DE LA UNESCO

Los documentos C/5, están destinados a configurar la acción de la UNESCO para que esta responda a los objetivos globales y estratégicos del programa señalados en el documento de Estrategia a Plazo Medio, y permiten establecer una serie limitada de ejes de acción (EA) para cada gran programa, posibilitando una transición armoniosa entre las prioridades a plazo medio y las prioridades del programa cuatrienal de la UNESCO y garantizando un ajuste entre actividades o proyectos específicos del programa y objetivos a plazo medio.

EJES DE ACCIÓN: Establecen cuáles son las contribuciones de un sector al logro de los objetivos del documento C/4, determinándose ámbitos esenciales de intervención y el compromiso y la participación intersectoriales e insterdisciplinarios. 

TRES NIVELES DEL PROGRAMA UNESCO

Nivel 1: Gran Programa

Nivel 2: Resultado esperado del C/5

Nivel 3: Plan de Trabajo, programa ordinario/extrapresupuestario

EL PROGRAMA Y PRESUPUESTO: Ha sido elaborado con arregglo a los principios de la GBR (RBM) y, de manera gradual, de la presupuestación basada en resultados (PBR/RBB). Se propone, que para cada resultado esperado que figura en el documento c/5, la estrategia que deberá seguirse para su consecución.

Además, se establecen, en este nivel del programa, indicadores del desempeño y sus correspondientes referencias. Así como metas cuantitativas y/o cualitativas.

En la ejecución de su programa, la UNESCO seguirá aplicando el planteamiento SMART por la elaboración de los resultados esperados.

C. PLANES DE TRABAJO

Actividades del programa ordinario y a los proyectos extrapresupuestario de la Organización.

Transición armoniosa en el programa y los resultados esperados de la UNESCO, desde la Estrategia a Plazo Medio hasta el Programa y el Presupuesto y los Planes de Trabajo.