El nuevo sistema de M&E en el BID

Transcripción

1 El nuevo sistema de M&E en el BID VII Conferencia de la Red de Monitoreo y Evaluación en América Latina y el Caribe Santo Domingo, República Dominicana Noviembre 15, 2011

2 El Marco de Efectividad en el Desarrollo (DEF) Dos factores principales:» trabajar en los temas correctos (Do the right things). Cualquier intervención es una elección que prioriza unos temas sobre otros. Las elecciones estratégicas del Banco deben reflejar la forma en la que el Banco puede contribuir, de forma eficiente y demostrable, a ciertas prioridades mas amplias definidas por cada uno de los países miembros.» y hacer las cosas bien (Do things right). Asegurarse que las operaciones del Banco puedan demostrar sus resultados, de forma rigurosa, involucra : -diagnósticos sustentados en evidencia empírica, -evidencia de la eficacia de las soluciones propuestas, -insumos y productos entregados en tiempo y costo, -los riesgos de las operaciones son gestionados y las medidas de mitigacion son monitoreadas. -utilización de métodos de evaluación rigurosos para demostrar que los insumos y productos se transforman en los resultados buscados. 2

3 El Marco de Efectividad en el Desarrollo (DEF) En Agosto 2008, el Directorio del Banco aprobó el Marco de Efectividad en el Desarrollo (MED) MED Estrategias de Países Operaciones con garantía Soberana Operaciones sin garantía Soberana Productos no Financieros Incrementar la capacidad del Banco de demostrar los resultados de sus intervenciones Cumplir con estándares internaciones para la evaluaciones de las intervenciones de desarrollo OECD-DAC Evaluation Cooperation Group 3

4 1er Paso: Trabajar en los temas correctos» cuales son y como elegimos? IDB 9 Prioridades Prioridades Institucionales y sus métricas El Marco de Resultados del BID Prioridades de las Estrategias de País Las Prioridades de Desarrollo de los Países, el rol del BID y sus métricas La Matriz de Resultados de la Estrategia de País 4

5 IDB Strategic Priorities Trabajar en los temas correctos. Mapeo de nuestros productos a las prioridades 2 Low High Low High Country Strategic Priorities 5

6 Hacer las cosas bien la Matriz de Efectividad 2 en el Desarrollo (DEM)» Mide la evaluabilidad de los proyectos propuestos El nivel en el cual una actividad o un programa podrá ser evaluado de manera confiable y creíble» Es una lista de verificación sobre requerimientos analíticos y de información» Sistema de respuesta: Si/No» Calificaciones parciales por dimensión de evaluabilidad 6

7 Hacer las cosas bien la Matriz (DEM) Sección 1 de la DEM 2 Alineación Estratégica» Esta la operación directamente relacionada con los acuerdos del CS-CP?» Esta la operación alineada a las prioridades del IDB-9?» Si no, justificar su importancia 3 1» Por que es esta intervención lo correcto para el Banco? 4 2 7

8 Hacer las cosas bien la Matriz (DEM) Sección 2 de la DEM Evaluabilidad» El diagnostico y la solución propuesta tiene sustento empírico?» Podemos demostrar los resultados de la operación de forma rigurosa?» Son los riesgos y sus medidas de mitigacion gestionables? Lógica del Programa Desempeño del Proyecto o de la Compañía Análisis Económico Contribución al Desarrollo Económico SG Monitoreo & Evaluación NSG Riesgos y Mitigantes Ambiental/Social Gestión de Riesgos Desarrollo del Sector Privado 8

9 Indice de Evaluabilidad (DEM-SGO)» Para las secciones que conforman la dimensión de evaluabilidad se ha desarrollado un índice, en el cual dichas secciones tienen los siguientes pesos: Lógica del Programa El proyecto está empíricamente sustentado? El proyecto tiene métricas para medir cada hipótesis? 25% Desempeño Económico El proyecto cuenta con un análisis costo-beneficio o costo-efectividad para la solución propuesta? 25% Monitoreo & Evaluación Gestión de Riesgo El proyecto tiene metodologías específicas para monitorear y evaluar el cambio esperado? El proyecto tiene riesgos identificados? Si es así, tiene indicadores para monitorear la implementación de las medidas de mitigación? 25% 25%» Los Gobernadores en el BID-9 acordaron un nivel mínimo de evaluabilidad (el 100% de las operaciones deben obtener mínimo 5 en el índice de evaluabilidad) Escala de Puntajes: Altamente Evaluable (7-10); Evaluable (6 6.99); Parcialmente Evaluable (5 5.99); Parcialmente No Evaluable (4 4.99); No Evaluable (2 3.99); Altamente No Evaluable (0 1.99) 9

10 Resultados

11 Resultados

12 Resultados

13 Informe de Seguimiento del Progreso (PMR): Que medir para monitorear la implementación del proyecto Diseño Matriz de Resultados Ejecución Resultados Productos Planificación de indicadores Plan de avance físico y financiero Monitoreo Resultados (n) Puntos de Control y Fin de proyecto Monitoreo Productos Progreso en el avance de metas físicas y sus costos totales Indice Desempeño Riesgos, Problemas, Lecciones DEM PMR XPMR 13

14 Informe de Seguimiento del Progreso (PMR): Que medir para monitorear la implementación del proyecto ID 1.0 Producto1 Productos Fin del Costos Programa Total Planeado Progreso Planeado Progreso Planeado Progreso Planeado Progreso Planeado Progreso $(000) $ $ $ $ $ $ $ $ $ $ 2.0 Producto Producto Producto Producto 5 TOTAL $0 DESEMBOLSOS Fin del Programa Total Planeado Progreso Planeado Progreso Planeado Progreso Planeado Progreso Planeado Progreso $(000) $ $ $ $ $ $ $ $ $ $ TOTAL 14

15 Ventajas y Desafíos para el Monitoreo 2 Mejorar capacidad de planificación (Banco y Agencias Ejecutoras) Asegurar mejor calidad de la información (cuantitativa y cualitativa) Mejorar los sistemas de control interno en sectores Mejorar la claridad de los productos (estandarización) y su unidad de medida Asegurar la recolección de la información de datos (incluyendo los corporativos) para facilitar el reporte y visualización de resultados Introducir incentivos para la colaboración (Plan de Supervisión) y Recursos para Ejecución 15

16 2 Gracias! Shakirah Cossens