Comentarios a las experiencias de Chile, Mexico y Colombia. Manuel Fernando Castro Banco Mundial/ I EG

Transcripción

1 Lecciones de 3 Sistemas de Monitoreo y Evaluación (M& E) de las políticas sociales Comentarios a las experiencias de Chile, Mexico y Colombia Manuel Fernando Castro Banco Mundial/ I EG (mcastroq@worldbank.org) Montevideo, Mayo 19 de

2 Contenido 1. Porqué un sistema de M&E de la PS? 2. Elementos de un exitoso exitoso Sistema de M&E 3. Comparando 3 experiencias de AL 4. Algunas lecciones aprendidas 2

3 Contenido 1. Porqué un sistema de M&E de la PS? 2. Elementos de un exitoso exitoso Sistema de M&E 3. Comparando 3 experiencias de AL 4. Algunas lecciones aprendidas 3

4 1. Porque un sistema de M&E? A nivel micro Fortalecer la administración (gerencia gerencia) ) de los programas y politicas en ministerios, entidades y gobiernos subnacionales A nivel macro Apoyar procesos de decisión presupuestal i.e. presupuesto basado en resultados (PBR) Mejorar planificación sectorial, nacional o sub nacional Diseñar políticas y programas Mejorar la rendición de cuentas en diferentes niveles 4

5 1. Porque un sistema de M&E? Adicionalmente.. Porque información de M&E es un bien público blico refleja un mercado imperfecto Los precios no revelan adecuadamente su valor, beneficios y costos = provisión n ineficiente (Head 1974, Pigou 1962, Musgrave & Peacock,, 1967) Se requiere intervención n del gobierno (regular mercado) Asegurar Oferta suficiente (Registros A., estad,, encuestas, etc) Estimular Demanda adecuada (uso) Tambien garantizar Calidad y Acceso (estandares estandares,, S de I, technologia, etc). 5

6 1. Porque un sistema de M&E? Incentivos contradictorios y demanda irracional irracional = multiples sistemas y fuentes Duplicación de esfuerzos y gasto Dif métodos y herramientas (limitaciones y fortalezas) Calidad deficiente y escaso uso es frecuente Bajas capacidades para producir y administrar datos Falta de claridad en el propoósito de la información del desempeño La información clave usualmente hace falta Desde un enfoque de mercado,, un sistema de M&E: promueve equilibrio entre OO y DD, regula calidad, acceso, uso clarifica el propósito de obtener información del desempeño. 6

7 Contenido 1. Porqué un sistema de M&E? 2. Elementos de un exitoso exitoso Sistema de M&E 3. Comparando 3 experiencias de AL 4. Algunas lecciones aprendidas 7

8 2. Elementos de un exitoso exitoso Sistema de M&E No éxiste un modelo único nico. Buenas prácticas en diferentes países dependen de: Capacidades técnicas existentes Organizacion institucional (ej ej: decentralización,, plan/presup presup,..) Contexto político (ej ej: rol de Congreso, credibilidad,, R. cuentas,, etc.) Cultura Cultura gerencial Liderázgo de agencia (Presidencia Presidencia, Ministerio, Dirección) Aspecto clave: la gerencia real se da en los programas, entidades y sectores,, pero se requieren incentivos externos Ej: información pública blica, presupuesto 8

9 2. Elementos de un exitoso exitoso Sistema de M&E Sin embargo.. Herramientas simples (buenos( indicadores y metas) Combinación de métodos (ML, impacto, monitoreo procesos,, etc) y Arreglos de coordinación (selecci selección y uso de evaluaciones) Incentivos adecuados Desarrollo de capacidades Pueden con mayor probabilidad producir información y herramientas de M&E confiables (oferta oferta) Uso de evaluación y sus resultados (demanda demanda) 9

10 2. Elementos de un exitoso exitoso Sistema de M&E Síntesis de buenas prácticas en M&E 1. Los productos del M&E son por lo general confiables. 2. La información n obtenida del monitoreo y los productos de las evaluaciones son utilizados efectivamente * El amplio uso refleja una fuerte demanda de M&E,, lo que puede garantizar la sostenibilidad del sistema 10

11 Contenido 1. Por que un sistema de M&E? 2. Elementos de un exitoso exitoso Sistema de M&E 3. Comparando 3 experiencias de AL 4. Algunas lecciones aprendidas 11

12 3. Comparando 3 experiencias de AL 3 diferentes vías v M&E inicia en sector social M&E inicia en Oficina Nal. de Presupuesto M&E inicia en Oficina Nal. de Planeación EI Ad hoc estratégicas (Ej:Oportunidades SEDESOL) Apoyo multilaterales Modernización Administración Financiera Modernización Estado (Sistema de Planificación) Arreglos Institucionales de M&E (CONEVAL) Escala ámplia de definición de indicadores y metas Incorporación de indicadores y metas en todo el gobierno Part. academia y desarrollo Comunidad de Prácticantes Desarrollo de Capacidades Selectiva evaluación programas Ad hoc IE (RAS) arreglos de Coordinación con MH, ML Sistematización de M&E Influencia agencias y estrategias Nacionales (SED CONTIGO) Sistematización de M&E influencia sector social (Ej:Chile Solidario) Sistematización de M&E Influencia pilotos sector social MPS PEP Sistema Nacional de M&E Creciente participacion academia y SC 12

13 3. Comparando 3 experiencias de AL Colombia Chile Mexico Agencia Responsable Departamento de Planeación MPS Soporte Normativo Constitución, Ley y política nacional Ministerio de MHCP Finanzas Mideplan CONEVAL No Leyes, regulaciones y política nacional Vinculos presupuesto En progreso lento Alto En progreso rápido Monitoreo Plan de Desarrollo Metas Presidenciales Juntos Presupuesto Público Metas presidenciales Chile Solidario Impacto, rápidas, Operativo en programas Evaluación Impacto, Procesos, Impacto, rápidas E2 revisiones gasto procesos, complementaria Rendición de cuentas Congreso y ciudadanía Congreso Congreso Sistemas sectoriales Social Social Social Orientación Consolidación sistema 2ª etapa Presupuesto SED PBR de M&E MTEF por Resultados RH Duración 15 años 17 años 6 años Rol Presidencia Alto Bajo Creciente consistencia, estratégica, 13

14 3. Comparando 3 experiencias de AL Técnicos No una única herramienta tecnológica (inter operación) Funciones y componentes balanceados (M, E, Reporte) Adaptación de los procesos de presupuesto y planeación Desarrollo de capacidades Estratégicos Gradualismo Oportunidad para adelantar reformas Construcción de redes (sistema no = herramienta tecnológica) Asistencia técnica: apoyo y validación externa Institucionales (políticos) Papel de instancias claves (Presidencia, Ministros, Congreso) Soluciones de coordinación Mecanismos de control social, sc 14

15 Contenido 1. Por que un sistema de M&E? 2. Elementos de un exitoso exitoso Sistema de M&E 3. Comparando 3 experiencias de AL 4. Algunas lecciones aprendidas 15

16 4. Lecciones aprendidas Lecciones consistentes con experiencia de otros países 1. Sistemas de M&E no solo instrumento técnico 2. Necesidad de modulador con capacidad y jerarquía Ideal enfoque centralizado,, (conducir( conducir, consolidar y controlar calidad ID) 3. Esfuerzos por el lado de demanda como de oferta 4. Por el lado de la demanda, incentivos son la clave para lograr uso de la información En LA largo camino por recorrer.. En OECD tomó mas de 20 años crear gerentes Participación de Hacienda, Presidencia, ciudadanía 16

17 4. Lecciones aprendidas 4. Por el lado de la oferta,, (i) cuidado con multiples desconectados y competitivos sistemas; ; (ii) asegurar confianza y credibilidad de los datos 4. Evaluaciones son claves para entender causalidad del desempeño, pero información de Monitoreo es central para medir avances (indicadores indicadores) ) y retroalimetar gestión diaria (oportunidad oportunidad). 5. M&E requiere desarrollar capacidades, recurso humano con perfil apropiado,, C de Evaluadores 17

18 4. Lecciones aprendidas 7. Se Se necesitan adecuaciones institucionales para asegurar objetividad, calidad,, y uso del M&E Quien es responsable de planear, conducir y utilizar las evaluaciones? Auto evaluaciones o evaluaciones independientes? Como se financia el sistema? (a) asignaciones específicas ficas?; (b) costo asumido asumido por programas o dependencias? Vincular M&E con presupuesto y definción de políticas ticas; sistemas de información Armonizar oferta y demanda de información del desempeño 18

19 4. Lecciones aprendidas 8. Es un esfuerzo de largo plazo, requiere gradualidad y continuidad 9. Dependiendo de la tradición las leyes y regulaciones son importantentes pero no suficientes No hay fuertes pre condiciones condiciones, pero los factores de éxito incluyen : evitar sistemas complejos construir coaliciones de apoyo claridad en el propósito (dimension del cambio) balance entre objetivos técnicos y politicos Integración con Sistemas de M&E nacionales Pilotos para reducir riesgos avanzar muy rápido (dificultad cambio) ) o muy despacio (perdida de interés). dificultad asimilar 19