Temario. Sistemas de Monitoreo y Evaluación. Conceptos y tipología. Situación en América Latina. Situación en El Salvador

Transcripción

1 Taller: Planificación y Presupuesto por Resultados Asamblea Legislativa Unidad de Análisis y Seguimiento del Presupuesto El Salvador 12 al 14 Enero 2016 Experiencias de los sistemas de monitoreo y evaluación de resultados diversos en países de América Latina y el Caribe: Su rol en la eficacia, eficiencia, calidad del gasto y transparencia Marianela Armijo Consultora CEPAL

2 Temario Sistemas de Monitoreo y Evaluación. Conceptos y tipología Situación en América Latina Situación en El Salvador Desafíos para el diseño e implementación de los sistemas de monitoreo y evaluación

3 La evaluación de Politicas y Programas es el núcleo central de los procesos de reforma y modernización en América Latina y el Caribe Se busca mejorar: El proceso de definición de prioridades de política pública (Visión, Estrategias Gubernamentales, Planes de Desarrollo) La gestión pública y la calidad del gasto público Transparencia y legitimidad de la acción gubernamental

4 Y juega un rol central para la efectividad del desarrollo.a través de: Información y (uso de la misma)sobre los resultados de las políticas y programas públicos al ámbito gubernamental y otros actores públicos Respondiendo a la pregunta central: Cuál es el valor público de la intervención gubernamental? Se soluciona el problema público..o se avanza hacia su logro? Transparentando información sobre los recursos públicos

5 COMPONENTES DE LOS SEVd I. Planificación- Programación- Presupuesto Plan Nacional de Desarrollo Planificación Sectorial Planificación- Programación Presupuestaria con enfoque a resultados II. III. Monitoreo y Evaluación Rendición de Cuentas Sistema de Indicadores de Gestión y resultados Evaluación de Impacto Ex Post de Inversiones y Resultados Intermedios Informes de Evaluación Anual Resultados de la Gestión, Congreso, Órganos de Control

6 Sistemas de Monitoreo y Evaluación Conjunto de instrumentos y procedimientos Que entregan información para hacer el seguimiento y evaluar el desempeño. Indicadores de desempeño Evaluaciones Ex Post

7 Indicadores Los indicadores son medidas que describen cuan bien se están desarrollando los objetivos de un programa, un proyecto y/o la gestión de una institución Fórmula o algoritmo que relación dos o más variables en función de medir el logro de los distintos niveles de objetivo del programa.

8 Evaluaciones Las evaluaciones, corresponden a estudios, exámenes o revisiones técnicas, que haciendo uso de un conjunto de información ordenada según un marco metodológico, tienen por finalidad construir valoraciones y encontrar factores explicativos a estas valoraciones o juicios evaluativos respecto de: o Programa o proyecto o conjunto de programas o proyectos (política) o una institución

9 Monitoreo y Evaluación Las evaluaciones se diferencian de los procesos de monitoreo, los que suelen ser: o parte de procesos internos de gestión programática o más regulares o y utilizan mediciones a través de indicadores, principalmente de procesos y productos Monitoreo y evaluación son complementarios e indispensables para mejorar la calidad de las instituciones y de los programas o proyectos que éstas ejecutan

10 La confiabilidad y uso de los Sistemas de M&E requiere que éstos cumplan con requisitos: Pertinencia: capacidad de proporcionar la información que se precisa o demanda para adoptar decisiones debidamente fundamentadas Veracidad: asegurar que la información corresponda a la realidad del proyecto, programa o institución que se observa Oportunidad: lograr que la información esté disponible en el momento en que lo requiere el proceso de toma de decisiones Legitimidad: que la información y los juicios que el sistema genere sean respetados por los actores relevantes, sustentando las decisiones que de ellos se desprendan Eficiencia: que la información se genere al menor costo posible Fuente: Marcela Guzmán S. Presentación Politeia

11 Tipos de Evaluación y Metodologías Ámbito de la Acción Qué se Evalúa? Metodologías y Fuentes de Datos Planes y Estrategias Nacionales de Desarrollo Institucional, entidades públicas Cumplimiento de metas asociadas a las prioridades del plan de gobierno Cumplimiento de metas de gestión y resultados finales. Dimensiones de eficacia, eficiencia, calidad y economía de recursos públicos Sistemas nacionales de estadísticas, encuestas, paneles de expertos y estudios ad-hoc de evaluación de impacto Sistemas de indicadores de desempeño Evaluación institucional y de programas Programas públicos Gestión, resultados e impacto Evaluaciones de programas (marco lógico), comprehensivas del gasto, impacto Inversiones Rentabilidad social, costobeneficio Evaluación de inversiones Costo- beneficio ex ante y ex post.

12 Las diferentes competencias gubernamentales requieren diferentes tipos de información para la Toma de Decisiones, Relación con el Presupuesto y Rendición de cuentas INDICADORES IMPACTO, (RESULTADO FINAL) INDICADORES DE IMPACTO (R.FINAL) RESULTADO INTERMEDIO INDICADORES DE PRODUCTO, PROCESO Y RESULTADO INTERMEDIO

13 En América Latina y el Caribe se avanza en la creación e institucionalización de la evaluación de programas públicos Brasil Plan Plurianual y Evaluación Programas Sociales Chile Sistema de Evaluación y Control de gestión Colombia: Costa Rica: Uruguay Brasil México Perú SINERGIA SINE + Indicadores Presupuesto Sistema de Evaluación de Resultados Plan Plurianual. PPA, Evaluaciones Sectoriales Sistema de Evaluación Del Desempeño Monitoreo Metas Programas Prioritarios

14 La experiencia chilena

15 Sistema de Evaluación y Control de Gestión: Objetivos Generar información e introducir prácticas para mejorar la calidad del gasto Eficiencia en la asignación de recursos Eficiencia en el uso de los recursos Transparencia en la gestión de los programas y en la administración de las finanzas públicas

16 La institucionalidad del Sistema de M&E de resultados El monitoreo y la evaluación de programas expost está bajo la dirección del Ministerio de Hacienda (Dirección de Presupuestos) La evaluación ex-ante de los programas sociales está a cargo del Ministerio de Desarrollo Social (2010). Subsecretaría de Evaluación

17 La institucionalidad del Sistema de M&E de resultados Existe una Comisión Interinstitucional que coordina e integra las acciones de monitoreo y evaluación ex-post: Ministerio de Hacienda (Dirección de Presupuestos). Responsible principal Ministerio Secretaría General de la Presidencia (Sistema de Seguimiento de Metas Presidenciales) El Congreso participa en un Protocolo de Acuerdo para la Evaluación de Programas. La información es enviada anualmente para la discusión presupuestaria (Desde 1997)

18 Los componentes del Sistema de M&E son parte del Proceso Presupuestario Sistema de Evaluación de Programas e Instituciones Definiciones Estratégicas Indicadores de Desempeño Presentación de Programas al Presupuesto Programa de Mejoramiento de la Gestión Balance de Gestión Integral Mecanismos de Incentivos Remuneracional Institucional

19 SISTEMA DE EVALUACIÓN DE PROGRAMAS E INSTITUCIONES Evaluaciones de programas gubernamentales Evaluaciones de impacto Evaluaciones comprehensivas del gasto INDICADORES DE DESEMPEÑO DEFINICIONES ESTRATÉGICAS Balance de Gestión Integral PRESENTACION PROGRAMAS AL PRESUPUESTO PROGRAMA DE MEJORAMIENTO DE LA GESTION MECANISMOS DE INCENTIVO REMUNERACIONAL INSTITUCIONAL Programa de Mejoramiento de la Gestión (PMG) - Programa Marco Básico y Avanzado Ley Médica 19

20 Colombia: SINERGIA Componentes: Sistema de Seguimiento a Metas de Gobierno Sistema Nacional de Evaluaciones Red de Monitoreo y Evaluación de la Política Pública en Colombia

21 Sistema de Seguimiento a Metas de Gobierno Realiza seguimiento a las metas de gobierno de corto (Plan Nacional de Desarrollo), mediano y largo plazo.

22 Evaluaciones Evaluación de Operaciones Evaluación de Resultados Evaluación de Impactos Evaluación Ejecutiva Evaluación Institucional Evaluación Ejecutiva Insumos Procesos Productos Resultados Impacto Evaluación Operaciones Evaluación de Resultados Evaluación de Impacto

23 ESQUEMA DE SEGUIMIENTO DE LOS INDICADORES DEL PLAN NACIONAL DE DESARROLLO DE COLOMBIA Sistema Nacional de Evaluación de Resultados. SINERGIA. Sistema de Seguimiento Gerencial de Metas de Gobierno

24 INDICADORES Y METAS ESTRATEGICAS DE GOBIERNO. PLAN NACIONAL DE DESARROLLO. COLOMBIA

25

26 México El 7 de mayo de 2008 se publicó en el Diario Oficial de la Federación (DOF) la reforma constitucional en materia de gasto público y fiscalización. Los tres órdenes de gobierno deberán evaluar los resultados que obtengan con los recursos públicos, y administrarlos bajo los principios de eficiencia, eficacia, economía,transparencia y honradez

27 Sistema de evaluación del desempeño

28 El Salvador Existe un Plan Nacional de Desarrollo que es referente para la elaboración del Presupuesto Nacional EL Plan establece metas fiscales, plurianuales, lo cual da un marco para el financiamiento de las prioridades. Las prioridades nacionales son acotadas y estratégicas en los problemas país.

29 El Salvador. Plan Quinquenal de Desarrollo (PQD) Articulado en torno a tres grandes prioridades identificadas como país: Empleo productivo generado a través de un modelo de crecimiento económico sostenido, Educación con inclusión y equidad social, y Seguridad ciudadana efectiva

30

31 El Salvador: Monitoreo y Evaluación de los resultados Los objetivos del plan nacional establecen metas a ser alcanzadas durante el período gubernamental Existen diez áreas prioritarias y cada una de ellas corresponde un objetivo a lograrse durante el período. No todos los objetivos tienen una meta. No se cuenta con un desglose anual de cumplimiento de metas Existen Planes Sectoriales (Educación, Salud, Infraestructura, Social), con metas vinculados al Plan Quinquenal de Desarrollo

32 El Salvador: Monitoreo y Evaluación de los resultados En el marco del fortalecimiento del Sistema de Planificación se han desarrollado Evaluaciones de Programas Sociales. Se creó el Observatorio de Evaluaciones de El Salvador con el objetivo de conocer los resultados y la efectividad de la ejecución de las políticas y programas de Gobierno. La ley AFI y su Reglamento, norman el seguimiento y ejecución presupuestaria Sistema de monitoreo y evaluación?

33 Ejemplos de Metas del PQD:

34 Objetivo 1: Dinamizar la economía nacional para generar oportunidades y prosperidad a las familias, a las empresas y al país

35 Objetivo 7: Transitar hacia una economía y sociedad ambientalmente sustentables y resilientes a los efectos del cambio climático

36 Objetivo 10: Potenciar a El Salvador como un país integrado a la región y al mundo, que aporta creativamente a la paz y el desarrollo

37 Objetivo 11: Avanzar hacia la construcción de un Estado concertador, centrado en la ciudadanía y orientado a resultados

38 Avances Sistemas de M&E en ALyC ( ) (Estudio BID- PRODEV) Fuente: Kauffman. J. Sistemas de seguimiento y evaluación Avanzamos?. X Reunión de la Red Latinoamericana y del Caribe de Monitoreo y Evaluación. BID. Panamá, 2-4 Septiembre 2015

39 Avances Sistemas de M&E ( ) (Estudio BID- PRODEV) Se han promulgado varias leyes dirigidas a mejorar el desempeño: Ecuador, México, Perú, República Dominicana. Se han creado unidades encargadas del seguimiento ligadas a las funciones de planificación (Nicaragua), presupuesto (Honduras, Jamaica, México) o al centro de gobierno (Ecuador). Se han consolidado unidades existes en los países que habían avanzado anteriormente: Brasil, Chile, Colombia, Costa Rica. Los planes nacionales y sectoriales incorporan indicadores y metas, lo cual crea una demanda para el seguimiento. Fuente: Kauffman. J. Sistemas de seguimiento y evaluación Avanzamos?. X Reunión de la Red Latinoamericana y del Caribe de Monitoreo y Evaluación. BID. Panamá, 2-4 Septiembre 2015

40 Avances Sistemas de M&E ( ) (Estudio BID- PRODEV) Las prácticas de evaluación se han consolidado en Brasil, Chile, Colombia y México. La evaluación de impacto de programas sociales clave se ha ampliado. El marco normativo e institucional de CONEVAL es un modelo nuevo en la región: independencia, participación del poder legislativo. Fuente: Kauffman. J. Sistemas de seguimiento y evaluación Avanzamos?. X Reunión de la Red Latinoamericana y del Caribe de Monitoreo y Evaluación. BID. Panamá, 2-4 Septiembre 2015

41 A pesar de los avances persisten debilidades.. El monitoreo de indicadores de desempeño a nivel del presupuesto persiste una lógica de control más que de retroalimentación Indicadores de resultados no siempre son comprensibles o accesibles a los problemas ciudadanos No hay consecuencias sobre el no cumplimiento de las metas

42 A pesar de los avances persisten debilidades.. Las evaluaciones realizadas no siempre son parte de los procesos regulares de planificación y presupuesto. Los informes de evaluación de programas (sus resultados) sean utilizados en la toma de decisiones de políticas, programas públicos y presupuesto. 42

43 Es importante tener en cuenta las dificultades intrínsicas de la función evaluación y buscar soluciones innovadoras La temporalidad en el logro de los resultados de políticas y programas (mediano y largo plazo) v/s el corto plazo del presupuesto y otros procesos dificulta obtener información La transversalidad de las políticas y la dificultad de atribución de resultados a los programas La visibilidad exposición mediática de los resultados no siempre son bienvenidos

44 La medición de los indicadores de resultados finales es compleja Por que los efectos finales se dan a mediano y largo plazo Van más allá de un período anual de presupuesto En el resultado final inciden muchas organizaciones y factores.que cuesta organizar El efecto atribución Programa-Resultado no es tan claro. Se requieren metodologias costosas

45 En Síntesis: los sistemas de M&E debieran generar información tanto para decisión de gasto como para mejora de gestión y rendición de cuentas Involucramiento político con la evaluación (Gobierno, partidos políticos, legislativo, ciudadanía). Priorización y Focalización de evaluación Ampliar foco a revisión de gasto público mejorando efectividad de políticas Involucramiento de ministerios y directivos en el proceso de evaluación: incentivos Reportes de información de desempeño, a través de indicadores, se desarrollen a partir de informes ejecutivos a Presidencia, Congreso y ciudadanía