Evaluación n Estratégica Temática de Igualdad de Oportunidades

Transcripción

1 1 Evaluación n Estratégica Temática de Igualdad de Oportunidades Dirección Dirección General General de de Fondos Fondos Comunitarios Comunitarios Secretaría Secretaría General General de de Presupuestos Presupuestos y y Gastos Gastos Ministerio Ministerio de de Economía Economía y y Hacienda Hacienda

2 PLAN DE EVALUACIÓN N DE LA D.G. DE FONDOS COMUNITARIOS Define el sistema de evaluación Tipos de evaluaciones División de responsabilidades entre las AGE y los OI Sistema de indicadores Comité Consultivo de Seguimiento Estratégico y Evaluación Recursos destinados a las evaluaciones Documento no vinculante No sujeto a la aprobación de la Comisión Documento flexible que podría estar sujeto a modificaciones Define un procedimiento de control y seguimiento de la calidad de los datos 2

3 SISTEMA DE SEGUIMIENTO ESTRATÉGICO Y DE EVALUACIÓN N CONTINUA (I) El seguimiento estratégico del MENR Evaluación n del Plan de Comunicación Evaluaciones estratégicas temáticas: ticas: Economía del conocimiento (I+D+i y SI) Medio ambiente Igualdad de oportunidades entre hombres y mujeres Inmigración Evaluaciones operativas (FEDER, FSE y FC): POs regionales Pos plurirregionales 3

4 SISTEMA DE DE SEGUIMIENTO ESTRATÉGICO Y DE Y EVALUACIÓN N CONTINUA (II) EVALUACIÓN SISTEMA DE SEGUIMIENTO ESTRATÉGICO Y EVALUACIÓN CONTINUA SISTEMA DE EVALUACIÓN DEL PLAN DE COMUNICACIÓN SEGUIMIENTO ESTRATÉGICO Artículo 29 EVALUACIÓN CONTINUA Artículo 47 Informes de Seguimiento Estratégico del MENR i) 2009 ii) 2012 Evaluaciones Estratégicas Temáticas i. Economía del Conocimiento ii. Medio Ambiente iii. Igualdad de Oportunidades iv. Inmigración Evaluaciones Operativas i. POs regionales ii. POs plurirregionales Evaluación del Plan de Comunicación 4

5 HERRAMIENTAS (I) Herramientas empleadas para el seguimiento estratégico del MENR y la evaluación n continua: Sistema de indicadores Indicadores de contexto Indicadores estratégicos Indicadores de evaluación Indicadores operativos Indicadores de alerta Análisis documental Encuestas Entrevistas personalizadas Estudios de caso Técnicas econométricas 5

6 EL SISTEMA DE INDICADORES EN ESPAÑA: PERIODO Se ha elaborado un manual de indicadores: Recopila la información básica del sistema Incluye orientaciones metodológicas Describe la utilidad de cada indicador Atribuye responsabilidades en cuanto a la recopilación de los indicadores Incluye indicadores específicos para cada uno de los principios horizontales 6

7 EL SISTEMA DE INDICADORES EN ESPAÑA: PERIODO SISTEMA DE INDICADORES DE LOS POs FEDER Y DE COHESIÓN, ª categoría 2ª categoría 3ª categoría 4ª categoría FEDER Indicadores Estratégicos Indicadores operativos Indicadores de Alerta Indicadores de Contexto Indicadores de Evaluación FC Indicadores Estratégicos Indicadores operativos Indicadores de Alerta 7

8 EL SISTEMA DE INDICADORES EN ESPAÑA: PERIODO Indicadores de contexto Se utilizarán para analizar la evolución del entorno socioeconómico Criterios de selección: Coste de obtención bajo: publicados por una fuente oficial Disponibilidad: publicación periódica y permanente Relevancia Sensibles Existencia de datos regionalizados Tipos: Demográficos: población, natalidad, mortalidad, etc. Macroeconómicos: PIB, PIB/ habitante, productividad, etc. Mercado de trabajo: tasa de actividad, tasa de empleo, tasa de paro, etc. I+D+i: gasto I+D/PIB, solicitud de patentes, etc. Otros 8

9 EL SISTEMA DE INDICADORES EN ESPAÑA: PERIODO Indicadores estratégicos: Son un subconjunto de los indicadores de contexto, vinculados a las prioridades definidas para las intervenciones Miden la evolución del contexto respecto de las metas establecidas Establecen valores objetivos para 2010 y 2013 Contenidos en MENR y PO 9

10 EL SISTEMA DE INDICADORES EN ESPAÑA: PERIODO Indicadores de evaluación: Se utilizarán para medir los resultados y, en algunos casos, los impactos de los Programas Cierran la relación causa-efecto entre las actuaciones y los resultados e impactos 10

11 EL SISTEMA DE INDICADORES EN ESPAÑA: PERIODO Indicadores operativos: Miden el resultado directo de las actuaciones contempladas en los POs Son esencialmente indicadores de realización Rasgos: Agregables a nivel de eje Suministrados por los beneficiarios Establecen valores objetivo para 2010 y 2013 Los indicadores clave o core 11

12 EL SISTEMA DE INDICADORES EN ESPAÑA: PERIODO Indicadores clave o core: El Documento de trabajo Nº 2 establece una relación de indicadores clave que deben ser integrados en cada uno de los POs con la finalidad de vincularlos a las prioridades comunitarias definidas en las Directrices estratégicas y a la estructura de codificación de las intervenciones del Reglamento (CE) Nº 1083/2006 Agregables Comparables 12

13 EL SISTEMA DE INDICADORES EN ESPAÑA: PERIODO Indicadores de alerta: Subconjunto de los indicadores operativos Se utilizan para detectar desviaciones significativas en los PO Definidos en cada PO Se establecen umbrales mínimos de ejecución financiera (cumplimiento regla n+2) y física 13

14 EL SISTEMA DE INDICADORES EN ESPAÑA: PERIODO Indicadores de alerta: Indicador de alerta: un subconjunto de los indicadores operativos que son representativos de las actuaciones en los ejes correspondientes Umbral: valor mínimo acumulado a ejecutar hasta el año N, en % y en UM/UF. El valor en % se obtendrá respecto al total de lo programado para el período N Desviación: Diferencia entre la ejecución acumulada en 200N y el umbral Desviación significativa: Si la desviación < 0 sí es necesario realizar una evaluación operativa 14

15 Evaluación n Estratégica Temática de Igualdad de Oportunidades Informe de Evaluación n EETIO CAPÍTULO I. Contenido de la evaluación y metodología empleada CAPÍTULO II. Análisis de la evolución del entorno CAPÍTULO III. Análisis de pertinencia y validez de la estrategia CAPÍTULO IV. Análisis de la ejecución: realizaciones y resultados. Impactos CAPÍTULO V. Calidad de la gestión, ejecución y de los sistemas de seguimiento CAPÍTULO VI. Identificación de buenas prácticas CAPÍTULO VII. Conclusiones y recomendaciones 15

16 Evaluación n Estratégica Temática de Igualdad de Oportunidades Alcance material - La EETIO se centra en el análisis del MENR, en los aspectos relacionados con la Igualdad de Oportunidades entre Hombres y Mujeres, analizando: - Acciones específicas en materia de IO (Tema prioritario 69) - Resto de ejes y temas prioritarios de las intervenciones FEDER y FSE (transversalidad) Contenido (I) CAPÍTULO I. Contenido de la evaluación y metodología empleada - Diseño técnico de la evaluación - Métodos y técnicas utilizadas - Condicionantes y límites encontrados en el desarrollo de los trabajos CAPÍTULO II. Análisis de la evolución del entorno - Análisis del marco legal y documental de referencia en materia de IO - Análisis de la situación de contexto (indicadores de contexto IO y DAFO) 16

17 Evaluación n Estratégica Temática de Igualdad de Oportunidades Contenido (II) CAPÍTULO III. Análisis de pertinencia y validez de la estrategia - Análisis de pertinencia de la estrategia: cruce de debilidades y fortalezas del DAFO con Objetivos Estratégicos (OE) en materia de IO - Análisis de coherencia interna y externa: OE entre sí y con otros externos OBJETIVOS ESTRATÉGICOS OE1. Potenciar la participación de las mujeres en el campo de la I+D+i OE2. Incrementar el uso de las nuevas tecnologías de la información y las comunicaciones (TIC) por parte de las mujeres OE3. Potenciar la presencia de la mujer en puestos directivos OE4. Incentivar la formación básica y permanente así como la empleabilidad de las mujeres - Análisis de concentración: el gasto se concentra en los OE 17

18 MÉTODOS PARA EL ANÁLISIS DEL DISEÑO DE LOS PROGRAMAS Análisis de la relevancia: Finalidad: analizar la calidad y veracidad del diagnóstico Se trata de conocer: Hasta qué punto se ha identificado adecuadamente el alcance del problema y las características básicas La metodología y fuentes usadas para su determinación Para ello: Revisión del análisis del contexto socioeconómico Revisión de la definición y jerarquización de las necesidades detectadas Herramientas: Indicadores Análisis DAFO 18

19 MÉTODOS PARA EL ANÁLISIS DEL DISEÑO DE LOS PROGRAMAS Análisis pertinencia Finalidad: estudio de la calidad de la formulación de los objetivos Concretamente, se valora: Metas y fines Claridad y concreción Especificación de un solo resultado o producto Previsión de un periodo temporal en su consecución Herramientas: Matrices 19

20 MÉTODOS PARA EL ANÁLISIS DEL DISEÑO DE LOS PROGRAMAS Análisis de la coherencia interna Finalidad: análisis de las sinergias y el grado de consistencia de los objetivos y actuaciones Herramientas: matrices Análisis de la coherencia externa: Finalidad: estudiar el grado de correspondencia existente entre un programa y otras intervenciones que se estén ejecutando en su mismo espacio temporal y físico-territorial Evitar contradicciones entre programas Detectar sinergias con otros programas Herramientas: matrices 20

21 Evaluación n Estratégica Temática de Igualdad de Oportunidades Contenido (III) CAPÍTULO IV. Análisis de la ejecución: realizaciones y resultados. Impactos - Análisis del grado de cobertura (FSE) - Realizaciones financieras y físicas. Grado de ejecución de los POs en actuaciones específicas y restantes actuaciones (transversalidad) - Resultados. Análisis de los indicadores de evaluación en materia de IO. - Impactos. Generales en materia de IO. Mediante técnicas econométricas. - Eficacia de las intervenciones. Grado de cumplimiento de los valores objetivo establecidos en materia de IO. A nivel de realizaciones, resultados, impactos. 21

22 Evaluación n Estratégica Temática de Igualdad de Oportunidades Contenido (IV) CAPÍTULO V. Calidad de la gestión, ejecución y de los sistemas de seguimiento - Consideración del principio de IO en los informes de ejecución anual - Ejecución y seguimiento CAPÍTULO VI. Identificación de buenas prácticas - En materia de IO CAPÍTULO VII. Conclusiones y recomendaciones - Conclusiones - Recomendaciones - Desafíos y perspectivas futuras 22

23 TÉCNICAS Y MÉTODOS PARA EL PROCESAMIENTO DE LA INFORMACIÓN (XIII) MÉTODOS PARA EL ANÁLISIS DE LA EFICACIA Finalidad: cuantificar el grado de consecución de los objetivos definidos Preguntas: Podrían haberse logrado más objetivos con una estrategia diferente? Cuáles han sido las medidas que más éxito han tenido? Herramientas: Indicadores de eficacia 23

24 TÉCNICAS Y MÉTODOS PARA EL PROCESAMIENTO DE LA INFORMACIÓN (XIV) MÉTODOS PARA EL ANÁLISIS DE LA EFICIENCIA Es la relación entre los resultados de una actividad y los recursos empleados para conseguir los mismos Finalidad del análisis: determinar si los efectos observados se han obtenido a un mínimo coste Preguntar: podrían haberse logrado unos mayores efectos con los mismos recursos? otras actuaciones similares han obtenidos los mismos efectos con menos recursos? Herramientas: Indicadores de eficiencia Análisis coste-beneficio 24