Plan de Seguimiento y Evaluación. CEET Centro de Estudios Económicos Tomillo

Transcripción

1 CEET Centro de Estudios Económicos Tomillo 1

2 Índice 1. Metodología para el diseño del Plan de Seguimiento y Evaluación 1. Metodología para el diseño del Plan de Seguimiento y Evaluación 2. Plan de Seguimiento y Evaluación 2. Plan de Seguimiento y Evaluación a. Introducción b. Qué es evaluar un proyecto de intervención social? 2

3 Metodología para elaborar el Plan de Seguimiento y Evaluación Objetivos del Plan de Seguimiento y Evaluación 1) Diseñar un Plan de seguimiento y evaluación mixto 2) Desarrollar un sistema de indicadores del proyecto 3) Ejecutar el Plan de seguimiento y evaluación 4) Elaborar informes de seguimiento 5) Capacitar a las entidades para que puedan adquirir autonomía para realizar sus propios procesos de evaluación mediante dos sesiones formativas sobre el seguimiento y evaluación del proyecto a entidades del proyecto 3

4 Metodología para elaborar el Plan de Seguimiento y Evaluación Fase 1 Fase 2 Fase 3 Actualización de la información de base PLAN de Seguimiento y Evaluación Implementación del PLAN Sistema de indicadores Fichas de seguimiento Documentos de debate (CEET) Sesiones formativas (Redes-CEET) Informes de seguimiento y de evaluación Grupo de Seguimiento y Evaluación 4

5 Metodología para elaborar el Plan de Seguimiento y Evaluación Fase 1: actualización de la información de base del proyecto 1) Es conveniente contar con una información básica sobre las actuaciones desarrolladas y previstas para 2012 (y 2013) para elaborar un Plan adaptado a la realidad del proyecto 2) Proponemos completar una ficha básica de cada actuación en donde se recoja la siguiente información a) Nombre de la acción. b) Breve descripción. c) Objetivos d) Fecha de realización (y, en su caso, periodicidad) e) Entidad responsable de la acción (y formas de contacto) 3) Esta ficha se irá actualizando, con carácter semestral, para facilitar el proceso de evaluación de los avances de las acciones y, en su caso, las causas de los retrasos 5 acumulados

6 Metodología para elaborar el Plan de Seguimiento y Evaluación Fase 1: actualización de la información de base del proyecto 4) Como resultado de esta Fase de desarrollo del Plan, CEET elaborará un breve documento denominado Guía del Proyecto Redes Interculturales , y estará incluido en el PLAN de modo que formará parte fundamental de su contenido 5) Gracias a su permanente actualización será posible emitir un juicio válido sobre los distintos criterios sobre los que se asentarán las actuaciones de evaluación previstas por parte de la asistencia técnica y que serán objeto de consenso entre las entidades del proyecto (pertinencia, eficacia, sostenibilidad, entre otras). 6

7 Metodología para elaborar el Plan de Seguimiento y Evaluación Fase 2: elaboración del PLAN de Seguimiento y Evaluación 1) Quién participará del seguimiento y evaluación? a) Se pretende la constitución de un Grupo de Seguimiento y Evaluación transversal a todo el proyecto y abierto a todas las entidades que deseen participar b) Quienes participen del comité deben guardar un grado de compromiso con el propósito que se desea alcanzar, así como una mínima capacidad de atender a los trabajos asociados c) Sería deseable que se otorgue un papel importante a entidades que, a priori, poseen menos capacidad para desarrollar estas tareas d) En el PLAN se establecerán unas orientaciones generales o líneas básicas de actuación del Comité en relación con el proceso de seguimiento y evaluación del proyecto 7

8 Metodología para elaborar el Plan de Seguimiento y Evaluación Fase 2: elaboración del PLAN de Seguimiento y Evaluación 2) Cómo se va a elaborar el PLAN de Seguimiento y Evaluación? En tres etapas: a) Etapa 1: elaboración de un documento de debate para familiarizar a las entidades con la evaluación y presentar una versión preliminar del PLAN b) Etapa 2: sesiones formativas: i. Formación en evaluación de proyectos abierta a todas las entidades (especialmente al Comité de Evaluación) ii. Se debatirá la versión preliminar del PLAN c) Etapa 3: elaboración del PLAN (versión definitiva) 8

9 Metodología para elaborar el Plan de Seguimiento y Evaluación Fase 3: implementación del PLAN de Seguimiento y Evaluación A partir de las etapas anteriores, se dispondrá a: a) Recopilar la información necesaria b) Analizar la información c) Elaborar informe de

10 Metodología para elaborar el Plan de Seguimiento y Evaluación Fase 1 Fase 2 Fase 3 Actualización de la información de base PLAN de Seguimiento y Evaluación Implementación del PLAN Sistema de indicadores Fichas de seguimiento Documentos de debate (CEET) Sesiones formativas (Redes-CEET) Informes de seguimiento y de evaluación Grupo de Seguimiento y Evaluación 10

11 Estructura del PLAN (líneas del documento de debate) 1) Introducción: breve descripción del proyecto y de la metodología para su evaluación 2) La evaluación de proyectos sociales: a) Qué es evaluar un proyecto? b) Contenidos del proceso de evaluación: diseño, gestión, resultados e impacto c) Criterios y usos de la evaluación d) Seguimiento e indicadores 3) La metodología de evaluación participativa a) Definiciones y características b) Condiciones para su desarrollo: principios y obstáculos c) El rol del agente evaluador 4) Estructura del Plan de Seguimiento y Evaluación del Proyecto Redes Interculturales a) Objetivos, metodología y criterios de evaluación b) Documento guía del proyecto (actualizado) c) Propuesta de indicadores y recogida de información d) El Grupo de Seguimiento y Evaluación 11

12 1. Introducción 1) Breve descripción del proyecto Redes Interculturales, estructura de trabajo y entidades que lo conforman 2) Reseña de las principales actividades desarrolladas y previstas 3) La evaluación del proyecto: objetivos y metodología 12

13 2. La evaluación de proyectos sociales: qué es evaluar un proyecto? Basándonos en las definiciones existentes: Aplicación sistemática de los procedimientos de la investigación social para valorar la conceptualización y el diseño, la ejecución y la utilidad de los programas de intervención social (Rossi y Freeman, 1993) Nuestro objetivo Desarrollar nuestra propia evaluación 13

14 2. La evaluación de proyectos sociales: qué es evaluar un proyecto? Objetivos específicos Facilitar la toma de decisiones ofreciendo información relevante sobre objetivos, instrumentos de gestión y efectos de los proyectos Satisfacer las necesidades de información y transparencia de las entidades que gestionan y ejecutan el proyecto Posibilitar la participación de los agentes al proporcionar cauces para su implicación en su valoración Aumentar el conocimiento y la capacitación de quienes diseñan, gestionan y ejecutan los proyectos Incrementar la eficacia de los proyectos dado que permite detectar y corregir errores y conocer si los recursos se han utilizado adecuadamente 14

15 2. 1 La evaluación de proyectos sociales: qué vamos a evaluar? Evaluación del diseño Vamos a evaluar en qué medida los objetivos planteados han sido coherentes con el diagnóstico efectuado y si los instrumentos (actuaciones) responden de forma coherente a esos objetivos. Evaluación de la gestión/proceso Evaluación de resultados e impactos Vamos a emitir un juicio sobre la programación de los plazos, competencias, asignación de responsabilidades, funcionamiento y participación de las entidades en la gestión del proyecto Vamos a analizar las actividades desarrolladas y sus efectos directos (resultados) e indirectos (efectos o impactos) así como aproximarnos a su eficacia y sostenibilidad, apropiación, etc. 15

16 2.2 La evaluación de proyectos sociales: qué criterios vamos a utilizar para evaluar? Problemas / necesidades Objetivos Instrumentos Resultados Impactos Eficacia Transferibilidad Racionalidad Coherencia Viabilidad Apropiación Los criterios se consensuarán con las entidades participantes del proyecto Sostenibilidad Género 16

17 2.2 La evaluación de proyectos sociales: qué criterios vamos a utilizar para evaluar? Criterios a utilizar para evaluar el proyecto Racionalidad: analizar la relación entre las necesidades y problemas detectados y los objetivos establecidos para la mejora o solución de dichos problemas Coherencia: examinar que los objetivos se corresponden con las acciones (estrategia) planteadas Eficacia: Implica analizar el grado en que se han alcanzado los resultados previstos del proyecto Sostenibilidad o viabilidad: Va más allá del grado en que ha alcanzado sus objetivos y se relaciona con el grado en que sus resultados permanecen en el tiempo Transferibilidad: Implica evaluar el efecto demostrativo que muchos proyectos incorporan o que pueda demostrarse que han desarrollado Igualdad de género: estudio de los efectos diferenciales que ha tenido el proyecto para hombres y mujeres Apropiación: Se relaciona directamente con el grado en que se hayan podido o se pretendan instaurar procesos participativos en todo el ciclo de vida del proyecto Uso de NTIC 17 Otros criterios ( menos tangibles? cómo medirlos?)

18 2.2 La evaluación de proyectos sociales: qué criterios vamos a utilizar para evaluar? Evaluación participativa Qué metodologí a vamos a utilizar? Es aquella en la que las demandas e inquietudes de gestores, ejecutores y destinatarios se convierte en el eje de organización del proceso evaluativo Implica sumergirse en la realidad del proyecto y necesita la articulación de mecanismos que comprometan la participación de los agentes involucrados Por qué evaluar de forma participativa? Porque es coherente con el espíritu del proyecto Porque contribuye a legitimar la toma de decisiones e incrementar la transparencia para mejorar la calidad de las intervenciones sociales Porque amplia el aprendizaje de las entidades para replicar lo aprendido en el funcionamiento de sus propias entidades Porque mejora la gestión al promover la participación y empoderar a las entidades y beneficiarios, implicándolos en su propio desarrollo 18

19 2.3 La evaluación de proyectos sociales: el seguimiento y los indicadores Acción Desarrollo Objetivo Previsión Entidad Responsable (grupo) Idea: construir una ficha informativa Boletín Informativo Guía de recursos y banco de materiales Portal web del proyecto Formación en antidiscriminación Formación itinerante en planificación estratégica Formación en materia de legislación migratoria Debe contener información básica y actualizada de cada actividad desarrollada y prevista Aula de formación online y formación en NTIC Guía digital para uso del portal del proyecto Formación en técnicas de comunicación Sistema de indicadores para cada acción del proyecto 19

20 2.3 La evaluación de proyectos sociales: el seguimiento y los indicadores Elaboración de fichas informativas de cada actividad Preguntas de la evaluación Criterios de evaluación Grupo de Seguimiento y Evaluación Sistema de indicadores Recogida de información 20

21 2.3 La evaluación de proyectos sociales: el seguimiento y los indicadores Para llevar a cabo estas tareas, se constituye un Comité de Seguimiento y Evaluación cuyo papel sería: Delimitar las necesidades informativas: las preguntas de la evaluación (qué queremos evaluar en los ámbitos estratégico, actuaciones, efectos y gestión). Definir los criterios que se van a utilizar para emitir los juicios de valor sobre el proyecto. Esto es clave ya que permite alcanzar acuerdos sobre los parámetros que van a servir para establecer los éxitos y fracasos del proyecto desde el punto de vista de sus propios protagonistas. Definir los indicadores que son los que nos permiten recoger la información relevante sobre el proyecto. Los indicadores para la medición y observación de los hechos (la evidencia empírica) y el posterior contraste con los criterios. Contrastar y discutir las conclusiones de la evaluación que se extraen del análisis de los datos y las informaciones recopiladas Llegar a acuerdos sobre las recomendaciones y las acciones de mejora que garanticen la aplicabilidad de las mismas y realizar el seguimiento sobre ellas. 21