De la Evaluación interna de Diseño al
Formato para la Difusión de los Resultados de las Evaluaciones 1. Descripción de la evaluación 1.1 Nombre de la evaluación: Evaluación interna de Diseño al 1.2 Fecha de inicio de la evaluación (dd/mm/aaaa): 28/09/2015 1.3 Fecha de término de la evaluación (dd/mm/aaaa): 01/12/2015 1.4 Nombre de la persona responsable de darle seguimiento a la evaluación y nombre de la unidad administrativa a la que pertenece: Nombre: José García Macías Unidad Administrativa: Dirección de Padrones, Evaluaciones y Monitoreo 1.5 Objetivo general de la evaluación: Retroalimentar el diseño del Programa Estatal de Colocación de Techos, conforme a lo establecido en los Lineamientos Generales para la Evaluación Externa de los Programas Sociales Estatales; así como detectar sus aciertos, fortalezas y áreas de oportunidad. 1.6 Objetivos específicos de la evaluación: Analizar la justificación de la creación y del diseño del Programa. Analizar la contribución del Programa a los objetivos estatales y a los sectoriales. Analizar la población potencial y objetivo. Evaluar y analizar la Matriz de Indicadores para Resultados. Analizar las posibles complementariedades y coincidencias con otros programas estatales y federales. 1.7 Metodología utilizada en la evaluación: La evaluación de diseño se alineó a lo estipulado en los Lineamientos Generales para la evaluación de los Programas Federales de la Administración Pública Federal, al Modelo de Términos de Referencia para la Evaluación en materia de Diseño 2014 del Consejo Nacional de Evaluación de la Política de Desarrollo Social (CONEVAL) y a los Lineamientos Generales para la Evaluación Externa de los Programas Sociales Estatales. Instrumentos de recolección de información: Cuestionarios Entrevistas X Formatos Otros X Especifique: Diagnóstico del. Reglas de Operación del. Fichas Técnicas del Programa Presupuestario E135 Transformar tu vivienda. Página 1
Descripción de las técnicas y modelos utilizados: Con base en los Lineamientos Generales para la Evaluación Externa de los Programas Sociales Estatales, la evaluación de diseño se realizó mediante un trabajo de gabinete, en el que se involucraron actividades de organización, recopilación y análisis de información concentrada en registros, documentación pública, entre otros, y apoyado con información del Programa que proporcionó la Unidad Responsable de su operación. Asimismo, se determinaron 5 apartados principales que atienden los objetivos específicos de la evaluación, los cuales, se alinearon con lo establecido en los Lineamientos federales y estatales antes citados, así como al Modelo de Términos de Referencia para la Evaluación en materia de Diseño 2014 del CONEVAL. En total, se desarrollaron 20 preguntas organizadas de la siguiente manera: Apartado Número de preguntas Apartado 1: Análisis de la justificación de la creación y del diseño del programa 3 Apartado 2: Análisis de la contribución del programa a los objetivos estatales y los sectoriales 2 Apartado 3: Análisis de la población potencial y objetivo 3 Apartado 4: Evaluación y análisis de la Matriz de Indicadores para Resultados 11 Apartado 5: Análisis de posibles complementariedades y coincidencias con otros programas estatales y federales 1 Total 20 2. Principales hallazgos de la evaluación 2.1 Describir los hallazgos más relevantes de la evaluación: No se especifica en el Diagnóstico la actualización y las fuentes de información. Tampoco se describe la justificación teórica. No se encontró la publicación del formato por medio del cual se lleva a cabo la recolección de la información socioeconómica de los beneficiarios, es decir, el Cuestionario Único de Información Socioeconómica (CUIS). La estructura actual de la Matriz de Indicadores presenta algunas inconsistencias. 2.2 Señalar cuáles son las principales Fortalezas, Oportunidades, Debilidades y Amenazas (FODA), de acuerdo con los temas del programa, estrategia o instituciones. 2.2.1 Fortalezas: El programa identifica con precisión las causas y efectos del problema central, así como la población objetivo. Existe una adecuada correspondencia entre los niveles Fin y Propósito de la MIR y lo señalado en las Reglas de Operación. Los mecanismos de elegibilidad que utiliza el programa en la selección de los beneficiarios se encuentran bien definidos. Existe una clara relación de los objetivos entre el Propósito del programa y la Actualización del Plan Estatal de Desarrollo y del Programa Sectorial de Desarrollo Social 2011-2017. 2.2.2 Oportunidades: Incorporar en las Reglas de Operación y en el diagnóstico del programa, un análisis sobre el estado financiero del programa a largo y mediano plazo. Publicar información pertinente en las Fichas Técnicas y en la MIR, que pueda ser utilizada como medio de verificación monitoreable para el nivel Actividad y Componente. Adherir de manera más específica, en el resumen narrativo, el tipo de mejoramiento que se está realizando en el nivel Componente. Incorporar en las Reglas de Operación la temporalidad sobre el levantamiento de los CUIS. Incluir en las Reglas de Operación del Programa la MIR completa. Página 2
Incorporar en el Diagnóstico la justificación teórica del Programa. 2.2.3 Debilidades: No se presenta de manera clara y precisa que tipo de mejoramiento se está realizando en el nivel Componente. No se encuentra definida la temporalidad sobre el levantamiento del CUIS, que sería importante para la actualización del padrón de beneficiarios. La condición de los medios de verificación para el nivel Actividad de la MIR, suponen cierta dificultad para reproducir el indicador, pues son informes y registros internos. No existe una definición para los cuatro indicadores. 2.2.4 Amenazas: Una reducción en el presupuesto aprobado al programa impediría cumplir con las metas que éste se ha fijado. El logro del programa dependerá en gran medida que la población objetivo solicite los apoyos. 3. Conclusiones y recomendaciones de la evaluación 3.1 Describir brevemente las conclusiones de la evaluación: La creación del Programa se justifica al estar dirigido a las familias poblanas con carencia en calidad y espacios de la vivienda, que por sus condiciones sociales, económicas y demográficas son potencialmente vulnerables. Partiendo de la definición que se encuentra dentro de la Actualización del Plan Estatal de desarrollo 2011-2017 y de la Actualización del Programa Sectorial de Desarrollo Social, reducir la brecha social mediante la igualdad de oportunidades para todos, el Programa contribuye específicamente a garantizar los medios de subsistencia de las familias poblanas colocando un techo de fibrocemento. Al otorgar el apoyo a las familias que se encuentran principalmente en las ZAP y en las localidades con alto y muy alto rezago social, el objetivo del Programa muestra la contribución que se tiene por parte del Gobierno Estatal al mitigar la carencia de calidad y espacios de la vivienda. Por otra parte, la MIR del Programa, conforme a lo establecido en la Metodología de Marco Lógico, está elaborada correctamente; sin embargo, se podría mejorar incluyendo información que permita dar un seguimiento oportuno de sus avances y resultados. Asimismo, la información que se obtiene de la MIR aporta elementos para la toma de decisiones en la operación y mejora de los procesos que implica la implementación de un Programa Presupuestario. El Programa presenta complementariedad con otros programas enfocados al mejoramiento de vivienda y dirigidos a la población vulnerable, con el objetivo final de reducir la pobreza y garantizar el desarrollo social de la población a la que están dirigidos. 3.2 Describir las recomendaciones de acuerdo a su relevancia: 1. Incluir en el Diagnóstico o elaborar un documento en el que se incluya el análisis realizado para identificar las principales características de la Metodología de Medición Multidimensional de la Pobreza, de modo que se concrete la justificación teórica que sustenta el Programa. 2. Anexar en las Reglas de Operación el Cuestionario Único de Información Socioeconómica (CUIS). 3. Se sugiere modificar el supuesto del Propósito Porcentaje de población con carencia en Calidad y Espacios en la Vivienda, mejorar el Componente Porcentaje de viviendas mejoradas en el estado de Puebla y publicar información pertinente en las Fichas Técnicas y en la MIR, que pueda ser utilizada como medio de verificación monitoreable o público. 4. Datos de la instancia evaluadora 4.1 Nombre del coordinador de la evaluación: Jesús Sánchez Reliac 4.2 Cargo: Coordinador General de Política Social Página 3
4.3 Institución a la que pertenece: Secretaría de Desarrollo Social del Gobierno del Estado de Puebla. 4.4 Principales colaboradores: José García Macías Director de Padrones, Evaluaciones y Monitoreo Zuleima Poncet Garduza Subdirectora de Padrones Juan Huerta Flores Analista de la Dirección de Padrones, Evaluaciones y Monitoreo 4.5 Correo electrónico del coordinador de la evaluación: jesus.sanchez.reliac@gmail.com 4.6 Teléfono (con clave lada): (222) 7-77-97-00 Ext. 1110 5. Identificación del (los) programa(s) 5.1 Nombre del (los) programa(s) evaluado(s): Programa Estatal Cuartos Dormitorio 5.2 Siglas: No Aplica 5.3 Ente público coordinador del (los) programa(s): Secretaría de Desarrollo Social del Gobierno del Estado de Puebla. 5.4 Poder público al que pertenece(n) el(los) programa(s): Poder Ejecutivo X Poder Legislativo Poder Judicial Ente Autónomo 5.5 Ámbito gubernamental al que pertenece(n) el(los) programa(s): Federal Estatal X Local 5.6 Nombre de la(s) unidad(es) administrativa(s) y de (los) titular(es) a cargo del (los) programa(s) 5.6.1 Nombre(s) de la(s) unidad(es) administrativa(s) a cargo de (los) programa(s): Subsecretaría de Vivienda y Programas Urbanos Dirección de Programas de Pobreza Urbana 5.6.2 Nombre(s) de (los) titular(es) de la(s) unidad(es) administrativa(s) a cargo de (los) programa(s) (nombre completo, correo electrónico y teléfono con clave lada): Nombre Juan Carlos Morales Páez José Rafael Allende Carrera Unidad Administrativa Subsecretaría de Vivienda y Programas Urbanos Tel: (222) 7-77-97-00 Ext. 2021 Correo subsecretariodeviviendapuebla@gmail.com Dirección de Programas de Pobreza Urbana Tel: (222) 7-77-97-00 Ext. 1420 Correo electrónico: rafiki1966@yahoo.com.mx electrónico: Página 4
6. Datos de contratación de la evaluación 6.1 Tipo de contratación: Exhorto oficial a la Unidad Administrativa. 6.1.1 Adjudicación Directa 6.1.2 Invitación a tres 6.1.3 Licitación Pública Nacional 6.1.4 Licitación Pública Internacional 6.1.5 Otro X Señalar: Memorándum CGPS/292/2015 dirigido a la Subsecretaría de Vivienda y Programas Urbanos. 6.2 Unidad administrativa responsable de contratar la evaluación: Coordinación General de Política Social. 6.3 Costo total de la evaluación: Sin costo. 6.4 Fuente de Financiamiento: No aplica. 7. Difusión de la evaluación 7.1 Difusión en internet de la evaluación: Portal de Transparencia de la Secretaría de Desarrollo Social: http://transparencia.puebla.gob.mx/docs/adjuntos/763_1477415190_5f84332428757ec42cd626e0c911457 b.pdf 7.2 Difusión en internet del formato: Portal de Transparencia de la Secretaría de Desarrollo Social. Página 5