DATOS GENERALES DEL PROGRAMA 1. Nombre del Programa: 2. Dependencia:. 3.Unidad Administrativa Responsable: 4. Datos del(a) Titular 1 Nombre: Miguel Agustín Limón Macías Teléfono: 55 54810400 6442 Correo electrónico: miguel_agustin@conaliteg.gob.mx 5. Datos del(a) Responsable Operativo(a) del Programa 1 Nombre: Gabriel González Arenas Teléfono: 55 54810400 6445 Correo electrónico: gabriel_gonzalez@conaliteg.gob.mx 6. Modalidad: B - 1 7. Año de inicio del programa: 1959 8. Presupuesto (Millones de Pesos): Año Presupuesto Original Modificado Ejercido 2008 1880.69-1881.02 2009 2069.61-2653.26 2010 2149.64 - - B001 1/17
Alineación con Planeación Nacional 1 Objetivo: Reducir la pobreza extrema y asegurar la igualdad de oportunidades y la ampliación de capacidades para que todos los mexicanos mejoren significativamente su calidad de vida y tengan garantizados alimentación, salud, educación, vivienda digna y un medio ambiente adecuado para su desarrollo tal y como lo establece la Constitución. - Eje: Igualdad de Oportunidades - Tema: Transformación Educativa Alineación con Programa Sectorial/ Institucional 1 Objetivo: Elevar la calidad de la educación para que los estudiantes mejoren su nivel de logro educativo, cuenten con medios para tener acceso a un mayor bienestar y contribuyan al desarrollo nacional. Fin De acuerdo a la reunión del día 08 de julio de 2009 con personal de la SHCP se acordó eliminar este indicador Propósito Libros de texto y materiales educativos producidos y distribuidos de manera oportuna y suficiente a los gobiernos estatales para su entrega a los niños como un recurso didáctico de apoyo fundamental en la educación básica. Componentes Libros de texto y materiales educativos producidos Libros de texto y materiales educativos producidos De acuerdo a la reunión del día 08 de julio de 2009 con personal de la SHCP, se acordó eliminar este indicador Atención a la demanda de libros de texto gratuito y materiales educativos B001 2/17
Actividades Adquisición de papel para la producción de libros de texto y materiales educativos Adquisición de papel para la producción de libros de texto y materiales educativos B001 3/17
RESULTADOS/PRODUCTOS Principales 5 Indicadores de Resultados - Indicador 1 1. Nombre del Indicador: Cantidad de libros de texto y materiales educativos entregados 2. Definición: Número de libros de y materiales educativos entregados en los almacenes estatales por ciclo escolar 3. Método de Cálculo: Suma del número de libros de texto y materiales educativos entregados en cada una de las 32 entidades federativas 4. Unidad de Medida: Libro 5. Frecuencia de Medición del Indicador: Mensual 6. Meta del indicador 2009: 201.7 7. Valor del indicador 2009: 224.8 8. Valoración del Indicador: Calificación: 2/10 (insuficiente). El indicador no es relevante porque no se refiere a un objetivo estratégico. El objetivo (y por tanto, su indicador) es redundante con los de gestión. 9. Año Base: 2007 10. Valor Inmediato Anterior: SD 11. Año Valor Inmediato Anterior: 2009 12. Avances Anteriores: 2007 : 190.9 2009 : 224.8 Principales 5 Indicadores de Servicios y Gestión B001 4/17
- Indicador 1 1. Nombre del Indicador: Atención a la demanda de libros de texto gratuito 2. Definición: Atención a la demanda de libros de texto gratuito solicitada por las entidades federativas 3. Método de Cálculo: (Demanda atendida según solicitudes de las entidades federativas/ demanda real según estadística de inicio de ciclo escolar)*100 4. Unidad de Medida: Porcentaje de atención 5. Frecuencia de Medición del Indicador: Anual 6. Meta del indicador 2009: 100 7. Valor del indicador 2009: 111.5 8. Valoración del Indicador: Calificación: 9/10 (Bueno). El indicador es relevante(se vincula con el objetivo y está relacionado con la población objetivo). Es pertinente porque se refiere a los productos esenciales que desarrolla la institución; es confiable porque parte de las cifras de producción y de las solicitudes entregadas a la CONALITEG; es útil porque se puede medir en forma periódica y económica; y es claro porque se puede referir a valores de tendencia. 9. Año Base: 2009 10. Valor Inmediato Anterior: SD 11. Año Valor Inmediato Anterior: 2008 12. Avances Anteriores: 2009 : 111.5 - Indicador 2 1. Nombre del Indicador: Libros de texto y materiales educativos producidos. 2. Definición: Valor numérico de libros de texto y materiales producidos en el año actual B001 5/17
3. Método de Cálculo: Total de número de libros y materiales educativos producidos 4. Unidad de Medida: Libro 5. Frecuencia de Medición del Indicador: Trimestral 6. Meta del indicador 2009: 222.3 7. Valor del indicador 2009: 244.7 8. Valoración del Indicador: Calificación: 2/10 (insuficiente). El indicador no es relevante por ser redundante con otro indicador de componente. Es poco pertinente por agregar poca información al otro indicador de componente. 9. Año Base: 2007 10. Valor Inmediato Anterior: 174.3 11. Año Valor Inmediato Anterior: 2009 12. Avances Anteriores: 2007 : 194.7 2009 : 244.7 - Indicador 3 1. Nombre del Indicador: Adquisición de papel para la producción de libros de texto y materiales educativos. 2. Definición: Adquisición de papel necesario para la producción de libros de texto y materiales educativos, de 68 grs en bobinas de 85 cm. 3. Método de Cálculo: (Toneladas de papel compradas / total de compras programadas de toneladas de papel)*100 4. Unidad de Medida: Porcentaje 5. Frecuencia de Medición del Indicador: Trimestral 6. Meta del indicador 2009: 100 B001 6/17
7. Valor del indicador 2009: 100 8. Valoración del Indicador: Calificación: 9/10 (Bueno). La pertinencia del indicador es mediana, ya que depende del grado en que la programación de compras represente la cantidad necesaria y suficiente para imprimir los libros y materiales educativos. 9. Año Base: 2008 10. Valor Inmediato Anterior: 121.1 11. Año Valor Inmediato Anterior: 2009 12. Avances Anteriores: 2008 : 100 2009 : 100 Avances Indicadores Aunque se carece de información de los resultados del 2008 para la mayoría de los indicadores, a partir de la información disponible para 2007 y 2009 se concluye que el programa ha cumplido sus metas y satisface la demanda de libros de texto gratuitos y materiales que la establece a partir de la matrícula escolar en educación básica. Resultados de Impacto El Programa no cuenta con Evaluaciones de Impacto que presenten resultados atribuibles a éste. Hallazgo Relevante 1: Hallazgos Relevantes B001 7/17
1. Año de la Fuente: 2009 2. Hallazgos Relevantes: La CONALITEG distribuyó en 2009 183.5 millones de libros de texto gratuitos e imprimió un total de 244.7 millones de libros y materiales educativos. A partir de estos datos y los del presupuesto total, se estima un costo promedio por ejemplar que oscila entre $10.8 y $14.45 pesos. 3. Fuente: Documento Institucional (DIN) 4. Elementos de análisis: Componentes Hallazgo Relevante 2: 1. Año de la Fuente: 2009 2. Hallazgos Relevantes: El Programa cumplió en 2009 de manera oportuna y suficiente con el 100% de sus metas de entregas a entidades federativas. 3. Fuente: Documento Institucional (DIN) 4. Elementos de análisis: Componentes Hallazgo Relevante 3: 1. Año de la Fuente: 2009 2. Hallazgos Relevantes: En muchos países, el Estado únicamente presta o regala los libros a los estudiantes de muy bajo nivel socioeconómico. En otros países, el Estado otorga subisdios directos para la compra de los libros. Esto podría ser relevante para el establecimiento de políticas que podrían hacer más eficiente al Programa B001. 3. Fuente: Evaluación de Diseño (EDS) 4. Elementos de análisis: Propósito Hallazgo Relevante 4: 1. Año de la Fuente: 2009 2. Hallazgos Relevantes: La CONALITEG produce un 14% de los libros y contrata la producción del 86% restante. El 100% de la distribución a las entidades federativas se contrata a prestadores de servicios externos. B001 8/17
3. Fuente: Evaluación de Diseño (EDS) 4. Elementos de análisis: Componentes Valoración de Resultados de Evaluación de Impacto No aplica. Todavía no se han llevado a cabo evaluaciones de impacto Comentarios y Observaciones No aplica. Todavía no se han llevado a cabo evaluaciones de impacto Valoración de Hallazgos de Resultados En opinión del equipo evaluador, el Programa no ha definido objetivos ni indicadores adecuados de resultados, sino de gestión. Por lo tanto, no se pueden valorar los hallazgos. Comentarios y Observaciones Los objetivos estratégicos y sus indicadores deben estar referidos a la razón de ser del Programa, que es favorecer la igualdad de oportunidades para impedir la deserción escolar por motivos de costos económicos. Valoración de Hallazgos de Gestión(componentes) El Programa satisface de manera oportuna y suficiente la demanda de libros y materiales educativos que establece la a partir de la matrícula escolar en educación básica. Comentarios y Observaciones La matriz de indicadores no incluye indicadores relacionados con la eficiencia del Programa. Dado su razón de ser, el Programa debería hacer seguimiento rutinario del costo por libro (Presupuesto total de la CONALITEG/total de libros producidos, ajustando para otros materiales) Valoración de Hallazgos de Gestión(actividades) Los indicadores de actividades solo incluyen la compra de papel y no otros procesos que se llevan a cabo para lograr los componentes. B001 9/17
Comentarios y Observaciones Las dos actividades más relevantes para la consecución de los componentes son la asignación de órdenes de impresión y de distribución, lo que debería quedar incluidas en la MIR. B001 10/17
EVOLUCIÓN DE LA COBERTURA 4.1 Población Potencial a.se encuentra claramente definida: No b.unidad de medida para la población potencial: Entidad federativa c.cuantificación de la población potencial: 32 d. Definición de la población potencial: No está definida en el SED, pero se identifica a las entidades federativas como la unidad de medida. 4.2 Población Objetivo a.se encuentra claramente definida: No b.unidad de medida para la población objetivo: Entidad federativa c.cuantificación de la población objetivo: 32 d. Definición de la población objetivo Las entidades federativas, porque a ellas se entregan los libros para que los distribuyan a escuelas y estudiantes. 4.3 Población Atendida a.se encuentra claramente definida: No b.unidad de medida para la población atendida: Entidad federativa c.cuantificación de la población atendida: 32 d. Se cuenta con información desagregada de la Población Atendida por entidad, municipio y/o localidad?: Sí Entidades Atendidas: 32 Municipios Atendidos: - Localidades Atendidas: - Localización de la población atendida: B001 11/17
Entidades sin atender Entidades atendidas Municipios atendidos 4.4 Incremento en Cobertura Año Población Potencial Población Objetivo Población Atendida 2008 32 32 32 2009 32 32 32 B001 12/17
4.5 Análisis de la Cobertura El programa cubre la demanda de libros que la DGPP de la determina a partir de la matrícula escolar de cada entidad federativa. Es evidente que las poblaciones potencial y objetivo son los niños en edad escolar y los niños inscritos que reciben los libros. Sin embargo, el Programa identifica a las entidades como tales debido a que entrega los libros y materiales a ellas. El Programa debe reorientar sus poblaciones considerando a los alumnos y obtener datos de las entidades para conocer su cobertura. B001 13/17
SEGUIMIENTO A ASPECTOS DE MEJORA a. Existe un documento de trabajo adecuado para atender o mejorar el programa: Sí b. Principales 5 aspectos susceptibles de mejora definidos por el Programa Aspecto 1. La recomendación de resaltar la gratuidad del material educativo en el Fin y el Propósito del Programa y de desechar el mejoramiento de la calidad educativa fue atendida en la MIR 2010. Tipo de documento: Documento de Trabajo Aspecto 2. La recomendación de agregar en la MIR Actividades fue atendida agregando las compras de papel. Tipo de documento: Documento de Trabajo Aspecto 3. La recomendación de substituir los indicadores de Fin, Propósito y 3er Componente fue atendida, pero continúan existiendo redundancias en la MIR 2010. Para apoyar el avance, el evaluador entregó una propuesta de MIR que resuelve los problemas existentes. Tipo de documento: Documento de Trabajo Aspecto 4. La recomendación de definir de manera explícita a las poblaciones potencial y objetivo está pendiente de atenderse. Tipo de documento: Documento de Trabajo c. Avance Mecanismo 2008 Avance de Aspectos Susceptibles a Mejora: No aplica. Sólo ha tenido una evaluación de diseño en 2009. B001 14/17
% de acciones de mejora establecidas en el documento de trabajo que se han realizado de acuerdo con las fechas de término: 0 B001 15/17
CONCLUSIONES DE LA EVALUACIÓN Conclusiones del Evaluador Externo: El Programa B001 Producción y Distribución de Libros de Texto Gratuitos satisface de manera eficiente, oportuna y suficiente la demanda de libros y materiales educativos que establece la DGPP de la para cada entidad federativa. Sin embargo, para comunicar sus logros de manera consistente con otros programas federales, debe reportarlos en términos de la población de estudiantes atendidos. Fortalezas: La principal fortaleza del Programa B001 es que tiene un objetivo claro y específico, que es producir y distribuir libros de texto gratuitos y materiales educativos según la demanda que determina la DGPP de la, y que logra cumplirlo de manera eficiente, oportuna y suficiente. Retos y Recomendaciones: Los principales retos del Programa son: 1) tener una MIR que postule objetivos estratégicos y utilice indicadores que los reflejen; 2) establecer indicadores de eficiencia (costo por libro); 3) Reorientar la información de logros en términos de las poblaciones potencial, objetivo y atendida de estudiantes y obtener datos de ellas a través de la DGPP de la y de las OREEs. Avance 2010: El Programa ha elaborado una nueva MIR para 2010, con algunos avances relacionados con las recomendaciones hechas en la evaluación de diseño 2009. Al términos del primer trimestre se observaron algunos rezagos en la producción de libros debido a la entrega tardía de los materiales para impresión por el proveedor externo. Fuente de Información General: Matriz de Indicadores para Resultados del Ciclo 2009; Págs. 100 y 101 del Acta de la 1ª Junta Directiva de 2010; Informe de Evaluación Externa 2009 de Diseño; Seguimiento a aspectos susceptibles de mejora derivados de las evaluaciones externas;documento de Trabajo, ; Cifras reportadas a la SHCP; Procedimiento para el proceso "Entradas y salidas del almacén de producto terminado"; Procedimiento para el proceso "Programación de salidas de vehículos"; Lista de procedimientos por área de CONALITEG; Cantidad de libros que se distribuyeron por familia en el ciclo escolar 2009-2010 en las 32 entidades federativas; MIR 2010; Matriz de marco Lógico del Programa; Fichas técnicas de un indicador de Propósito, dos indicadores de Componente y un indicador de Actividad; Avance de Metas Fisicas 2009-Resultados Anuales Alcanzados. B001 16/17
DATOS DE LA INSTITUCIÓN EVALUADORA 1. Institución Evaluadora: Investigación en Salud y Demografía, S.C. 2. Nombre del(a) Coordinador(a) de la Evaluación: Ricardo Vernon 3. Correo Electrónico: rvernon@insad.com.mx 4. Teléfono: 5556158252 B001 17/17