EVALUACIÓN DE PROGRAMAS EDUCATIVOS

Transcripción

1 RAMÓN PÉREZ JUSTE EVALUACIÓN DE PROGRAMAS EDUCATIVOS editorial LA MURALLA, S. A.

2 ÍNDICE Presentación, Ramón Pérez fuste...pág. 15 Parte I. LA EVALUACIÓN. PRECISIONES CONCEPTUALES Capítulo I. Evaluación. Concepto y funciones de la evaluación pedagógica. Una concepción integral, integrada e integradora Introducción Educación y evaluación Evolución del concepto El salto cualitativo de la evaluación Ampliación de los sujetos evaluadores Ampliación de los momentos Una evaluación continua Repercusiones para la evaluación educativa Evaluación integral Evaluación integrada Evaluación integradora Nuestro concepto de evaluación Los momentos o etapas El núcleo de la evaluación Institucionalización de la evaluación Evaluación y mejora Precisiones conceptuales La mejora: una cuestión de actitud y de información La actitud La información aportada La información necesaria... Capítulo II. El. objeto de la evaluación: de la evaluación del aprendizaje a la evaluación del profesorado, los programas y los centros educativos El. objeto a evaluar Qué objetos evaluar?

3 6 EVALUACIÓN DE PROGRAMAS EDUCATIVOS Solo los alumnos? Y una contradicción Ampliación del objeto de evaluación El profesorado como objeto de evaluación La evaluación de programas La evaluación de centros educativos El programa como objeto de evaluación... Capítulo III. Información: técnicas e instrumentos Información y datos en el marco de la evaluación Calidad de los objetivos Diversidad y complejidad de los objetivos de los programas educativos De los objetivos a la información Planificación de la recogida de información Técnicas para la recogida de información Técnicas de observación Técnicas de análisis Técnicas de encuesta Técnicas de consulta Técnicas de prueba Complementariedad de las técnicas Los instrumentos de recogida de información... Capítulo IV. Criterios y referencias para evaluar Valoración de ia información Los criterios Las necesidades y su evaluación Los objetivos del programa El programa La implantación e implementación del programa Los resultados del programa Las nuevas ediciones del programa Las referencias Referencia normativa Referencia criterial Referencia idiosincrática Compatibilidad de referencias... Capítulo V. Modelos y metodologías para la evaluación Configuración de propuestas o modelos Principales ejes para organizar la información Las funciones de la evaluación

4 ÍNDICE Amplitud del objeto evaluado El enfoque metodológico Utilización de la evaluación Principales modelos evaluativos Modelos evaluativos centrados en la eficacia de los programas La propuesta de Ralph Tyler Las propuestas experimentales Modelos orientados a los procesos Modelos complejos La propuesta de Stake El modelo CIPP: la aportación de Stufflebeam La propuesta de Pérez Juste Los modelos cualitativos Problemas pendientes La existencia de expertos La factibilidad Juicios expertos o juicios democráticos? Los planteamientos éticos La comparabilidad de los datos... Capítulo VI. Los estándares para la investigación evaluativa Estándares para la evaluación de programas Conceptos generales sobre los estándares Organización y contenido de los estándares Estándares de utilidad Estándares de viabilidad o factibilidad Estándares de Honradez o Probidad Estándares de precisión Algunas reflexiones sobre los estándares Separación entre programa y su evaluación Definición de estándares en un contexto diferente Ausencias y propuesta de modificaciones Parte II. EL PROCESO DE EVALUACIÓN DE PROGRAMAS Capítulo VII. Necesidades, carencias y demandas. Evaluación de necesidades Necesidades, carencias y demandas Evaluación de necesidades Detección e identificación Valoración de las necesidades

5 8 EVALUACIÓN DE PROGRAMAS EDUCATIVOS Toma de decisiones Calidad de la evaluación de necesidades... Capítulo VIII. El programa. Concepto, componentes, alcance Concepto de programa Diversidad de programas Complejidad del programa Estructura y complejidad de los programas educativos Los programas ordinarios en el ámbito académico La complejidad La estructura Algunos programas específicos Un programa específicamente académico El programa Fomento de actitudes contrarias al consumo de tabaco y alcohol en un marco interactivo con los principios de la vida activa El programa Construyendo salud Peces. Un programa para padres Guía de educación sexual para padres y maestros de niños deficientes mentales Los componentes básicos de un programa El contexto Los componentes mínimos Los requisitos... Capitulo IX. Planeamiento de la evaluación De la evaluación sobrevenida a la evaluación integrada El proceso de evaluación Evaluaciones únicas de un programa Institucionalización de la evaluación Aportaciones y riesgos de una evaluación integrada Aportaciones Riesgos... Capitulo X. Evaluación inicial de programas Diseño de programas De las necesidades a los objetivos De los objetivos al programa en cuanto tal Evaluación inicial del programa Finalidad de la evaluación inicial Dimensiones de la evaluación Calidad intrínseca del programa Adecuación al contexto

6 ÍNDICE Adecuación a las circunstancias: viabilidad Criterios para la evaluación inicial Criterios para valorar la calidad intrínseca del programa Para la adecuación al contexto Para la adecuación a las circunstancias Metodología básica Análisis de contenido El juicio de expertos La observación... Capítulo XI. Desarrollo del programa. Evaluación formativa del programa Implantación, implementación y desarrollo del programa y evaluación formativa Implantación Implementación Dimensiones y objeto de la evaluación Ejecución del programa Marco del programa Criterios para la valoración Metodología básica... Capítulo XII. Conclusión del programa. Evaluación final del programa. Institucionalización de la evaluación Evaluación del programa en sus resultados Finalidad y objetivos de la evaluación final del programa Principales dimensiones Los resultados Valoración Criterios para la valoración Eficacia objetiva Eficacia subjetiva El impacto como criterio Metodología Alternativas metodológicas La medida. Pruebas Observación y prueba Otras técnicas para la recogida de información Enfoques experimentales Institucionalización de la evaluación

7 10 EVALUACIÓN DE PROGRAMAS EDUCATIVOS Capítulo XIII. El informe de evaluación del programa El informe Cualidades del informe Cualidades técnicas Informe completo Informe accesible Informe objetivo Cualidades éticas Contenido del informe Estructura del informe... Bibliografía Básica Parte III. FUENTES DE INFORMACIÓN, TÉCNICAS E INSTRUMENTOS PARA LA EVALUACIÓN DE PROGRAMAS EDUCATIVOS Capítulo XIV. El principio de complementariedad. Complementariedad de métodos y técnicas Planteamientos generales sobre metodología Un método general de investigación? La investigación y los diversos ámbitos de conocimiento La Educación como campo de conocimiento La cuestión irresuelta? de los paradigmas El concepto de paradigma Caracterización de los paradigmas Valoración de los paradigmas La situación actual. Complementariedad metodológica Nuestra posición sobre el tema Naturaleza y complejidad del acto educativo La respuesta metodológica La complementariedad como cuestión de fondo La complementariedad de métodos y técnicas en la evaluación de programas El problema de la integración de informaciones Capítulo XV. Los datos disponibles. Estadísticas, indicadores, documentos y archivos Estadísticas Indicadores Concepto

8 ÍNDICE Algunos sistemas de indicadores Sentido de los indicadores en nuestro contexto de referencia Archivos y documentos Documentos Organismos y entidades nacionales públicas Organismos y entidades nacionales privadas Documentos internacionales Archivos... Capítulo XVI. Las aportaciones de los expertos. La técnica Delphi La consulta a expertos Adecuación de la técnica Delphi Delphi y la evaluación de necesidades Delphi y la evaluación de la calidad intrínseca del programa Delphi y la calidad de los instrumentos de recogida de información Delphi y la interpretación y valoración de la información recogida Concepto y características Proceso Planificación Elaboración del documento Selección de los informantes Contacto con los informantes Condiciones de aplicación Los envíos Informe Aportaciones y limitaciones de Delphi... Capítulo XVII. El análisis de contenido Concepto y características Objetivos Niveles Proceso Establecimiento de los objetivos Fijación del contenido a analizar Decisiones sobre las unidades de análisis Establecimiento de las categorías Categorización, codificación, cuantificación

9 12 EVALUACIÓN DE PROGRAMAS EDUCATIVOS Interpretación de los resultados Algunos problemas técnicos... Capítulo XVIII. La observación en sus diversas modalidades. Los autoinformes La observación en el marco de la evaluación de programas Las dimensiones no cognitivas de la educación La aportación de UNESCO Los objetivos del dominio afectivo Conceptos básicos en la evaluación de actitudes y valores El concepto de actitud El concepto de valor Planteamiento evaluativo de actitudes y valores El problema de la integración de los resultados y juicios de valor Evaluación de los objetivos afectivos. Técnicas fundamentales La observación como técnica para la evaluación Evitar juicios precipitados Responder a un plan sistemático Estar fundamentada: una observación ilustrada Cuestionarios, inventarios, escalas Análisis de las diferentes técnicas Técnicas generales para el registro de datos de observación El registro de incidentes críticos Listas y escalas de observación Técnicas específicas para evaluar actitudes y valores Técnicas y procedimientos Recogida de datos sobre actitudes Recogida de datos sobre valores Autoevaluación... Capitulo XIX. Encuestas y cuestionarios. La entrevista La encuesta Aspectos a considerar Cualidades de la información Preguntas y tipos de respuestas Las preguntas Tipos de respuestas

10 ÍNDICE Registro de la información Modalidades El proceso El cuestionario El cuestionario como modalidad de encuesta Tipología de las preguntas La entrevista Principales modalidades Registro de la información... Capítulo XX. Los datos de prueba. Tests y escalas Los objetivos educativos Diversidad y complejidad El principio de complementariedad metodológica aplicado a la evaluación: diversidad de fuentes, técnicas e instrumentos Evaluación del aprendizaje: objetivos cognitivos Principales técnicas en el ámbito de los objetivos cognitivos Construcción de pruebas para evaluar aprendizajes cognoscitivos y cognitivos Evaluación de objetivos complejos Los exámenes tradicionales Evaluación de la composición escrita Los trabajos de elaboración personal Construcción de pruebas Construcción de pruebas normativas Construcción de pruebas criteriales... Capítulo XXI. Tratamiento y análisis de datos, I. Datos cuantitativos Del programa a los datos Las grandes modalidades de tratamientos de datos: análisis de datos cuantitativos Niveles o escalas de medida Tratamiento de los datos Tratamiento descriptivo de datos Tratamiento de una sola variable Organización de los datos Reducción de datos Representación gráfica de los datos Tratamiento de datos bivariados o multivariados Tratamiento inferencial de datos

11 14 EVALUACIÓN DE PROGRAMAS EDUCATIVOS Inferencias sobre asociación y correlación Inferencias sobre diferencias Inferencias sobre diferencias de medias Significación estadística y tamaño del efecto... Capitulo XXII. Tratamiento y análisis de datos, II. Datos cualitativos El dato cualitativo Recogida y análisis de datos Concepto Proceso La reducción de datos La presentación de los datos La obtención y validación de conclusiones Aportaciones de la informática El programa Aquad El programa Nudist De los datos a la teoría... Capítulo XXIII. Metodología experimental El diseño y los diseños El diseño como plan general de acción Los diseños El diseño experimental Un principio básico Son posibles los diseños experimentales en evaluación de programas? Alternativas razonables y posibles Diseño con grupo de control no equivalente Diseños de series cronológicas Diseños de N = 1... Bibliografía... Anexos... Anexo I: Pauta para la evaluación de programas educativos... Anexo II: Glosario