LA EVALUACIÓN DE PROGRAMAS EDUCATIVOS: CONCEPTOS BÁSICOS, PLANTEAMIENTOS GENERALES Y PROBLEMÁTICA. Ramón Pérez Juste

Transcripción

1 LA EVALUACIÓN DE PROGRAMAS EDUCATIVOS: CONCEPTOS BÁSICOS, PLANTEAMIENTOS GENERALES Y PROBLEMÁTICA. Ramón Pérez Juste Esquema: 1. La educación como objeto de conocimiento e investigación La educación: un campo heterogéneo y multidisciplinar La evaluación de programas y la mejora de la actividad pedagógica La evaluación de programas como investigación evaluativa. 2. Conceptos básicos Programa Evaluación Evaluación de programas. 3. Planteamientos generales: componentes básicos de una propuesta para la evaluación de programas educativos Líneas generales de la propuesta evaluativa. 4. Problemática La existencia de expertos La factibilidad Juicios expertos o juicios democráticos? 4.4. Los planteamientos éticos La comparabilidad de los datos. 1. LA EDUCACIÓN COMO OBJETO DE CONOCIMIENTO E INVESTIGACIÓN. La educación es una actividad orientada al perfeccionamiento de las personas por medio de acciones intencionadas de los educadores, generalmente concretadas en planes o programas La educación: un campo heterogéneo y multidisciplinar. La educación es una realidad compleja y diversa, por lo que puede ser considerada desde perspectivas muy diversas. El objeto de la educación es heterogéneo y multidisciplinar por lo que los planteamientos metodológicos deben ser acordes a dicha complejidad y diversidad. Lo más adecuado es aplicar la complementariedad metodológica: abordar la realidad compleja desde diversos enfoques La evaluación de programas y la mejora de la actividad pedagógica. La evaluación de programas es una actividad metodológica que admite, al menos, dos tipos de actuaciones: la reflexión de cada profesor sobre su programa y, la llevada a cabo por expertos mediante la aplicación rigurosa de metodologías. Es fundamental en este punto la creación de una verdadera cultura evaluativa que fomente aptitudes y actitudes positivas hacia la evaluación, y el estudio de las actuaciones de los profesores desde la replicación para dar lugar a enunciados y generalidades. A estos dos grandes objetivos puede servir la evaluación de programas: mejorar la calidad de la acción educativa dentro del aula y en el centro y la creación de teoría La evaluación de programas como investigación evaluativa. La evaluación de programas se orienta fundamentalmente a una evaluación externa de programas educativos, realizada una sola vez, desde fuera y por expertos, respondiendo a lo que llamamos investigación evaluativa. Para alcanzar el rigor propio se necesita, en la medida de lo posible, seguir los estándares del Joint Committeé y utilizar el criterio de complementariedad metodológica. 2. CONCEPTOS BÁSICOS.

2 2.1. Programa. Plan sistemático diseñado por el educador como medio al servicio de las metas educativas. En su elaboración y evaluación se han de tener en cuenta. Debe tener metas y objetivos educativos. Las metas y objetivos deben estar acomodados a las características de los destinatarios y asumidos por todos los agentes del Claramente especificado y detallado: destinatarios, agentes, actividades, decisiones, estrategias, procesos, funciones y responsabilidades del personal, tiempos, etc. Si no es así el programa adolecerá de uno de los criterios para la posterior evaluación: la evaluabilidad. Medios y recursos educativos y suficientes, adecuados y eficaces. Necesita un sistema capaz de apreciar si las metas y objetivos se logran: evaluación Evaluación. Entendemos evaluación como la valoración, a partir de criterios y referencias preespecificados, de la información técnicamente diseñada y sistemáticamente recogida y organizada, sobre cuantos factores relevantes integran los procesos educativos para facilitar la toma de decisiones de mejora. Sus componentes fundamentales son: a) Los contenidos a evaluar. Cuántos factores relevantes integran los procesos educativos. Evaluación integral. b) La información a recoger. Debe ser técnicamente diseñada y sistemáticamente recogida y organizada. c) La valoración de la información. Aquí se incluyen los criterios (exactitud, precisión, claridad, profundidad, variedad,...) y las referencias (normativa, criterial, idiosincrásica). d) La finalidad. Facilitar la toma de decisiones de mejora. La evaluación ha de ser continua y formativa alcanzando los procesos, diseño y calidad del Además la evaluación presenta tres características: Integral. La evaluación además de abarcar toda la realidad educativa, lo tiene que hacer de modo armónico y al servicio de una gran meta común: la mejora de la persona. Integrada. La evaluación es un elemento más, junto con los demás y en armonía con ellos. Integradora. Dimensión activa y dinámica de la evaluación Evaluación de programas. Entendemos la evaluación de programas como un proceso sistemático, diseñado intencional y técnicamente, de recogida de información rigurosa valiosa, válida y fiable orientado a valorar la calidad y los logros de un programa, como base para la posterior toma de decisiones de mejora, tanto del programa como del personal implicado y, de modo indirecto, del cuerpo social en que se encuentra inmerso. Conceptos incluidos en la definición: a) Contenido u objeto de la evaluación. El programa tanto en su calidad objetivos, diseño, medios- como en sus logros o resultados. b) Finalidad. Se orienta a la mejora, por eso es necesario hacer objeto de evaluación los propios procesos además del

3 c) Información. Ha de ser rigurosa fiable y válida-, valiosa útil para facilitar la toma de decisiones-. 3. PLANTEAMIENTOS GENERALES: COMPONENTES BÁSICOS DE UNA PROPUESTA PARA LA EVALUACIÓN DE PROGRAMAS EDUCATIVOS. Algunas consideraciones metodológicas: Lo educativo como referencia constante. Tanto en el diseño, implementación, desarrollo y evaluación de programas. Los objetivos, medios y recursos deben ser educativos y adecuados. El programa coexiste con otros programas de aula y en el centro. Colaboración y participación de los agentes y los destinatarios. El tamaño o amplitud del Desde los reducidos a los que duran varios cursos, la metodología cambiará sensiblemente. La complejidad del Con objetivos de muy diversa naturaleza. El estatus del evaluador. Como responsable simultáneo del programa y de su evaluación, con enfoque esencialmente autoevaluativos y continuos. Como evaluador externo, con carácter sumativo que concluye con un Informe. Las unidades de análisis. Los destinatarios naturales del los programas son los educandos. Sin embargo, a veces hay que tomar en consideración otro tipo de unidades como el aula, el centro, conjunto de centros, etc. La relación entre el programa y su evaluación. La evaluación ha de estar integrada en el La información a recoger. Tiene que existir coherencia entre los objetivos del programa, los de su evaluación y los datos o la información recogida para decidir sobre él. (datos duros y percepciones de los agentes y destinatarios).

4 3.1. Líneas generales de la propuesta evaluativa. MOMENTO FINALIDAD FUNCIÓN METODOLOGÍA INFORMACIÓN A RECOGER 1ª Evaluación del Programa en cuanto tal Calidad técnica del programa, viabilidad práctica y evaluabilidad. Formativa: anticipar las decisiones de mejora. A veces, puede ser sumativa. Análisis de contenido de documentos, estudios prospectivos, técnica Delphi. Juicio de expertos multidisciplinares. Registros, pruebas de evaluación inicial. Sobre el programa: fundamentación, formulación, relación con las necesidades, expectativas y demandas de los destinatarios. 2º Evaluación del proceso de implantación del Programa 3º Evaluación de los resultados de aplicación del programa Facilitar la toma a tiempo de decisiones de mejora. Acumular información para futuras ediciones. Comprobar la eficacia del Formativa. En casos extremos sumativa. Fundamentalmente sumativa. Cuando sea posible sumativa formativizada. Recogida de información: observación, diálogos, entrevistas, análisis de tareas,... Análisis de información: sesiones de grupo, debates,... Sobre el desarrollo del programa, resultados intermedios y efectos no planeados. Resultados en relación a los objetivos. Efectos positivos o negativos- no planeados. 4ª Institucionalización de la evaluación del Programa 4.1. La existencia de expertos La factibilidad Juicios expertos o juicios democráticos? 4.4. Los planteamientos éticos La comparabilidad de los datos. CRITERIOS/REFERENCIAS DECISIONES Calidad, pertinencia y realismo de los objetivos y las metas y adecuación a los destinatarios y al contexto. Suficiencia de los apoyos, medios y recursos. Calidad técnica de los planteamientos de evaluación, y del programa: coherencia con las bases teóricas, congruencia interna de sus componentes. Viabilidad del Evaluabilidad Cumplimiento: desfases, desajustes, flexibilidad. Coherencia institucional. Eficacia parcial. Satisfacción de los implicados: agentes, colaboradores, destinatarios. Formativas. En casos extremos sumativas. Ajustes parciales. En casos extremos, suspensión de la aplicación del Eficacia: grado de logro de los objetivos. Eficiencia: resultados en relación a los medios y circunstancias. Efectividad: efectos beneficiosos no previstos. Satisfacción. Impacto. Progreso: situación de partida, el programa frente a sí mismo. Logro del dominio: niveles preespecificados (evaluación criterial) Superioridad: niveles de otros programas. Sumativas: mantener o suprimir el Formativizadas: mejorar el programa para una nueva edición.

5