Evaluación Institucional y Modelos de Calidad. Sergio Garay. sgaray@fundacionchile.cl

Transcripción

1 Evaluación Institucional y Modelos de Calidad O. Sergio Garay sgaray@fundacionchile.cl

2 Modelo de Calidad Gestión Escolar Evaluación Institucional Definiciones Objetivos Tipos Criterios Funciones Audiencias Temas a Tratar Modelos de Calidad Evolución Histórica del Concepto Etapas de la Gestión Moderna Modelos de Excelencia Modelos para la Gestión Escolar Modelo de Calidad - Fundación Chile

3 Evaluación Institucional Primera Parte: Conceptos Fundamentales Definición Ralph Tyler (1950): Cronbach (1963) Stufflebeam (1963) Alkin (1969) El proceso de determinar hasta qué punto se están alcanzando realmente los objetivos educativos. Proporcionar información para la toma de decisiones. Scriven (1967) Stufflebeam (1974) Eisner (1979) House (1980) La valoración del mérito o la valía, o como una actividad que comprende tanto la descripción como el juicio crítico. Joiny Committee, 1981

4 Evaluación Institucional Primera Parte: Conceptos Fundamentales Definición Villa, Aurelio Recogida sistemática de información referente a la naturaleza y a la calidad de los objetos educativos. Proceso de análisis estructurado y reflexivo, que permite comprender la naturaleza del objeto de estudio y emitir juicios de valor sobre el mismo, proporcionando información para ayudar a mejorar y ajustar la acción educativa. Ruiz, José María

5 Evaluación Institucional Primera Parte: Conceptos Fundamentales Definición No confundir Evaluación y Medición Medición Evaluación Juicio de valor absoluto Es un momento estanco, no procesual Está subsumida en la evaluación Medición no implica evaluación Es sólo un medio para valorar Busca obtener datos Juicio de valor relativo Equivale a un proceder dinámico Subsume la medición, es más extensa Medir es una entre otras acciones de la evaluación Constituye la valoración misma Compara datos con unos resultados previstos

6 Evaluación Institucional Primera Parte: Conceptos Fundamentales Los Objetivos Hasta los 60 La La mayoría mayoría de de los los Instrumentos Instrumentos se se refiere refiere a evaluación evaluación de de aprendizajes aprendizajes de de alumnos. alumnos. 1965: Ley de Educación Elemental y Secundaria (Estados Unidos) Proyectos Educativos Programas Materiales Curriculares Instituciones Educativas

7 Evaluación Institucional Primera Parte: Conceptos Fundamentales Los Objetivos Estudios Actuales sobre el tema: Prácticamente todo puede ser objeto de evaluación No se puede restringir a: Alumnos Profesores Todo proyecto de evaluación debe identificar claramente su objeto Saber el tipo de información a recopilar Forma de analizarla Clarificar y resolver Reticencias de los afectados

8 Evaluación Institucional Primera Parte: Conceptos Fundamentales Tipos Por su finalidad o función Por su extensión Por los agentes Evaluadores Formativa Sumativa Global Parcial Interna Externa Autoevaluación Heteroevaluación Coevaluación Por su momento de aplicación Inicial Procesual Final

9 Evaluación Institucional Primera Parte: Conceptos Fundamentales Tipos Para saber qué tipo de Evaluación n Aplicar: Determinar el objeto y las dimensiones de este que se quiere evaluar Modelo C I P P Input P r o c e s o Producto Objetivos Diseño Proceso de implementación Resultados Valoración del mérito de sus objetivos Valoración de la Calidad de su programación Saber hasta qué punto se pone en práctica la programación Valía de los resultados del proyecto C o n t e x t o

10 Evaluación Institucional Primera Parte: Conceptos Fundamentales Tipos Definir el contexto institucional. Valorar necesidades e identificar oportunidades de satisfacerlas. Revisar si los objetivos institucionales guardan coherencia con las necesidades. De Entrada Del Contexto Identificar y valorar las capacidades del sistema, estrategias y programas alternativos. La planificación, procedimientos, presupuestos y programas. A partir del modelo anterior Stufflebeam y Shinkfield (1987) proponen: Evaluación Del Producto De Proceso Identificar o pronosticar, durante el proceso, los efectos de la planificación, dar información para las decisiones programadas. Describir y juzgar las actividades relevantes del procedimiento. Recopilar descripciones y juicios sobre los resultados, en relación con los objetivos y la información facilitada por el contexto, la entrada y el proceso, interpretando su valor y mérito.

11 Evaluación Institucional Primera Parte: Conceptos Fundamentales Criterios Objeto de Evaluación Recopilar información Elegir Criterios para valorar el mérito de la información T Y L E R Logro de objetivos Único criterio Eficacia

12 Evaluación Institucional Primera Parte: Conceptos Fundamentales Criterios Según qué criterios se debería juzgar las diversas dimensiones de un objeto de evaluación? Cómo juzgara la calidad global de un objeto de Evaluación, en este caso una institución educativa?

13 Evaluación Institucional Primera Parte: Conceptos Fundamentales Criterios Cuál es la Mejor Escuela?

14 Evaluación Institucional Primera Parte: Conceptos Fundamentales Funciones Funciones Para Qué? Vinculada a los tipos de Evaluación (3) Proactiva Formativa Sumativa -> Para la Toma de Decisiones Scriven 1967 Stufflebeam (1972) Retroactiva -> Delimitar Responsabilidades Otras Funciones Psicológica o Sociopolítica Para el Ejercicio de la autoridad Poder - Represiva - Punitiva

15 Evaluación Institucional Primera Parte: Conceptos Fundamentales Audiencias Se define como audiencia a los destinatarios para los cuales se recopila la información. Estos deberán tomar las decisiones pertinentes luego de ponderar adecuadamente esa información. Frente a las audiencias es importante considerar que: Es Es posible posible tener tener más más de de una una audiencia audiencia o cliente cliente La audiencias pueden tener necesidades diferentes Es necesario identificar las distintas audiencias y sus necesidades al inicio de la evaluación

16 Evaluación Institucional Segunda Parte: Aplicación a Centros Educativos Evaluación en Instituciones Educativas Definición Tipos de Evaluación para Centros Educativos Autoevaluación Evaluación Externa Evaluación Mixta Aspectos estratégicos a considerar Aspectos posibles de evaluar: 1. Entorno 2. Instalaciones y Recursos 3. Persona 4. Estructura organizativa y Dirección 5. Experiencias de Innovación 6. Funcionamiento interno 7. Relación con la comunidad 8. Resultados

17 La Evaluación de Instituciones Educativas Definición Proceso contextualizado y sistemático, diseñado intencional y técnicamente de recogida de información relevante, fiable y válida, para emitir juicios valorativos en función de unos criterios preestablecidos y tomar decisiones. Proceso Contextualizado Recogida de información relevante fiable y válida Sistemático Emitir juicios en función de criterios preestablecidos Diseñado -> intencional y técnicamente Tomar decisiones

18 Tipos de Evaluación para Centros Educativos Evaluación Interna o Autoevaluación: Es la que se realiza desde el propio centro, con su propio personal y por propia iniciativa. Tienen un carácter formativo, para la optimización institucional, con una mayor implicación del personal. Todos los modelos de gestión de calidad total se basan en un sistema de autoevaluación. Los modelos de aseguramiento de calidad (ISO) consideran la autoevaluación como la primera parte de la auditoria externa, como un requisito previo para obtener la certificación.

19 Tipos de Evaluación para Centros Educativos Evaluación Externa: Realizada por agentes externos, expertos, ajenos al centro. Su finalidad es variada y va desde el control y conocimiento general de una institución, pero también se le reconoce la capacidad de apuntar hacia el mejoramiento. Evaluación Mixta Heteroevaluación: Participa del doble sistema. Se realiza en el propio centro con participación del personal en la planificación y desarrollo. A partir de los resultados, un equipo externo se introduce en el centro con el informe inicial elaborado por un comité interno, para validar los resultados y/o manifestar las discrepancias.

20 Evaluación de Centros Educativos Aspectos estratégicos a considerar: a) Claridad en los objetivos b) Formar equipos con representación de la comunidad educativa. c) Compromiso de la Dirección con la mejora y el cambio

21 Tipos de Evaluación para Centros Educativos Aspectos posibles de evaluar 1. Entorno -Medio Familiar Laboral Sociocultural - Unidad del entorno integración del centro en el entorno. 2. Instalaciones y Recursos - Situación de: Edificio Equipamiento Presupuesto Servicios Recursos didácticos

22 Tipos de Evaluación para Centros Educativos Aspectos posibles de evaluar 3. Personal -Alumnado Profesorado Auxiliares Familias Equipo directivo Otros 4. Estructura Organizativa y Dirección -Proyecto Educativo Proyecto Curricular Organización del equipo directivo Coordinación didáctica-

23 Aspectos posibles de evaluar 5. Experiencias de innovación -Programas experimentales o pilotos innovaciones del centro Desarrollo de proyectos 6. Funcionamiento interno - Equipo Directivo Actividad administrativa y económica Consejos escolares Consejo de profesores UTP Orientación Actividades extraescolares Etc

24 Aspectos posibles de evaluar 7. Relación con la comunidad -Relaciones con las familias Centro de padres Autoridades municipales juntas de vecinos Autoridades educativas Etc -De aprendizaje: pruebas internas y externas /seguimiento de ex alumnos / satisfacción de usuarios / matrícula/ nivel de eficacia y eficiencia de todos los componentes descritos 8. Resultados

25 Modelos de Calidad Evolución Histórica del Concepto Etapas de la Gestión Moderna Modelos de Excelencia Modelos para la Gestión Escolar

26 Evolución histórica del concepto de Calidad Etapa Artesanal Revolución Industrial Segunda Guerra Mundial Postguerra (japón) Concepto Hacer las cosas bien, independientemente del costo o esfuerzo necesario para ello. Hacer muchas cosas no importando que sean de calidad (Se identifica Producción con Calidad) Asegurar la eficacia del armamento sin importar el costo, con la mayor y más rápida producción (Eficacia + Plazo= Calidad). Hacer las cosas bien y a la primera. Finalidad 1.- Satisfacer al cliente 2.- Satisfacer al artesano, por el trabajo bien hecho. 3.- Crear un producto único. 1.- Satisfacer una gran demanda de bienes. 2.- Obtener beneficios. Garantizar la disponibilidad de un armamento eficaz en la cantidad y el momento preciso. 1.- Minimizar costos mediante la calidad. 2.- Satisfacer al cliente. 3.- Ser competitivo.

27 Evolución histórica del concepto de Calidad Etapa Postguerra (resto del mundo) Control de Calidad Concepto Producir, cuanto más mejor Técnicas de inspección en Producción, para evitar la salida de bienes defectuosos Finalidad Satisfacer la gran demanda de bienes creada por la guerra. Satisfacer las necesidades técnicas del producto. Aseguramiento de Calidad Sistemas y procedimientos de la organización para evitar que se produzcan bienes defectuosos 1.- Satisfacer al cliente. 2.- Prevenir errores. 3.- Reducir costos. 4.- Ser competitivo.

28 Evolución histórica del concepto de Calidad Etapa Calidad Total Modelos de Excelencia Concepto Teoría de la Administración empresarial centrada en la permanentre satisfacción de las expectativas del cliente No sólo gestionar la calidad, sono desarrollar la calidad de la gestión Finalidad 1.- Satisfacer tanto al cliente externo como interno. 2.- Ser altamente competitivo. 3.- Mejora Continua. Asegurar la sustentabilidad de la organización en el tiempo, a través de la satisfacción de todos los involucrados, o partes interesadas en su éxito: accionistas, dueños o mandantes, trabajadores, proveedores, clientes y comunidad.

29 Etapas de la gestión moderna Escenarios - Efectos

30 Historia de la gestión de calidad Etapas en la gestión de procesos moderna FECHAS 20's 30's a 40 s 50's a 60 s 70's a 80's 90's ETAPA Inspección (Control de Calidad) Control Estadístico Aseguramiento de la Calidad Calidad de Diseño (Prevención) Calidad Total Modelos de Excelencia 30

31 Historia de la gestión de calidad Etapas en la gestión de procesos moderna FECHAS 20's 30's a 40 s 50's a 60 s 70's a 80's 90's ETAPA Inspección (Control de Calidad) Control Estadístico Aseguramiento de la Calidad Calidad Total Modelos de Excelencia

32 Historia de la gestión de calidad Calidad Total CALIDAD TOTAL ASEGURAMIENTO DE LA CALIDAD CONTROL CALIDAD DE PROCESOS (Control estadístico) ISO 9000 SEIS SIGMA CONTROL CALIDAD DE PRODUCTOS (inspección y prueba) Poder de los clientes en el mundo desarrollado MUY BAJO BAJO MEDIO ALTO

33 Los Modelos de Excelencia

34 Modelo de Calidad de Malcom Baldrige Información y Análisis (7%) Liderazgo de Directivos (10%) Planificación (6%) Recursos Humanos (15%) Resultados (18%) Satisfacción del Cliente (30%) Garantía de Calidad (14%) Impulso Sistema Medida de Progreso Meta

35 Modelo de Calidad Deming o Japonés Gestión Estandarización (10%) (10%) Política General Educación (10%) Control (10%) Resultados (10%) (10%) Recogida de Información (10%) Garantía de Calidad (10%) Análisis Planificación (10%) (10%)

36 Modelo Europeo de Excelencia Agentes Resultados Personas (7%) (7%) Resultados Resultados en en personal personal (11 (11 %) %) Liderazgo (12%) (12%) Planificación Planificación y y Estrategia Estrategia (10%) (10%) Procesos (14 (14%) %) Resultados Resultados en en usuarios usuarios (15%) (15%) Resultados Clave Clave (14%) (14%) Colaboración Colaboración Y Recursos Recursos (7%) (7%) Resultados Resultados en en entorno entorno (10 (10 %) %) Innovación y Aprendizaje

37 ISO Gestión de Recursos Responsabilidad de la Dirección Medición, Análisis, Mejora Realización del Producto MEJORA CONTINUA C L I E N T E C L I E N T E R e q u i s i t o s S a t i s f a c c i ó n Producto Entrada Salida

38 Historia de la gestión de calidad Evolución natural de la gestión de calidad CALIDAD TOTAL ASEGURAMIENTO DE LA CALIDAD MODELOS EXCELENCIA ISO 9000 CONTROL CALIDAD DE PROCESOS (Control estadístico) CONTROL CALIDAD DE PRODUCTOS (inspección y prueba)

39 Modelos de Gestión Escolar de Calidad.

40 Modelo Sistema de Aseguramiento de Calidad- Mineduc 1. Liderazgo Visión Estratégica y Planificación Conducción Alianzas externas Información y Análisis 3.- Convivencia y apoyo a los estudiantes Convivencia escolar Formación personal y apoyo a los estudiantes 2. Procesos Pedagógicos Organización curricular Planificación Didáctica Acción docente en el aula Seguimiento a implementación curricular 4. Personas y Recursos Recursos Humanos Recursos Financieros, materiales y tecnológicos Procesos de soporte 5. Resultados Logros de Aprendizaje Logros Institucionales Satisfacción de la Comunidad escolar

41 Modelo de Calidad para Gestión Escolar Fundación Chile

42 Modelo Gestión Escolar de Calidad Desarrollado como Proyecto FONDEF Pontificia Universidad Católica de Chile Por qué la Gestión? La realización del FONDEF supuso fundamentar el tema de la Gestión, cuyo documento básico, Estado del Arte de la Gestión Escolar ha sido ampliamente difundido. Patrocinios:

43 1.-Orientación hacia los alumnos, sus familias y la comunidad Se refiere a la forma en que el establecimiento conoce a los usuarios. 3. Gestión de las Competencias Profesionales Docentes Manejo de los Recursos Humanos de la Institución y sus procesos asociados. Comunidad Alumnos Padres 12 % Competencias Profesionales 12 % Liderazgo Directivo 12 % Proceso de la la gestión de calidad Planificación 18 % Visión y estrategia Proyecto educativo Plan Anual Sistema de evaluación y seguimiento 5. Gestión Docentes de Procesos Aborda el desarrollo sistemático de los procesos institucionales en el ámbito curricular pedagógico, administrativo y financiero. Diagnóstico Cuáles son las áreas clave del Modelo de Gestión de Calidad? Planificación 2. Liderazgo Directivo Aborda la forma en que las autoridades del establecimiento lo conducen y orientan. Gestión del Proceso 22 % Curricular Administrativo y financiero -Seguimiento y -Monitoreo 4.Planificación Se refiere a los procedimientos sistemáticamente utilizados para abordar los procesos de planificación institucional (PEI, Plan Anual y Plan estratégico). Resultados 24 % Evaluación 6.Gestión de Resultados Analiza los resultados que genera la Implementación institución en todas las áreas de sugestión. Lo más importante, obviamente son los logros de aprendizaje de los alumnos.

44 Comp etenci as Profe sional es Lider azgo Direc tivo 12 % Diagnóstico Diagnóstico Alu mn os Pad res Co mu nida d 12 % Planifica ción 18 % Visión y estrategi a Proyecto educativ o Plan Anual Sistema de evaluaci ón y seguimie nto Gestió n del Proce so 22 % Curric ular Admin istrati vo y financ iero -Segui miento y -Monit oreo Evaluación Evaluación Resultados 24 % En qué ámbitos se aplica el Modelo de Gestión Escolar de Calidad? El mejoramiento de la calidad de nuestro sistema educativo, implica trabajar en distintos niveles, especialmente en aquellos en donde de prevé un mayor impacto. El modelo para una Gestión Escolar de Calidad se ha implementado a través de diversos programas, acciones y recursos: asesorías a Instituciones, instrumentos para autoevaluación institucional, programa de responsabilidad social para empresas, etc. Proceso de la gestión de calidad Proceso de la gestión de calidad 12 % Do ce nt es Planificació n Planificació n Implementa ción Implementa ción Responsabilidad Social Empresarial

45 Modelo para una Gestión Escolar de Calidad Responde a una exigencia de equidad social Enfatiza Instalación de Sistemas y Procesos Fomenta autoevaluación institucional y participación Promueve la evaluación externa y los registros como una herramienta de mejoramiento de la gestión Destaca la responsabilización por los resultados Certifica en base a estándares conocidos Busca empoderar y prestigiar la labor del establecimiento y sus equipos profesionales

46 Cuáles son las áreas clave del Modelo de Gestión de Calidad? 1.-Orientación hacia los alumnos, sus familias y la comunidad (9 Descriptores) 1.1. El establecimiento utiliza procedimientos sistemáticos para conocer a los padres y apoderados El establecimiento utiliza la información de los padres y apoderados en la planificación institucional Se dispone de sistemas y procedimientos que permiten conocer el grado de satisfacción de los padres y apoderados El establecimiento dispone de políticas y mecanismos para la participación de los padres y apoderados El establecimiento utiliza sistemáticamente procedimientos para conocer a los alumnos El establecimiento utiliza la información que recopila de sus alumnos en la planificación institucional Se dispone de sistemas y procedimientos que permiten conocer el grado de satisfacción de los alumnos respecto de la institución El establecimiento dispone de políticas y mecanismos para la participación de los alumnos Existen políticas y procedimientos sistemáticos utilizados por la institución para conocer las necesidades de la comunidad (externa) y generar espacios de contacto y/o trabajo con ésta.

47 Cuáles son las áreas clave del Modelo de Gestión de Calidad? 2. Liderazgo Directivo (15 Descriptores) 2.1 La Dirección estimula, compromete y moviliza a los miembros de la institución, con un foco centrado en lo pedagógico y altas expectativas para el logro de metas y resultados La Dirección promueve una cultura con una visión compartida, claridad de propósitos y cooperación docente La Dirección promueve una cultura basada en la retroalimentación formativa, el aprovechamiento del tiempo y el uso de incentivos La Dirección diseña el plan anual de la organización escolar, en concordancia con el PEI en sus ámbitos administrativo, pedagógico y financiero.

48 Cuáles son las áreas clave del Modelo de Gestión de Calidad? 3. Gestión de las Competencias Profesionales Docentes (10 Descriptores) 3.1. El establecimiento dispone de un perfil de competencias docentes por ciclos, subsectores y/o especialidad, según corresponda, orientado al logro de aprendizajes y alineado con el PEI. 3.2 En el establecimiento se utilizan los perfiles de competencia para la contratación e inducción de los docentes, de acuerdo a los requerimientos del Proyecto Educativo Institucional Los programas de capacitación y formación profesional, se diseñan y ejecutan en base a la existencia de procedimientos, que consideran el diagnóstico de las necesidades y las competencias a desarrollar por los docentes, en función de los objetivos y planes del establecimiento Existen sistemas de seguimiento y evaluación del personal docente, en función del perfil de competencias definido por la institución. 3.5 Existen y son conocidos sistemas de incentivos al desempeño de los docentes, asociados al logro de metas, a las buenas prácticas docentes, a los resultados escolares y/o a la innovación curricular.

49 Cuáles son las áreas clave del Modelo de Gestión de Calidad? 4.Planificación (11 descriptores) 4.1. Existe un PEI que contiene explícitamente las definiciones fundamentales de la organización que sirve de orientación y principio articulador de la gestión institucional y es coherente con la normativa oficial Existen procedimientos para comunicar, socializar y lograr adhesión e identificación de los integrantes de la comunidad educativa con el PEI del establecimiento Existen sistemas y procedimientos institucionalizados para formular los objetivos estratégicos y metas institucionales en los tres ámbitos de la gestión institucional: pedagógico, administrativo y financiero Existen sistemas y procedimientos institucionalizados para la revisión y actualización periódica del PEI y los Objetivos Estratégicos.

50 Cuáles son las áreas clave del Modelo de Gestión de Calidad? 6.Gestión de Resultados (12 descriptores) 6.1. Se utilizan sistemas de análisis y evaluación de las metas incluidas en el Plan Anual, que son consideradas en la toma de decisiones para el mejoramiento institucional Se utilizan sistemas de información y análisis de resultados (en el año en curso e históricos) respecto del nivel de logro de los alumnos en relación, a los aprendizajes esperados, por nivel, ciclo, subsector y/o especialidad y se considera para la toma de decisiones para el mejoramiento institucional Se utilizan sistemas de análisis de los resultados académicos obtenidos en el año en relación, a los resultados de años anteriores y en referencia a los establecimientos similares para efectos de ser considerados en el proceso de toma de decisiones para el mejoramiento institucional. 6.4.Existen procedimientos sistemáticos para evaluar el grado de coherencia entre los programas de estudio existentes las metas planteadas y los resultados obtenidos.

51