Cultura de Calidad y Evaluación en Conservatorios

Transcripción

1 Cultura de Calidad y Evaluación en Conservatorios Jornet y Sánchez-Delgado (Coords. Técnicos Proyecto) Grupo GEM-Educo Dpto. MIDE-Universitat de València España

2 Manuel Tomás Ludeña

3 Estructura del Proyecto Proyecto CCEVAL CPMD-CV Evaluación como empoderamiento institucional Micro Aula: Estudiantes PEMD-CV Meso Instituciones EVAL-CPMD-CV Macro Mapa de Indicadores Mapa-INDAMD-CV

4 Ponencia I: Hablaremos acerca de Avances en la Evaluación de competencias musicales en los CPMyDs de la CV. (Dra. Purificación Sánchez- Delgado) Ponencia II: Avances en el Macroanálisis de la calidad y relevancia de la formación musical en la CV. (Dr. Jesús M. Jornet Meliá)

5 Ponencia I: Avances en la Evaluación de competencias musicales en los CPMyDs de la CV. Dra. Purificación Sánchez-Delgado

6 Estructura del Proyecto Proyecto CCEVAL CPMD-CV Evaluación como empoderamiento institucional Micro Aula: Estudiantes PEMD-CV Meso Instituciones EVAL-CPMD-CV Macro Mapa de Indicadores Mapa-INDAMD-CV

7 Objetivos Diseñar un sistema de evaluación procesual de las competencias para todas las especialidades en los niveles terminales de los CPMyDs (4º y 6º). Portafolio incluye: Carpeta 1. Evaluación inicial y contrato de trabajo profesor/a-alumno/a. Carpeta 2. Evidencias de la implicación del alumno/a en el proceso de enseñanza. Carpeta 3. Evidencias internas de desempeño. Carpeta 4. Evidencias de desempeño en actividades públicas del CPMD. Carpeta 5. Participación en actividades extraescolares. Carpeta 6. Colección de evidencias de resultados de formación. Carpeta 7. Síntesis de evaluación y recomendaciones de mejora. Piano Canto Cuerda Viento Madera Viento Metal Percusión Análisis Lenguaje Danza Clásica Danza Contemporánea Danza Española

8 Proceso 1.- Diseño de rúbricas (estándares y criterios de evaluación) 2.- Validación Lógica (constructo mediante análisis de jueces) 3.- Validación Empírica (convergente mediante el uso de rúbricas)

9 Cómo se han desarrollado las Rúbricas? Claves de desarrollo en la competencia Deben ser observables y graduables Identificar criterios de Evaluación Establecer niveles de adquisición de la competencia Identificar el aspecto clave que permite diferenciar entre niveles Consensuar por equipo docente Analizar si la rúbrica ofrece una visión exhaustiva de la competencia Valorar la adecuación de niveles Integrar criterios y niveles

10 Rúbricas R1 Piano para 4º curso de Enseñanzas Elementales. Rúbrica R1 Piano-a para Técnica Instrumental aplicada a repertorio 4º EE CRITERIOS Escalas y su digitación AÚN NO COMPETENTE (1-4) No es capaz de realizar a manos separadas una escala siguiendo las notas con la digitación adecuada y hasta dos/tres alteraciones. COMPETENCIA BÁSICA (5-6) Es capaz de realizar una escala de ámbito de una octava a manos juntas, hasta dos/tres alteraciones. COMPETENCIA MEDIA (7-8) Es capaz de realizar una escala de más de dos octavas y hasta dos/tres alteraciones. COMPETENCIA AVANZADA (9-10) Es capaz de realizar una escala a lo largo de todo el teclado de extensión y hasta dos/tres alteraciones.

11 Validación Lógica FASE 1: Elaboración de los borradores de las rúbricas por especialidades 1.1 Rúbricas de desempeño de Viento Madera. 1.2 Rúbricas de desempeño de Análisis y de Viento Metal. 1.3 Rúbricas de desempeño de Piano. 1.4 Rúbricas de desempeño de Cuerda. 1.5 Rúbricas de desempeño de Percusión. 1.6 Rúbricas de desempeño de Canto. 1.6 Rúbricas de desempeño de Lenguaje Musical Rúbricas de desempeño de Danza Clásica Rúbricas de desempeño de Danza Contemporánea Rúbricas de desempeño de Danza Española. FASE 2: Validación de los borradores mediante encuestas. Encuestas diseño portafolio: 82 Encuestas rúbricas: 135 Total: 217

12 Validación Empírica Proceso: Grabación de dos interpretaciones de cada estudiante Atención: Necesidad de pactar repertorio (igualar condiciones) Valoración del profesorado según la rúbrica Remisión de la grabación a 2 colegas (volverán a valorar con la misma rúbrica) (Estrategia doble ciego) Condiciones: Confidencialidad: Identificación del estudiante (NO) Identificación del Docente Responsable (NO) Identificación de jueces (NO) (Ajustados a Ley de protección de datos) Consistencia: Acuerdo: consenso-intersubjetivo usando la rúbrica (Estadístico) Se valora la rúbrica, no a los docentes 12

13 Validación Empírica Viento madera: 7 profesores (12 grabaciones) Viento metal: 3 profesores (5 grabaciones) Piano: 4 profesores (12 grabaciones) Cuerda: 11 profesores (11 grabaciones) Percusión y Canto NO Lenguaje y Analisis NO Danza Clásica: 2 profesores (2 grabaciones) Danza Contemporánea: 6 profesores (8 grabaciones) Danza Española: 9 profesores (6 grabaciones)

14 Perspectivas para el desarrollo del PEMD-CV Fase Actuaciones 1 Acuerdo/Contrato con el equipo directivo. 2 Diseño de Rúbricas e instrumentos de recogida de información. 3 Integración en Guía de Portafolio (experimental). 4 Validación por especialistas (profesorado de los CPMD. 5 Definición de Condiciones de Validación Validación de Rúbricas Sensibilización en el centro. Conferencias a: profesorado, alumnado y/o familias 6 Aplicación experimental. 7 Recogida de información de aplicaciones. Análisis e interpretación de la información. 8 Información de usuarios acerca del Portafolio. 9 Ensayo piloto del Portafolio Procesual: curso 2014/15. Análisis de información. 10 Validación empírica del portafolio. 11 Revisión del diseño en función de resultados. 12 Distribución definitiva. Guía de Portafolio de evaluación (2015/16) 13 Seguimiento de implementación de mejoras. Evaluación del plan de mejora. 14

15 Implicaciones para la empleabilidad Disponer de unos estándares comunes que permitan establecer los niveles de desempeño de los egresados en cada especialidad igualando niveles entre CPMyD. Identificar los puntos fuertes y débiles en la formación por especialidades, permitiendo orientar planes de mejora (conexión con la evaluación institucional). Demostración de los niveles de calidad conseguidos por el alumnado en particular, como garantía para su acceso al nivel superior y/o al empleo.

16 Ponencia II: Avances en el Macroanálisis de la calidad y relevancia de la formación musical en la CV. Dr. Jesús M. Jornet Meliá

17 Estructura del Proyecto Proyecto CCEVAL CPMD-CV Evaluación como empoderamiento institucional Micro Aula: Estudiantes PEMD-CV Meso Instituciones EVAL-CPMD-CV Macro Mapa de Indicadores Mapa-INDAMD-CV

18 Diseño de un Modelo de Evaluación para los Conservatorios Profesionales de Música y de Danza de la Comunidad Valenciana. Eval-CPMD-CV 18

19 Objetivos La finalidad de la Evaluación Institucional es el diseño de un PLAN DE MEJORA INSTITUCIONAL, en el que estarán: 1. Identificadas las necesidades 2. Priorizadas las acciones de mejora 3. Identificados los responsables para la dinamización de la innovación 4. Establecido un calendario para el logro de metas

20 Autoevaluación Evaluación del Plan de Mejora (Interna/Externa) Validación Externa Marzo/Abril 2015 Implementación del Plan de Mejora Diseño de Plan de Mejora 20

21 Equipo Directivo Coord. Formación Profesorado Familias Alumnado PAS 1 Profesorado Externo (Otro Conservatorio) Profesional del ámbito Asesor Metodología 21

22 Formación de los CEI y CEE Presentación del Modelo de Evaluación Modos de recogida de información Remisión de datos de instrumentos estandarizados (encuestas) a MIDE+GV Devolución de resultados a centros Elaboración del Informe por parte del CEI Difusión (y recogida de alegaciones) Visita del CEE. Informe

23 Perspectivas para el desarrollo Modelo Fase Actuaciones 1 Diseño y validación lógica del Modelo de Evaluación Diseño y Validación de Instrumentos de Recogida de Información 2 Acuerdo/Contrato con el equipo directivo. 3 Formación del CEI. Eval-CPMD-CV 4 Recogida de información: documentación e instrumentos de medida. 5 Análisis de la Información. 6 Interpretación de información. Elaboración del Auto-informe (CEI). 7 Difusión de información en el centro. Plazo de alegaciones. 8 Incorporación de alegaciones (CEI). Informe de autoevaluación definitivo. 9 Visita CEE: elaboración de informe externo. 10 Integración de informes CEI/CEE. (Junio, 2015) 11 Plan de mejora (Equipo Directivo del CPM). 12 Difusión del Informe de evaluación institucional y de su plan de mejora (web CPM). 13 Seguimiento de implementación de mejoras. Evaluación del plan de mejora. (Anual) 23

24 Diseño de un Mapa de Indicadores acerca del impacto y relevancia de las Enseñanzas Musicales y de Danza en la Comunidad Valenciana. Mapa-INDAMD-CV 24

25 o Conservatorios Públicos: 16 o Centros Autorizados: 64 o Escuelas de Música: 274 o Estructuras sociales: Coros, Bandas de Música, Agrupaciones... Elemento clave de Estructuración y Cohesión Social 25

26 Objetivos Disponibilidad de información (web institucional): 1. Para la sociedad en general 2. Para la orientación política (cultural y educativa) 3. Para investigadores/as (realización de estudios) Panorama de la Educación Musical y de la Danza en la CV Informe periódico Organizado en torno a preguntas de evaluación Completado con estudios específicos realizados por investigadores independientes Visibilizar y dar difusión de la potencialidad de este tipo de formación como una característica diferencial de la Comunidad Valenciana que pueda impactar en sus posibilidades de desarrollo y la empleabilidad de los implicados 26

27 Características del Modelo Mapa-INDAMD-CV Qué debe representar? Informal Situación educativa: Escenarios Formal Sistema Educativo S O C I A L No- Formal Programas Socio-educativos Enfoque Político Instituciones Instituciones Aula Acciones Formativas Individual 27

28 Estructura del Mapa de Indicadores Mapa de Indicadores Sistema No- Formal Sistema Formal Agrupaciones Musicales Orfeones Otros... CPMD 28

29 Características del Modelo Mapa-INDAMD-CV Qué debe representar? Comité Central Mapa de Indicadores Informatizado accesible en la web de la GV Difunde Información Informe periódico: Panorama de la Educación Musical y de la Danza en la CV 29

30 Perspectivas para el Desarrollo del Mapa- INDAMD-CV Fase 1 Acuerdos de la Comisión Organizadora. Actuaciones 2 Análisis del concepto de impacto/relevancia a estudiar a partir del MI 3 Diseñar preguntas de evaluación a responder, clasificadas según el modelo CIPP 4 Diseño de indicadores para responder cada pregunta 5 Identificación de la fuente más adecuada (evaluabilidad, operatividad) Validación del Diseño del Mapa de Indicadores (Encuesta on-line) 6 Diseño de base de datos de integración de cada indicador 7 Recogida de información 8 Incorporación de Información en base de datos 9 Diseño web de acceso público al Mapa de Indicadores (Inicio 2015) 10 Elaboración del Informe: Panorama de la Educación Artística (Música y Danza) en la CV (Presentación final de curso 2014/15) 11 Difusión del informe 12 Estudios a partir de indicadores. Invitación a Investigadores/as. 13 Actualización de indicadores, según periodo estimado 30

31 Implicaciones para la empleabilidad Disponer de información unificada acerca de la red formal/no-formal de formación en Música y Danza en la CV (instituciones, formadores, estudiantes, ) Identificar la calidad de nuestras instituciones formales no/formales- en el desarrollo de las competencias implicadas (conexión con la evaluación institucional). Vínculos entre la oferta y la posible demanda de empleo. OFICINA QUE UTILICE ESTA INFORMACIÓN PARA EL FOMENTO, PROMOCIÓN Y SEGUIMIENTO DE LA EMPLEABILIDAD DE LOS EGRESADOS

32 "Dicen que soy héroe, yo débil, tímido, casi insignificante, si siendo como soy hice lo que hice, imagínense lo que pueden hacer todos ustedes juntos". Mahatma Gandhi

33 Muchas gracias por su atención 33