Evaluación de competencias a nivel del programa. José Rafael López Islas Tecnológico de Monterrey

Transcripción

1 Evaluación de competencias a nivel del programa José Rafael López Islas Tecnológico de Monterrey

2 Temas El contexto. El programa de evaluación de competencias de egreso. Las implicaciones. Los retos. Los aprendizajes y recomendaciones.

3 El contexto Coloque aquí el logo de su institución

4 Universidad privada, sin fines de lucro Fundada en 1943 por la sociedad civil Coloque aquí el logo de su institución 26 campus en México 55 mil alumnos en pregrado, y 12 mil en posgrado 7,300 profesores Acreditada por vez primera por SACSCOC en en el ranking mundial de QS, y 56 en opinión de empleadores Visión Formar líderes con espíritu emprendedor, sentido humano y competitivos internacionalmente

5 Innovación como característica central de la Institución. Rediseño del modelo educativo en Cambios en el contexto internacional, especialmente las agencias acreditadoras: De la medición de la capacidad institucional a la medición de los resultados de aprendizaje como base para evaluar la calidad de las instituciones educativas.

6 Fundamento teórico - metodológico

7 El concepto competencia en el ámbito de recursos humanos. La crítica a las universidades por enfocarse en las competencias disciplinares en vez de las generales (soft skills). El uso en educación del término competencias para definir perfiles de egreso, consistente con requerimientos de agencias acreditadoras. La educación basada en competencias como modelo disruptivo.

8 Conceptos clave

9 Competencia de egreso: combinación de atributos con respecto al conocimiento y su aplicación, a las actitudes y a las responsabilidades que hacen referencia a las capacidades que un estudiante debe haber desarrollado al momento de su graduación.

10 Criterios de desempeño: enunciados específicos medibles basados en comportamientos observables que evidencian el desarrollo de una competencia.

11 Modelo de implementación de cuatro etapas

12 Competencias de egreso Criterios de desempeño Definición Plan de Evaluación Cursos, actividades co-curriculares, programas de apoyo, recursos de aprendizaje Acciones educativas Directa Medición Valoración Indirecta Evaluación Decisión de mejora continua Cierre de ciclo

13

14 Etapa 1: Definir perfiles de egreso basados en competencias Se define perfil de egreso que incluye 6-8 competencias de egreso disciplinares y ocho generales. Cada competencia tiene definidos al menos dos criterios de desempeño. Las competencias de egreso son transversales al currículo. La malla curricular debe ser consistente con las competencias de egreso.

15

16 Ejemplo de Ingeniero Químico y de Sistemas: Competencia de egreso disciplinar: El alumno diseña equipos de procesos o procesos químicos completos para la producción de materiales o productos que satisfacen las demandas específicas del mercado. Criterios de desempeño: 1: El alumno resuelve problemas de diseño abierto (open ended design problems), de manera satisfactoria y de acuerdo a criterios previamente establecidos. (Rúbrica) 2: El alumno obtiene un dictamen igual o superior a "Satisfactorio" en la sección de "Diseño e Ingeniería de Sistemas" en el Examen Nacional de Egreso de Ingeniería Química. (Examen).

17 Etapa 2: Elaborar el plan de evaluación del programa académico El plan de evaluación es la guía para realizar la evaluación de las competencias de egreso del programa. Para cada criterio de desempeño de cada una de las competencias de egreso, se identifican: Método de medición Frecuencia de la medición Dónde medir (en qué curso) Forma de cumplimiento y metas Responsable(s)

18 Etapa 2: Elaborar el plan de evaluación del programa académico

19 Etapa 3: Llevar a cabo la evaluación de las competencias de egreso Asegurar que el plan de evaluación de cada programa se lleva a cabo adecuadamente. Se evalúa el programa académico y no al alumno o al profesor en lo individual, a través de evidencias del desarrollo de las competencias a nivel programa. No se requiere medir todo, ni todo el tiempo: La medición puede ser semestral, anual o bianual. La medición se realiza sobre una muestra aleatoria.

20 Etapa 3: Llevar a cabo la evaluación de las competencias de egreso Es una tarea adicional a la evaluación del curso pero puede hacerse sobre el producto de un curso (course embedded assessment ). También es posible realizarlo en un evento especial (assessment center /day ). En ambos casos, se trata de evaluación del desempeño (también llamada evaluación auténtica ).

21 Competencia de egreso Combinación de conocimientos, habilidades y actitudes que hacen referencia a las capacidades que un estudiante debe haber desarrollado al momento de su graduación Conocimientos Valores Competencia de egreso Habilidades Actitudes 2

22 Evaluación tradicional Conocimientos Habilidades Examen Quiz UQO Competencia de egreso Valores Actitudes 2

23 Evaluación del desempeño Conocimientos Habilidades La evaluación del desempeño implica que un estudiante enfrente un problema altamente significativo donde tiene que aplicar sus conocimientos y habilidades para resolverlo. Rúbricas Valores Competencia de egreso Actitudes 2

24 Elementos de una rúbrica Dimensiones Dimensiones Estructura del texto Presentación y organización de ideas Incipiente o Elemental El texto no muestra una estructura, únicamente presenta ideas aisladas, sin coherencia y que pueden estar relacionadas entre sí, pero se encuentran vagas y desconectadas. Escrito deficiente. Trata de escribir sobre el tema pero lo logra parcialmente. No hay enunciados claros de la idea principal y hay confusión en las ideas secundarias. Falla en la secuencia efectiva de ideas. Niveles de desempeño En desarrollo El texto muestra una estructura de introducción, desarrollo y conclusión pero puede estar incompleto en alguno de los tres elementos básicos. Escrito limitado con características de comunicación efectiva parcialmente dadas. El propósito no está totalmente claro y, aunque la idea principal está escrita, no hay evidencia de mantener el foco de la idea principal. Satisfactorio o Adecuado El texto muestra una clara evidencia de tener introducción, desarrollo y conclusión Escrito adecuado que comunica un mensaje completo a una audiencia específica. Aunque el propósito está claro, el desarrollo de ideas secundarias no se realiza en su totalidad. La organización de las ideas es evidente pero puede faltar especificidad, puede estar incompleto o no desarrollado en secuencia efectiva. Sobresaliente o Excelente El texto muestra una clara evidencia de tener introducción, desarrollo y conclusión, además presenta ideas congruentes y relacionadas entre sí, citando autores destacados relacionados con el tema. Descripción de los niveles de desempeño Escrito muy bien desarrollado que es efectivo al comunicar un mensaje completo a una audiencia específica. Bien organizado y mantiene el foco central con un propósito claramente expuesto con ideas secundarias. Niveles de desempeño Ortografía, sintaxis y puntuación El texto presenta severas deficiencias en el uso del lenguaje y/o en la estructura de las oraciones; por ejemplo: las ideas no son claras, el orden es incomprensible. El texto presenta más de 10 errores de ortografía y/o de puntuación. El texto demuestra algunas deficiencias en el uso de lenguaje y/o en la estructura de oraciones. El texto presenta entre 6 y 10 errores de ortografía y/o de puntuación. El texto demuestra evidencia del uso correcto de lenguaje. La estructura de oraciones es adecuada. El texto presenta de 1 a 5 errores de ortografía y/o de puntuación. El texto demuestra evidencia de un dominio total del uso correcto de lenguaje y de la estructura de sus oraciones. El texto no presenta ningún error de ortografía ni de puntuación.

25

26

27 Etapa 4: Identificar y llevar a cabo acciones de mejora Es una etapa clave pues implica la mejora continua de los programas. Las mejoras pueden referirse a cualquier aspecto del proceso: perfil, currículo, actividades de aprendizaje, infraestructura, recursos, evaluación.

28 Implicaciones

29 Se requiere encontrar nuevas formas de facilitar el aprendizaje No podemos desarrollar competencias de egreso complejas con modelos de enseñanza tradicionales. Debe haber mayor vinculación con el entorno. Debemos rediseñar el modo de enseñar/aprender. Por ejemplo: flipped learning (aprendizaje invertido).

30 Se requiere construir un currículo con un mayor nivel de integración La malla curricular debe contar con conexiones transversales. Es posible desarrollar un mayor sentido de apropiación del currículo por parte de todos los docentes. Se debe incorporar por diseño el desarrollo de competencias de egreso generales a lo largo del currículo.

31 Se requiere una forma sustancialmente diferente de evaluar el aprendizaje Evaluar competencias implica utilizar formas de evaluación no tradicionales. Dominar el uso de instrumentos tales como rúbricas toma tiempo y requiere de un sólido apoyo institucional.

32 Las responsabilidades de los profesores se transforman Los docentes deben desarrollar nuevas maneras de enseñar, de construir el currículo y de evaluar el aprendizaje. Se requiere replantear la estrategia de incentivos a los docentes.

33 Se necesita contar con un sólido apoyo informático El seguimiento a toda la actividad de evaluación de competencias de egreso es muy complejo. Se requiere de herramientas informáticas conectadas con los sistemas de información de alumnos y cursos. Tener un sistema propio (como el Sistema para Administrar la Evaluación de Programas, SAEP ) tiene ventajas pero implica costos. Es necesario evaluar opciones en el mercado.

34 Es necesario contar con liderazgo, capacidad de gestión y de manejo del cambio Mover al cambio requiere apoyo institucional al más alto nivel. El programa demanda el liderazgo y la gestión de una entidad central. Se requiere un plan para el manejo del cambio, incluyendo una estrategia efectiva de comunicación.

35 Es una oportunidad para alinear los esfuerzos institucionales con los requerimientos de acreditación Es posible evitar doble esfuerzo si se alinea el programa institucional con los requerimientos de agencias acreditadoras. Puede convertirse en un medio para asegurar la sostenibilidad del programa de evaluación de competencias.

36 Principales retos

37 Diseñar un modelo completo en su alcance pero sencillo en su aplicación y fácil de comunicar. Diseñar una estrategia efectiva de movilización al cambio. Asegurar la asignación de recursos y apoyo institucional. Cerrar ciclos de mejora. Mostrar resultados y avances de manera sistemática.

38 Recomendaciones

39 Empezar pronto, aunque no se haya resuelto el debate teórico-metodológico, y aprender sobre la marcha. Integrar la definición de perfiles de egreso basados en competencias a la estrategia regular de revisión curricular. En la etapa inicial construir un equipo con docentes innovadores, y darles el apoyo para correr riesgos. Construir una estrategia de comunicación que explique las razones (en sentido positivo y negativo) para iniciar un programa de evaluación de competencias de egreso.

40 Reflexión final La evaluación de competencias de egreso permite asegurar que la institución está cumpliendo con lo que promete en sus perfiles de egreso. La evaluación va asociada a la mejora continua. No olvidar que el perfil de egreso debe preparar para el primer empleo pero también para el último, el más importante. Esto implica dar seguimiento a nuestros graduados.

41 Muchas gracias! José Rafael López Islas