Assessment de Resultados del Estudiante como parte integral de la mejora continua 03 de Abril de 2013

Transcripción

1 1 Assessment de Resultados del Estudiante como parte integral de la mejora continua 03 de Abril de 2013

2 2 Generalidades

3 Visión y Misión de ICACIT

4 4 Visión de ICACIT Ser la entidad acreditadora de programas de CIT en el Perú. Ser signatario de los acuerdos de movilidad profesional en CIT. Ser referente en Latinoamérica y El Caribe en temas de acreditación.

5 5 Misión de ICACIT Promover la cultura de la mejora continua a través del autoestudio y el entendimiento del modelo de acreditación basado en resultados para asegurar la calidad educativa de los programas de CTI en el Perú.

6 Comités Técnicos de 6 Acreditación de ICACIT Comité Técnico de Acreditación en COMPUTACIÓN Comité Técnico de Acreditación en INGENIERÍA programas acreditados 3 instituciones 15 programas acreditados 5 instituciones Comité Técnico de Acreditación en TECNOLOGÍA EN INGENIERÍA 8 programas acreditados 2 instituciones

7 7 Cooperación ICACIT - ABET

8 8 Acuerdos entre ICACIT y ABET Memoranda of Understanding (MOU) 2003: Para la cooperación mutua en el aseguramiento de la calidad de la educación en computación, ingeniería, y tecnología. Adenda al MOU 2008: Establece las políticas para la asistencia mutua en la evaluación y acreditación de programas en el Perú. Además establece 2 tipos de acreditación.

9 9 La Acreditación

10 10 La Acreditación La acreditación es un proceso por el cual un programa realiza un Autoestudio para demostrar que satisface determinados criterios o estándares de calidad.

11 11 Modelo de Acreditación Basado en Resultados

12 12 Modelo Basado en Resultados Antes del EC2000: Se usaban criterios prescriptivos de ~30 páginas para acreditar programas (Sílabos de cursos, número de grados académicos del cuerpo de profesores, áreas de salas de clase y oficinas, cantidad de dinero gastado en equipos/instrumentos de laboratorio, etc.)

13 13 Modelo Basado en Resultados A partir de 2001 (EC2000): Los criterios requieren que, el programa mida algo más relevante: lo que sus graduados saben y son capaces de hacer (conocimientos, habilidades y comportamientos). El actual modelo promueve la innovación en la educación superior.

14 14 Los Criterios de Acreditación

15 15 Definiciones (1) Objetivos Educacionales del Programa (OEP): Son declaraciones generales que describen lo que se espera que los graduados alcancen algunos años después de la graduación. Los objetivos educacionales están basados en las necesidades de los constituyentes del programa.

16 16 Definiciones (2) Resultados del Estudiante (RE): Describen lo que el estudiante debe saber y ser capaz de hacer al momento de la graduación. Estos se relacionan con las habilidades, conocimiento y comportamientos que los estudiantes adquieren a lo largo de su progreso en el programa.

17 17 Objetivos y Resultados Declaración de la Misión Objetivos Educacionales Resultados del Estudiante

18 18 Criterios de Acreditación Generales (idénticos para todos los programas) Criterios del 1 al 8 Programa (específicos para cada programa) Criterio 9

19 19 Criterios de Acreditación 1. Estudiantes 2. Objetivos Educacionales del Programa 3. Resultados del Estudiante 4. Mejora Continua 5. Plan de Estudios 6. Cuerpo de Profesores 7. Instalaciones 8. Apoyo Institucional 9. Criterios del Programa

20 20 Assessment y Evaluación de Resultados del Estudiante

21 21 Definiciones (1) Resultados del Estudiante (RE): Son declaraciones breves que describen lo que el estudiante debe saber y ser capaz de hacer al momento de la graduación. Estos se relacionan con las habilidades, conocimiento y comportamientos que los estudiantes adquieren a lo largo de su progreso en el programa.

22 22 Definiciones (2) Assessment (1): Consiste en uno o más procesos en los que se identifica, recopila y prepara información para evaluar el logro de los resultados del estudiante y los objetivos educacionales del programa. ( )

23 23 Definiciones (3) Assessment (2): ( ) Un assessment efectivo utiliza medidas directas, indirectas, cualitativas y cuantitativas según el objetivo o resultado que se está midiendo. Métodos apropiados de muestreo pueden ser usados como parte de un proceso de assessment.

24 24 Definiciones (4) Evaluación: Consiste en uno o más procesos destinados a interpretar la información y las evidencias acumulados mediante los procesos de assessment. La evaluación determina la medida en que los resultados del estudiante y los objetivos educacionales están siendo logrados. La evaluación da lugar a decisiones y acciones para mejorar el programa.

25 Assessment y Evaluación 25 Identificación de datos Interpretación Recolección Decisiones Organización Acciones Información Mejora

26 26 Qué dice el Criterio 3? El programa debe tener REs documentados que preparen a los graduados para el logro de sus OEPs. Los REs son de la (a) a la (?) además de todo resultado adicional que pueda ser articulado por el programa. (a) (k) para ingeniería, tecnología en ingeniería (a) (i) para computación

27 27 Qué dice el Criterio 4? El programa debe usar regularmente procesos documentados y apropiados en el assessment y evaluación de la medida en que los REs están siendo alcanzados. Los resultados de estas evaluaciones deben ser utilizados sistemáticamente como contribución para la mejora continua del programa. Otra información disponible puede también usarse para ayudar en la mejora continua del programa.

28 28 Criterio 4: Importante Este criterio se aplica en un sentido holístico. El proceso de assessment y evaluación necesita demostrar el grado en que los REs están siendo logrados, pero no hay nada que indique: Todos los REs deben lograrse en el mismo grado. Nada sobre la escala numérica usada en la medición de logro.

29 29 Criterio 4: Casos frecuentes (1) El programa ha estado implementando cambios, pero ninguno está relacionado a los resultados de los procesos de assessment de PEOs y REs. Un programa ha re-escrito los REs y los está midiendo, pero su lista no incluye todos los Res del Criterio 3.

30 30 Criterio 4: Casos frecuentes (2) Cuándo sabemos que la información es apropiada para el assessment? Todo tiene que ser medición directa? (NO) Puede usarse información subjetiva? (Si, algunas veces. Pero la evaluación no debería basarse solo en información subjetiva) Las evidencias sobre cada RE tienen que ser necesariamente muestras de trabajos producidos por los estudiantes? (No, pero el equipo necesita estar convencido de que el nivel de logro de los REs ha sido determinado)

31 Assessment a Nivel de Programa (1) 31 Propósito: Recopilar información a través del plan de estudios básico y de los constituyentes externos con el objetivo final de evaluar el logro de los RE y OEP. Objetivos Educacionales del Programa Resultados del Estudiante Indicadores de Desempeño

32 Assessment a Nivel de Programa (2) 32 No puede abarcar todos los tópicos relacionados a una materia. No puede abarcar todas las habilidades relacionadas a cada tópico. Toma de decisiones basada en el contexto del curso y las características de los estudiantes. El desempeño se mide a nivel de habilidades.

33 Mejora Continua del Programa Objetivos Educacionales del Programa Misión 33 Gloria Rogers ABET, Inc. Medir/ evaluar Resultados del Estudiante Indicadores de Desempeño Constituyentes Feedback para la mejora continua Prácticas y estrategias educativas Evaluación: Interpretación de la evidencia Assessment: Recopilación, y organización de evidencias

34 34 Objetivo Educacional del Programa Nuestros graduados trabajarán exitosamente como miembros de un equipo profesional para abordar problemas del mundo real. Resultados del Estudiante Los estudiantes demostrarán: * La capacidad de identificar, formular y resolver problemas complejos. * La capacidad de desenvolverse eficazmente en un equipo. Indicadores de Desempeño

35 35 Objetivo Educacional del Programa Nuestros graduados trabajarán exitosamente como miembros de un equipo profesional para abordar problemas del mundo real. Resultados del Estudiante Los estudiantes demostrarán: * La capacidad de desenvolverse eficazmente en un equipo. Indicadores de Desempeño * Recopilar información * Cumplir con los deberes de su rol en el equipo * Compartir el trabajo del equipo * Escuchar a otros miembros del equipo

36 36 Indicadores de Desempeño Articulan las características claves de un Resultado del Estudiante. Permiten a los profesores reconocer un resultado a simple vista.

37 Atributos de los Indicadores de Desempeño Referencia de Contenido: Contenido de la asignatura donde se enfoca la instrucción (pasos para el proceso de diseño, reacción química, método científico, etc.) 2. Verbo de Acción: Indica el desempeño específico ( enumerar, analizar, aplicar, etc.) 3. Términos de Valor: Vienen después con una escala y descriptores en la forma de rúbricas (eficazmente, precisamente, completamente, etc.)

38 38 Indicadores de Desempeño Resultado: Los estudiantes demostrarán la capacidad para identificar, formular y resolver problemas de computación. Indicadores de Desempeño: Los estudiantes son capaces de Identificar variables clave. Reconocer la necesidad de múltiples soluciones. Analizar alternativas de solución para un problema de computación. Justificar una solución para un problema de computación.

39 39 Indicadores de Desempeño Resultado: Los estudiantes tendrán la capacidad de conducir un experimento e interpretar datos. Indicadores de Desempeño: Los estudiantes son capaces de Seguir el plan de diseño del experimento. Obtener datos sobre variables apropiadas. Comparar datos y resultados experimentales con modelos teóricos apropiados. Explicar las diferencias observadas entre el modelo y el experimento.

40 40 Objetivo Educacional del Programa Nuestros graduados trabajarán exitosamente como miembros de un equipo profesional para abordar problemas del mundo real. Resultados del Estudiante Los estudiantes demostrarán: * La capacidad de desenvolverse eficazmente en un equipo. Indicadores de Desempeño * Recopilar información * Cumplir con los deberes de su rol en el equipo * Compartir el trabajo del equipo * Escuchar a otros miembros del equipo

41 41

42 42

43 43 Métodos de Assessment Siempre habrá más de una forma de medir un resultado del estudiante. Ningún método es bueno para medir una gran variedad de diferentes habilidades de los estudiantes. Es fundamental hacer una prueba piloto para ver si un método es apropiado para un determinado resultado y para su programa.

44 44 Recordemos que: Todos los métodos de assessment tiene ventajas y desventajas. Un método ideal es aquel que mejor se ajusta a las necesidades del programa, la validación satisfactoria y costo asequible. Mejores prácticas: Es crucial utilizar un enfoque de múltiples métodos y fuentes para maximizar la validez y reducir el sesgo de cualquier enfoque.

45 45 Rúbrica Resultado: La capacidad de desenvolverse eficazmente en un equipo Nivel de Desempeño A Nivel de Desempeño B Nivel de Desempeño C Nivel de Desempeño D Indicador de Desempeño 1 Indicador de Desempeño 2 Indicador de Desempeño 3 Descriptor 1a Descriptor 1b Descriptor 1c Descriptor 1d Descriptor 2a Descriptor 2b Descriptor 2c Descriptor 2d Descriptor 3a Descriptor 3b Descriptor 3c Descriptor 3d

46 46

47 47 Resultado del Estudiante Q: La capacidad de diseñar un sistema, componente o proceso para satisfacer las necesidades deseadas considerando restricciones realistas tales como económicas, ambientales, sociales, políticas, éticas, sanitarias y de seguridad, fabricación y sostenibilidad. Indicadores de Desempeño Cursos Métodos Assessment Cursos para la recolección de datos Duración del ciclo de assessment Año (s) / semestre de recolección de datos Objetivo por rendimiento 1. Producir una clara declaración de las necesidades en un proyecto de diseño. 1010, 1015, 1011, 2020, 2040, 2060, 3010, 3013, 3050, 4090, 4092 Rúbricas de un proyecto de diseño Encuestas superiores 4090 (Ing Dis II) Encuesta en línea 3 años 2005, % 2. Identificar las restricciones sobre el proyecto de diseño y establecer criterios para la viabilidad y conveniencia de las soluciones. 1010, 1015, 1011, 2020, 2040, 2060, 3010, 3013, 3050, 4090, 4092 Rúbricas de un proyecto de diseño Encuestas superiores 4090 (Ing Dis II) Encuesta en línea 3 años 2005, % 3. Proponer la solución más económica / deseable y justificar el enfoque. 1010, 1015, 1011, 2020, 2040, 2060, 3010, 3013, 3050, 4090, 4092 Rúbricas de un proyecto de diseño Encuestas superiores 4090 (Ing Dis II) Encuesta en línea 3 años 2005, %

48 48 Resumen: Tener claro el objetivo del uso de una determinada rúbrica. Las rúbricas no son requeridas para los resultados, pero representan una buena práctica de medición directa de resultados. Las rúbricas pueden guiar al cuerpo de profesores en el proceso de assessment y ayudar a identificar fortalezas y debilidades en el desempeño de los estudiantes relacionadas a indicadores de desempeño específicos.

49 49 Preguntas?

50 50 Gracias por su atención