Reporte de Evaluación de Instancia de Componente de Curso

Transcripción

1 Reporte de Evaluación de Instancia de Componente de Curso 07 jun 2013 Prof. Adj. Roberto D. Cáceres Bauer, Departamento de Educación Médica, Facultad de Médicina, Universidad de la República. Avenida General Flores 2125, Montevideo, Uruguay. Tel.: , WWW: 1

2 1 INTRODUCCIÓN 2 BCC4 P Introducción El presente reporte tiene el propósito de aportar información que colabore en la evaluación de la instrucción y enseñanza, e informe la toma de decisiones que afectan el aprendizaje de los estudiantes. Está basado en la aplicación de un instrumento de medición de la efectividad en la enseñanza, diseñado para medir varias dimensiones de efectividad en relación a instancias de componentes de cursos. En 1.1 se definen los conceptos básicos; en 1.2 se describen las dimensiones generales de efectividad en la enseñanza y se explica la relación con las dimensiones evaluadas en el instrumento considerado en este reporte; en 1.3 se da una orientación general en la interpretación y argumentos en los que se basa el procedimiento de evaluación; y en 2 se presentan los resultados obtenidos Conceptos básicos Enseñanza La Enseñanza, en un sentido global y general, puede ser definida como el proceso de participar en interacciones con el estudiante diseñadas específicamente, que facilitan, promueven, y resultan en el aprendizaje de los estudiantes Instrucción La Instrucción puede ser definida como la entrega de experiencias diseñadas específicamente que, de ser realizada por el tipo de individuo para el cual se pretendía, tiene como consecuencia resultados de aprendizaje predecibles Evaluación La Evaluación es el proceso de colección sistemática e interpretación de datos de mediciones de valores específicos de constructos sobre: (1) el aprendizaje de los estudiantes; (2) las características de la instrucción y enseñanza. Sus propósitos son: (1) determinar el grado en el cual los datos representan una condición deseada;(2) informar las decisiones que afectan el aprendizaje de los estudiantes.

3 1 INTRODUCCIÓN Efectividad La efectividad en general es indicada por características de la instrucción y la enseñanza que incrementan el conocimiento de los estudiantes y facilitan el aprendizaje Dimensiones Generales de la Efectividad en la Enseñanza En relación a la efectividad en la Enseñanza en general se considera que existen 5 dimensiones generales sobre efectividad en la Enseñanza [1]: La Experticia en el Contenido es el cuerpo de habilidades, competencias, y conocimientos específicos, en el área o tópico específico a ser enseñado, en el cual el docente ha recibido educación avanzada, entrenamiento, y/o experiencia. Las Habilidades de Diseño Instruccional son aquellas habilidades técnicas en el diseño y secuenciación de experiencias que, cuando son realizadas por un estudiante calificado, resultan en una alta probabilidad que los resultados de aprendizaje específico sean alcanzados por el estudiante. Las Habilidades de Impartir Instrucción son habilidades de interacción humana y características que promueven o facilitan el aprendizaje, incluyendo la habilidad para motivar a los estudiantes, generar entusiasmo, y comunicación efectiva usando varias formas de tecnologías de transmisión de información. Las Habilidades de Evaluación Instruccional son aquellas habilidades en el desarrollo, procedimientos, y estrategias para la evaluación del aprendizaje de los estudiantes y provisión de una retroalimentación significativa para los estudiantes. Las Habilidades de Gestión de cursos son aquellas habilidades en configurar, mantener, y administrar recursos y instalaciones requeridas para proveer un ambiente apropiado para la enseñanza/aprendizaje. Marsh (1985) aportó evidencias, en base a un estudio realizado en una población de habla hispana, sobre la generalidad de una serie de factores de Efectividad en la Enseñanza [2]. Mostró que 2 instrumentos distintos diseñados para poblaciones anglosajonas, tienen esencialmente las mismas dimensiones. Una de las dimensiones encontradas está relacionada con Habilidades de Evaluación. Las demás dimensiones encontradas por Marsh están relacionadas con Habilidaes para Impartir Instrucción. El contenido del instrumento aplicado para realizar el presente reporte es similar al de los instrumentos investigados por Marsh.

4 2 RESULTADOS Orientación en la interpretación de los resultados Los resultados que se presentan en este informe son de carácter exploratorio y tienen el propósito de dar una retroalimentación que ayude a detectar posibles aspectos a mejorar. Los resultados que se presentan en las próximas secciones se basan en la comparación de la distribución global de los s dados por los estudiantes en cada uno de los items considerados, con la distribución para esta instancia de este componente del curso. Los resultados obtenidos se presentan en gráficos que contienen los siguientes elementos para cada item:(a) el enunciado del item; (b) la distribución global de los s del item, descripta con 5 percentiles; (c) la mediana del para el item en la instancia de componente de curso considerada; y (d) el nombre de la categoría de evaluación. La distribución global para cada item se describe con 5 percentiles (percentil 5 (P 5), percentil 25 o primer cuartil (), percentil 50 o mediana (), percentil 75 o tercer cuartil () y percentil 95 (P 95)). La distribución para esta instancia de componente del curso se describe con el mediano( ind ) dado por los estudiantes. Con fines descriptivos definimos las siguientes 7 categorías ordenadas:(a) una evaluación es considerada excelente si el mediano asignado al docente, ind, es igual o superior P 95; (b) muy buena si ind es igual a o su valor está entre y P 95; (c) buena si ind está entre y ; (d) regular si ind es igual a ;(e) levemente mala si ind está entre y ; (f) mala si ind es igual a o está entre y P 5; (g) muy mala si ind es igual a P 5 o menor. Si el item considerado tiene una relación negativa entre el y la dimensión de efectividad evaluada, las categorías definidas son análogas, pero en un orden inverso. Por ejemplo, la categoría muy mala corresponde al caso en que el mediano asignado al docente, ind, es igual o superior P Resultados 2.1. Valor, Aprendizaje y Logro del Estudiante Los items en esta sección están relacionados con la dimensión valor, aprendizaje y logro del estudiante. Para todos los items en esta sección un alto corresponde a un valor deseable de esta dimensión (Figura 1 ).

5 2 RESULTADOS 5 Me ayudó a desarrollar nuevas habilidades y/o potenciar otras adquiridas previamente Me ha ayudado a mejorar en mis capacidades de razonamiento Me ha preparado para poder estudiar a un nivel más avanzado los temas tratados Mi habilidad para resolver problemas ha mejorado gracias a este componente del curso He aprendido y entendido los temas abordados Mi interés en los temas abordados se ha incrementado gracias a este componente del curso Me permitió aprender algo que considero de valor Me resultó desafiante y estimulante ind. Figura 1: Valor, Aprendizaje y Logro del Estudiante 2.2. Interacción y Discusión Los items en esta sección están relacionados con la dimensión Interacción y Discusión. Esta dimensión tiene que ver primariamente con la relación del docente con el grupo y su capacidad para estimular la participación y discusión. Para todos los items en esta sección un alto corresponde a un valor deseable de esta dimensión (Figura 2 ).

6 2 RESULTADOS 6 El docente estimula el respeto y la tolerancia Se estimuló al estudiante a aplicar los conceptos tratados para mostrar su comprensión Se estimuló a los estudiantes a cuestionar al docente Los estudiantes fueron invitados a hacer preguntas y se dieron respuestas significativas ind. Los estudiantes son invitados a compartir sus ideas y conocimientos Los estudiantes son estimulados a participar de discusiones de clase Figura 2: Interacción y Discusión 2.3. Relación Personal Los items en esta sección están relacionados con la dimensión Relación Personal. Esta dimensión tiene que ver primariamente con la relación que establece el docente con cada estudiante. Para todos los items en esta sección un alto corresponde a un valor deseable de esta dimensión (Figura 3 ).

7 2 RESULTADOS 7 El docente escuchaba y estaba dispuesto a ayudar El docente se mostró preocupado por las dificultades de los alumnos El docente hizo sentir bienvenido a los estudiantes que buscaron ayuda ind. El docente respeta a los estudiantes como personas El docente fue amistoso con cada estudiante Figura 3: Relación Personal 2.4. Carga de Trabajo y Dificultad del Componente del Curso Los items en esta sección están relacionados con la dimensión Carga de Trabajo y Dificultad. Valores altos en los items de esta sección reflejan una excesiva dificultad y carga de trabajo, lo que tiene un efecto negativo en el aprendizaje de los estudiantes. Para todos los items en esta sección un alto corresponde a un exceso de dificultad y carga de trabajo, y por tanto a una menor efectividad en relación a esta dimensión (Figura 4 ).

8 2 RESULTADOS 8 La carga de trabajo fue muy grande En la mayoría de los problemas o preguntas tuve que hacer mucho esfuerzo y dedicar mucho tiempo para lograr... Me costó mucho trabajo y tiempo llegar a entender los conceptos tratados ind. Fue muy difícil El ritmo fue muy rápido Figura 4: Carga de Trabajo y Dificultad del Componente del Curso 2.5. Organización y Claridad en la Comunicación Los items en esta sección están relacionados con la dimensión Organización y claridad en la Comunicación. Una buena organización y planificación, y también objetivos claros y bien definidos, y bien aplicados en la implementación de la instrucción, enseñanza y evaluación, y la capacidad del docente para comunicarse con claridad, están relacionadas con una mayor efectividad. Para todos los items en esta sección un alto corresponde a un valor deseable de esta dimensión (Figura 5 ).

9 2 RESULTADOS 9 Se dio un programa detallado de este componente del curso Las actividades fueron programadas en forma ordenada Los objetivos de este componente del curso fueron establecidos y seguidos. El docente establece un plan de trabajo para la clase y lo sigue Los materiales o recursos que usa el docente en la comunicación fueron claros y bien preparados El docente sintetiza los conceptos o aspectos más importantes Identifica que es lo que considera importante El docente hizo un buen uso de ejemplos e ilustraciones Es preciso y claro al responder preguntas Las explicaciones del docente son claras ind. Figura 5: Organización y Claridad en la Comunicación 2.6. Entusiasmo y Estilo de Comunicación Los items en esta sección están relacionados con la dimensión Entusiasmo y Estilo de Comunicación. Para todos los items en esta sección un alto corresponde a un valor deseable de esta dimensión (Figura 6 ).

10 2 RESULTADOS 10 El docente me ayudó a apreciar más los temas tratados, al mostrarme su importancia para mi formación El docente mostró ejemplos de aplicaciones que aumentaron mi interés y apreció por algunos de los temas... El docente expresó admiración o pasión por el valor o utilidad de los temas abordados El estilo de comunicación mantiene mi entusiasmo durante la clase El docente parece tener confianza en sí mismo El docente varía la velocidad y tono de su voz El docente mejora la comunicación con el uso de humor El docente fue dinámico y enérgico El docente mostró entusiasmo al hacer su tarea ind. Figura 6: Entusiasmo y Estilo de Comunicación 2.7. Amplitud o Profundidad Los items en esta sección están relacionados con la dimensión Amplitud o Profundidad. Para todos los items en esta sección un alto corresponde a un valor deseable de esta dimensión (Figura 7 ).

11 2 RESULTADOS 11 El docente demuestra o ilustra cómo los conceptos y/o procedimientos tratados están relacionados y se... El docente da referencias bibliográficas que tratan puntos más interesantes o con más profundidad El docente muestra aplicaciones de los conceptos tratados El docente hace aportes en los que ilustra puntos de vista distintos a los propios, cuando esto es apropiado El docente hace aportes que ayudan a entender los fundamentos y origen de las ideas y conceptos que surgen... El docente hace aportes sobre los temas discutidos en clase, que toma en cuenta investigaciones o visiones... El docente contrasta diferentes puntos de vista respecto a un mismo problema o tema El docente discute las consecuencias de los conceptos tratados en la clase ind. Figura 7: Amplitud o Profundidad 2.8. Tareas Propuestas Los items en esta sección están relacionados con la dimensión Tareas Propuestas. Para todos los items en esta sección un alto corresponde a un valor deseable de esta dimensión (Figura 8 ).

12 2 RESULTADOS 12 Las tareas propuestas fueron valiosas Estuvieron planteadas de forma coherente con el resto de las actividades en este componente del curso ind. Las tareas asignadas me permitieron mejorar mi formación y habilidades Las tareas asignadas contribuyeron a mejorar mi compresión de los temas tratados Figura 8: Tareas Propuestas 2.9. Evaluación Los items en esta sección están relacionados con la dimensión Evaluación. En esta sección, hay 3 items con una escala negativa, un alto corresponde a una menor efectividad en esta dimensión: Las evaluaciones se concentraron en evaluar detalles ; El énfasis en memorizar para las pruebas debería ser reducido ; y La calificación que espero obtener es menor que la que espero obtener de acuerdo a lo que aprendí.... Para los demás items un alto corresponde a un valor deseable de esta dimensión (Figura 9 y 10 ).

13 2 RESULTADOS 13 Los temas abordados fueron cubiertos adecuadamente en las evaluaciones Las evaluaciones propuestas enfatizan aspectos importantes Las pruebas y trabajos calificados evalúan los contenidos del curso de acuerdo a los énfasis realizados durante... El docente hace devoluciones sobre trabajos y tareas asignadas con suficiente frecuencia y rapidez para... El docente hace devoluciones sobre el funcionamiento del grupo con suficiente frecuencia y rapidez El docente informa a los estudiantes acerca de sus progresos El docente hace devoluciones de las evaluaciones con suficiente frecuencia y rapidez para beneficiar mi... El docente aportó suficientes auto evaluaciones del aprendizaje a los estudiantes En este componente del curso se me ha aportado sugerencias específicas para mejorar mis puntos débiles El docente aportó críticas y comentarios muy valiosos a los trabajos hechos por los estudiantes Las devoluciones sobre pruebas o trabajos calificados fueron valiosas ind. Figura 9: Evaluación (parte 1) La calificación que espero obtener es menor que la que creo que debería obtener de acuerdo a lo que aprendí... Las calificaciones reflejan bien el éxito en el aprendizaje del estudiante La redacción de preguntas o problemas fueron claras y sin ambigüedad Las evaluaciones se concentraron en la capacidad para razonar Las evaluaciones se concentraron en recordar detalles ind. Las evaluaciones requirieron comprensión de los conceptos para poder obtener buenos resultados El énfasis en memorizar para las pruebas debería ser reducido Figura 10: Evaluación (parte 2)

14 REFERENCIAS Puntualidad y Asiduidad Los items en esta sección están relacionados con la Puntualidad y Asiduidad. En esta sección, hay 2 items con una escala negativa : Problemas con la puntualidad del docente han afectado el funcionamiento de este componente del curso ; y Problemas con la asiduidad del docente han afectado el funcionamiento de este componente del curso. Para todos los items en esta sección un alto corresponde a un valor deseable de Puntualidad y Asiduidad (Figura 11 ). Problemas con la puntualidad del docente han afectado el funcionamiento de este componente del curso El docente finaliza la sesión en el horario establecido o en el tiempo adecuado (sin dejar aspectos pendientes... Si es necesario, el docente llega con suficiente tiempo antes del comienzo de la clase para preparar los... El docente comienza puntualmente su trabajo con los estudiantes Problemas con la asiduidad del docente han afectado el funcionamiento de este componente del curso Siempre que el docente responsable no puede asistir, hay un docente que lo suplanta El docente faltó alguna vez pero fue substituido efectivamente por un docente suplente El docente faltó alguna vez pero avisó unos días antes que la clase se iba a suspender El docente nunca falta ind. Figura 11: Puntualidad y Asiduidad Referencias [1] Arreola (2007). Developing a Comprenhensive Faculty Evaluation System: A Guide to Designing, Building, and Operating Large-Scale Faculty Evaluation Systems. [2] Marsh y col (1985), Student s Evaluation of University Instructors: The Applicability of American Instruments a Spanish Settings. Teaching Teacher Education. Teaching Teacher Education, vol. 1, num. 2, pages