Análisis Factorial Exploratorio de las respuestas al cuestionario

Transcripción

1 Evaluación del Desempeño Docente 31 Análisis Factorial Exploratorio de las respuestas al cuestionario La solución factorial producida por el método de Análisis de Componentes Principales resultó conformada por seis factores con valor propio superior a la unidad, que explican el 55.9% de la varianza total. Los dos primeros factores explican el 35.4% y el 5.6% de la varianza inicial. Después de la extracción, ambos factores explican el 10.9 y el 10.1 de la varianza, respectivamente. La Tabla 14 resume la extracción producida por el método de Análisis de Componentes Principales del SPSS (8.0), se incluyen sólo los componentes con valor propio mayor que uno. Tabla 14. Resultantes del Análisis de Componentes Principales del Cuestionario para Evaluar el Desempeño Docente Frente a Grupo Componente Valor propio % varianza % varianza % de inicial después de la varianza extracción acumulado El primer factor de la matriz inicial de componentes agrupa 32 de los 35 reactivos del cuestionario; en esta matriz, los pesos factoriales varían entre.768, del reactivo 34, y.460, del reactivo 3. Al realizar un procedimiento de rotación

2 Evaluación del Desempeño Docente 32 Equamax, con normalización de Kaiser, se observa que aparece una solución más fácilmente interpretable. En ella, siete reactivos con pesos factoriales superiores a.40 -valor definido en este estudio como criterio de relevancia para retener el reactivo para el factor- conforman un primer factor que parece estar relacionado con el enfoque u orientación del curso por parte del profesor. Cinco de estos siete reactivos pertenecen a la escala Enfoque a la Profesión (EP) del cuestionario, uno a la escala de Dominio de la materia (Dom) y uno de la escala de Motivación al alumno y estilo interpersonal (MEI). La Tabla 15 muestra esta configuración de reactivos y también el producto del análisis de confiabilidad mediante el coeficiente Alfa de los reactivos como escala. Como ya se dijo, se fijó como restricción un peso factorial de al menos.40 para incluir un reactivo en el componente. Se incluyen las alfas de Cronbach inicial y estandarizada para la escala. Tabla 15. Reactivos que conforman el componente número uno, Enfoque del Curso, después de la rotación Equamax R06. Comenta perspectivas profesión (EP)..679 R23. Señala posibles errores en la actividad profesional (EP)..652 R09. Explica responsabilidad social (EP)..640 R25. Relaciona el tema con aplicaciones de la profesión (EP)..631 R26. Cita fuentes bibliográficas al responder preguntas (Dom)..605 R18. Ejemplifica campo de la carrera (EP)..517 R34. Logra que los alumnos se interesen en la materia (MEI)..443 Análisis de Confiabilidad de los reactivos como escala: Alfa Inicial:.8540 Alfa estandarizada:.8545 Por el contenido de los reactivos que conformaron este primer componente o factor lo nombraremos Enfoque del curso. Arias Galicia (1984), incluyó también un factor denominado Enfoque a la profesión en su instrumento, conformado por

3 Evaluación del Desempeño Docente 33 reactivos muy similares a los usados en este cuestionario. Sólo en el cuestionario mencionado, entre los revisados, fue donde se encontró un componente del desempeño docente como éste. El segundo factor obtenido, se conformó también por 6 reactivos con pesos factoriales superiores a.40. Tres pertenecientes a la escala de Dominio de la Materia (Dom), dos a la de Preparación de clase y Cumplimiento del Programa (PCP), y uno a la de Dinamismo en Clase (Din). La Tabla 16 muestra la configuración de este segundo factor. Se incluyen las alfas de Cronbach inicial y estandarizada para la escala, a partir de las respuestas de los 757 alumnos. Tabla 16. Reactivos que conforman el componente número dos, Competencia para la enseñanza, después de la rotación Equamax. R07. Deja ideas claras, no se enreda (Dom)..647 R21. Responde concretamente (Dom)..581 R10. Extensión de tema según programa (PCP)..551 R24. Aclara terminología (Dom)..505 R16. Organiza actividades del día (PCP)..492 R22. Mantiene en actividad al grupo (Din)..401 Análisis de Confiabilidad de los reactivos como escala: Alfa Inicial:.8617 Alfa estandarizada:.8635 El contenido de los reactivos agrupados en este factor se relacionan con la llamada Capacidad para enseñar, pues se refieren a acciones relacionadas con el control de aspectos comunes a la situación de enseñanza, de la forma de llevarla a cabo según un modelo tradicional de enseñanza basado en la conferencia. A este factor lo denominamos Competencia para la enseñanza siguiendo la terminología de Fernández y Mateo (1992).

4 Evaluación del Desempeño Docente 34 En el tercer componente producido por la rotación destacan 5 reactivos con cargas factoriales superiores al criterio. Tres pertenecientes a la escala Motivación al alumno y estilo interpersonal (MEI) y dos a la de Respeto a los Alumnos (RA). En la Tabla 17 se resume la configuración de este factor. Para las respuestas de los alumnos. Se incluyen las alfas de Cronbach inicial y estandarizada para la escala. Tabla 17. Reactivos que conforman el componente número tres, Estilo de Relación con los Alumnos, después de la rotación Equamax. R15. Trata con respeto y cordialidad (MEI)..659 R31. Evita mofarse de los alumnos (RA)..657 R11. Escucha sin interrumpir al alumno (RA)..635 R12. Mantiene disciplina sin rigidez (MEI)..627 R13. Reconoce esfuerzo y logros (MEI)..469 Análisis de Confiabilidad de los reactivos como escala: Alfa Inicial:.7729 Alfa estandarizada:.7774 Por el contenido de los reactivos, a este factor lo denominamos Estilo de relación con alumnos, Fernández y Mateo (1992) incluyen en su modelo una escala a la que llaman interacción o rapport entre profesor y alumnos, en tanto que Arias (1994) distingue entre Respeto a los alumnos y Motivación al estudiante. En el cuarto componente resultante destacan los cinco reactivos pertenecientes a la escala original denominada Criterios para Evaluar y Calificar (CEC), acompañados por uno de la escala Respeto a los Alumnos (RA). El reactivo 20, sin embargo, no se debe considerar para la interpretación, ya que presenta pesos factoriales superiores al criterio fijado (.40) en dos factores a la vez. Este componente relacionado con la evaluación del aprendizaje siempre está presente, directa o indirectamente, en todos los modelos para evaluación de la

5 Evaluación del Desempeño Docente 35 docencia revisados. Por ejemplo, mientras que Arias Galicia (1984) lo denomina criterios para calificar, Marsh (1982) tituló este factor como exámenes y calificaciones y Frey (1982) lo llamó Forma de calificar. En este estudio, mantendremos el nombre Criterios para Evaluar y Calificar. La Tabla 18 resume la configuración de este componente, para las respuestas de los alumnos. Se incluyen las alfas de Cronbach inicial y estandarizada para la escala. Tabla 18. Reactivos que conforman el componente número cuatro, Criterios para Evaluar y Calificar, después de la rotación Equamax R27. Entrega calificaciones el día prometido (CEC)..696 R30. Al inicio del curso acuerda forma de evaluar (CEC)..632 R32. Calificaciones parciales incluyen varios aspectos (CEC)..541 R20. Califica temas tratados en clase (CEC)*..532 R33. Realiza evaluaciones periódicas (CEC)..492 R28. Acepta aportaciones de alumnos a la clase (RA)..453 Análisis de Confiabilidad de los reactivos como escala: Alfa Inicial:.7612 Alfa estandarizada:.7651 *El reactivo 20 presenta pesos factoriales superiores a.40 en más de un factor (4 y 6) por lo que debería no ser considerado en la interpretación, sin embargo, en base al resultado del análisis de confiabilidad se decidió mantenerlo en el factor 4. Con la restricción fijada desde el principio de aceptar sólo pesos factoriales superiores al.40 para la interpretación, los Factores 5 y 6 resultaron conformados cada uno por cuatro reactivos. En el caso del Factor 5, los cuatro reactivos corresponden a la escala inicial del cuestionario denominada Dinamismo en clase, por lo que no resultaría difícil mantener el mismo nombre para dicha escala, pues los reactivos se refieren consistentemente a actividades de variación de los estímulos durante la clase; sin embargo, la interpretación de éste como factor significativo es

6 Evaluación del Desempeño Docente 36 ambigua, ya que los reactivos número 2 y 29 poseen también cargas altas en el Factor 2. El Factor 6 sería aún más difícil de interpretar, ya que dos de los reactivos que lo conforman tienen pesos factoriales superiores a.40 en más de un factor, y al no considerarlos -por su ambigüedad-, el número de reactivos que lo conforman se reducen a dos, que más que visualizarlos como un factor podrían ser indicadores independientes de cumplimiento administrativo de la jornada de trabajo. Por lo tanto, y para efectos de la interpretación de esta configuración factorial, el Factor 5 podría nombrarse efectivamente Dinamismo en clase, pero al quedar conformado sólo por dos reactivos, valdría la pena someterlo a revisión, añadiendo algunos otros hasta lograr una configuración más estable, o bien intentar conformar una sola escala junto con el Factor 2. Los resultados del análisis de confiabilidad que se presentan más adelante permitirán ampliar el análisis de esta posibilidad. El Factor 6 es considerado como un componente con tan poca consistencia conceptual y empírica que no es posible nombrarlo, por lo que se tiene que estudiar más detenidamente su eventual conformación; o bien, analizar el comportamiento de sus reactivos al probarlos junto con los de otro de los factores que sí resultaron más definidos (de nuevo con el Factor 2, por ejemplo, añadiendo los reactivos 05 y 35 a los que inicialmente lo conformaron, se obtiene una Alfa mayor a la obtenida originalmente con cinco reactivos). La Tabla 19 resume la conformación estructural de los Factores 5 y 6.

7 Evaluación del Desempeño Docente 37 Tabla 19. Reactivos que conforman los componentes cinco y Equamax. Factor 5. seis, después de la rotación R14. Organiza equipos de trabajo (Din)..851 R17. Forma equipos de investigación (Din)..827 R29. Realiza mesas redondas con alumnos (Din)*..598 R02. Usa materiales para exponer (Din)*..425 Factor 6. R03. Termina clase a la hora (RA)..706 R01. Inicia clase a la hora (RA)..659 R05. Clases siguen orden programa (PCP)*..521 R35. Trata todos los temas del programa (PCP)*..460 Análisis de Confiabilidad de los reactivos: Factor 5 como escala: Alfa Inicial:.7304 Alfa estandarizada:.7312 Factor 6 como escala: Alfa Inicial:.6828 Alfa estandarizada:.6858 * Reactivos que poseen cargas altas en más de un componente y que no son considerados para la interpretación del factor. En resumen, el resultado del AFE realizado permite interpretar una estructura conformada de la siguiente manera: a) Una escala denominada Enfoque del curso, conformada por siete reactivos, que permite identificar hasta qué punto la actividad del profesor relaciona lo visto en clase con las necesidades y características del desempeño profesional. b) Una segunda escala denominada Competencia para la enseñanza, conformada por seis reactivos, que permite identificar el tipo de desempeño del profesor en un conjunto de actividades que son comunes al método de enseñanza por conferencia, utilizado frecuentemente en el aula.

8 Evaluación del Desempeño Docente 38 c) El tercer componente identificado se tituló Estilo de relación con alumnos y resultó conformado por cinco reactivos que permiten identificar la manera en que el profesor establece condiciones apropiadas para el trabajo con los estudiantes durante el curso. d) El componente denominado Criterios para Evaluar y Calificar resultó conformado por 6 reactivos que permiten identificar acciones del profesor relacionadas con la verificación de los aprendizajes y la certificación de los mismos. Hasta aquí se ha presentado el resultado del análisis factorial exploratorio que se resumió en la sección anterior como una estructura consistente de cuatro factores que pueden ser interpretados significativamente. Ahora veremos el resultado del análisis de confiabilidad mediante el coeficiente alfa de Cronbach, realizado a los componentes o escalas resultantes del análisis factorial exploratorio. En las tablas 15, 16, 17, y 18 podemos observar los valores del coeficiente alfa para cada una de las escalas evaluadas; como se observa, los valores de las alfas de las cuatro primeras escalas se encuentran por encima del.75, lo cual habla a favor de su consistencia. El valor del coeficiente alfa estandarizado para la escala conformada por los cuatro primeros factores de la solución rotada resultó ser de Sin embargo, con base en el análisis de las correlaciones entre los reactivos y de sus cargas factoriales correspondientes, se estudió la posibilidad de evaluar la consistencia de escalas conformadas de manera emergente. De allí que al agregar los reactivos del factor dos (siete enunciados), los del Factor 5 (cuatro enunciados), los del Factor 4 (seis enunciados) y dos reactivos del Factor seis, para evaluar su consistencia como una sola escala, se obtuvo un alfa mayor que la obtenida originalmente con los seis reactivos del factor dos, (en la Tabla 18 podemos observar que el valor del alfa estandarizada es de.7651 para el factor conformado por seis enunciados; cuando se consideran conjuntamente los 19 enunciados, el valor del alfa sube a.9055) por lo que resulta consistente plantear la conformación de una escala

9 Evaluación del Desempeño Docente 39 denominada Competencia para la enseñanza, que contiene 19 enunciados o reactivos, lo que da más elementos para caracterizar el desempeño del docente. En apoyo a estos resultados del análisis de confiabilidad, el que los reactivos de los factores cuatro, cinco y seis tengan cargas factoriales -aunque menores a.40- en el factor dos, permite interpretarlas mas fácilmente como una sola escala. De esa manera, la Competencia para la Enseñanza estaría conformada, además de lo ya comentado sobre la enseñanza basada en la conferencia, por acciones de evaluación y certificación, por acciones de organización de los alumnos para el trabajo y por cumplimiento de criterios administrativos externos en el desempeño de las labores docentes. Finalmente, en la Tabla 20 se presenta el análisis de consistencia interna (alfa de Cronbach) de las escalas del Cuestionario para Evaluación el Desempeño Docente Frente a Grupo. La escala Enfoque del Curso quedo conformada por siete reactivos: 6, 9, 18, 23, 25, 26, y 34, y tiene un alfa de Cronbach de La escala Competencia para la Enseñanza, se conformó por 19 reactivos: 2, 4, 5, 7, 10, 14, 16, 17, 20, 21, 22, 24, 27, 28, 29, 30, 32, 33, 35, y presenta un alfa de Cronbach de Finalmente, la escala Estilo Interpersonal se formó por seis reactivos: 7, 10, 16, 21, 22 y 24, presentó una alfa de Cronbach de El alfa de Cronbach para el cuestionario completo, de 32 reactivos es de Tabla 20. Consistencia interna y número de reactivos de las escalas del Cuestionario para Evaluar el Desempeño Docente Frente a Grupo. Escala Número de Coeficiente alfa Coeficiente alfa reactivos estandarizado estandarizado de la de la escala escala completa Enfoque del curso Competencia para la enseñanza Estilo Interpersonal Escala Completa