Guía docente de la asignatura obligatoria MEDICIÓN

Transcripción

1 PROGRAMA OFICIAL DE POSGRADO METODOLOGÍA DE LAS CIENCIAS DEL COMPORTAMIENTO Y DE LA SALUD Guía docente de la asignatura obligatoria MEDICIÓN Rosario Martínez Arias rmnez.arias@psi.ucm.es Despacho 2106-F Lateral II Facultad de Psicología, Campus de Somosaguas Página de docencia: 1

2 I. PRESENTACIÓN La asignatura Medición es una materia obligatoria del Master en Metodología de las Ciencias del Comportamiento y de la Salud. En el plan de estudios del programa de postgrado tiene asignados 6 créditos ECTS. La presente guía docente se refiere a la modalidad presencial que se desarrollará en la Universidad Complutense/Autónoma de Madrid, y que será impartida por la profesora Rosario Martínez Arias en el primer cuatrimestre del curso Se incluye brevemente una descripción de los objetivos de aprendizaje que nos proponemos conseguir, descritos a modo de competencias que deben adquirir los estudiantes, del programa de contenidos a cubrir y de la relación de prácticas que se propondrán. Se incluye además un cronograma de actividades y los criterios generales de evaluación de las competencias adquiridas. II. COMPETENCIAS A ADQUIRIR Independientemente del tipo de licenciatura que haya cursado cada estudiante y de los contenidos sobre Metodología incluidos en estos estudios, asumimos que se han asimilado previamente ciertos conocimientos básicos de Psicometría, fundamentalmente sobre Teoría Clásica de los Tests. Quien necesite un repaso sobre estos temas aconsejamos consultar los apuntes de la asignatura Psicometría, que se imparte en el 2º curso de la licenciatura en Psicología en la Universidad Complutense de Madrid. Al modo en que se nos propone en el Espacio Europeo de Educación Superior, los objetivos de aprendizaje que planteamos en la asignatura los resumimos en un conjunto de conocimientos, destrezas y actitudes que los alumnos deberán adquirir en su proceso formativo: a) Conocimientos: - Se profundizará en los modelos fundamentales de Teoría de Tests que suelen tratarse inicialmente en las licenciaturas de Psicología (Teoría Clásica y Teoría de la Respuesta al Ítem), enfatizando el modo de estudiar la fiabilidad (precisión) de las puntuaciones obtenidas en la aplicación de diversos tipos de instrumentos de evaluación. En el caso de la TRI se estudiarán los principales modelos dicotómicos y politómicos, sus supuestos y se describirán brevemente los principales procedimientos de estimación de parámetros y ajuste. Se realizará un primer acercamiento a algunas de las principales aplicaciones de estos modelos (p.ej. Funcionamiento Diferencial de los Ítems). - Se ampliarán las estrategias fundamentales para obtener evidencias sobre la validez de las puntuaciones (evidencias sobre el contenido, sobre la estructura interna de la prueba, sobre sus relaciones con otras variables y consecuencias?), incluyendo un dominio básico de las técnicas estadísticas multivariantes fundamentales (Análisis Factorial Exploratorio, Análisis Factorial Confirmatorio y Análisis de Regresión Múltiple). - Se incidirá en los aspectos fundamentales relativos a la interpretación de puntuaciones, fundamentalmente en lo referido a interpretaciones normativas o criteriales. b) Destrezas: 2

3 - Al finalizar el trabajo en la asignatura, un estudiante deberá ser capaz de construir/adaptar un test, analizar sus propiedades métricas, tomar decisiones para optimizarlas e interpretar las puntuaciones estimadas. - Para conseguir estos objetivos de aprendizaje, será necesario manejar básicamente y entender las opciones (y resultados) de diversas herramientas informáticas: o SPSS, para el estudio de las propiedades métricas desde la TCT y para ciertos estudios de validez. o BILOG/PARSCALE/MULTILOG, para la estimación de parámetros de modelos de la TRI y para realizar determinadas aplicaciones. o LISREL/Mplus, para estudios de validación con modelos de ecuaciones estructurales. c) Actitudes: - En cualquier tipo de actividad, a lo largo del curso se fomentará una actitud positiva hacia el rigor necesario que se requiere para realizar inferencias apropiadas a partir de las puntuaciones que se obtienen en los tests psicológicos y en otros instrumentos de medición. - Se fomentará también la autonomía rigurosa de los estudiantes en su propio proceso de aprendizaje, animando a ampliar sus competencias sobre lecturas o trabajos que les resulten especialmente interesantes para completar su formación. 3

4 III. PROGRAMA DE CONTENIDOS DE LA ASIGNATURA 1. Introducción a la medición en Ciencias del Comportamiento y de la Salud. 1.1.Breve análisis histórico. 1.2.Tópicos de interés. 1.3.Estándares sobre la construcción y uso de los tests. 2. Teoría Clásica de los Tests: conceptos fundamentales y fiabilidad. Extensiones: Teoría de la Generalizabilidad. 2.1.El modelo clásico. 2.2.Construcción de tests y análisis de ítems. 2.3.Fiabilidad. 2.4.Teoría de la Generalizabilidad. 3. Teoría de la Respuesta al Ítem: conceptos, modelos fundamentales y estimación. 3.1.Modelos dicotómicos y politómicos. 3.2.Comprobación de supuestos. 3.3.Estimación de parámetros y ajuste. 3.4.Función de información. 4. Validez. 4.1.Concepto y tipos de evidencias de validez. 4.2.Evidencias relativas al contenido. 4.3.Evidencias de validez predictiva: regresión lineal simple y múltiple. 4.4.Evidencias relativas a la estructura interna: análisis factorial exploratorio y confirmatorio. 5. Interpretación de puntuaciones. 5.1.Tests referidos a norma. 5.2.Tests referidos al criterio. 6. Aplicaciones de la TRI. 6.1.Funcionamiento Diferencial de los Ítems. 4

5 IV. DESCRIPCIÓN DE LAS PRÁCTICAS A DESARROLLAR A lo largo del curso, los estudiantes deberán realizar individualmente 3 informes técnicos sobre las correspondientes prácticas propuestas, que básicamente se describen a continuación. Se trata de trabajos al modo de lo que técnicamente se denomina como portafolios, cuyos objetivos concretos se establecerán con los profesores de la asignatura. 1. Primera práctica: En la primera práctica se ha de aplicar con SPSS lo visto sobre la TCT. A modo de ejemplo, algunas de las actividades a realizar son: a) Obtención de los de los índices de dificultad, fiabilidad y validez de los ítems. b) Selección de los ítems que forman el mejor test. c) Estudio de la fiabilidad del test. d) Estudio de las opciones incorrectas (en ítems de opción múltiple). 2. Segunda práctica: Se ha de aplicar con BILOG/PARSCALE/MULTILOG lo visto sobre la TRI. A modo de ejemplo, algunas de las actividades a realizar son: a) Obtención de un conjunto de ítems en el que pueda aceptar la unidimensionalidad. b) Calibración del banco, mediante modelos dicotómicos y/o politómicos. c) Estudio de la bondad del ajuste de los ítems. d) Interpretación de los parámetros de los ítems. e) Estudio del funcionamiento diferencial de los ítems y del test. f) Obtención de la función de información de los ítems y test. g) Comparación con índices clásicos. 3. Tercera práctica: La tercera práctica es una práctica de validación que exige la utilización de SPSS y LISREL/Mplus. Se habrá de utilizar la regresión mútiple, el análisis factorial exploratorio y confirmatorio y los modelos de ecuaciones estructurales para obtener evidencias sobre lo que mide el test. A modo de ejemplo, algunas de las actividades a realizar son: a) Obtener la capacidad predictiva del test respecto a uno o varios criterios. b) Comprobar si los datos confirman o no una cierta estructura factorial. c) Estudio del funcionamiento diferencial mediante modelos de ecuaciones estructurales (invarianza de la medida). d) Contrastar un cierto modelo sobre la relación existente entre los constructos y variables medidas. Algunas consideraciones sobre el procedimiento a seguir para la elaboración de las prácticas: 5

6 - Antes de comenzar cada una de las prácticas, cada alumno establecerá con los profesores, en horario de tutoría, los objetivos y se seleccionará en común la base de datos a analizar. - Los análisis se podrán hacer sobre bases de datos propias o suministradas por los profesores, siempre recomendando el uso de datos reales resultado de la aplicación de tests. Cabe también la posibilidad de hacer estudios de simulación (por ejemplo, sobre modelos de TRI), con datos generados por ordenador (Wingen), para quien tenga o quiera adquirir destrezas relacionadas con la programación y la simulación. - Durante la última semana, los estudiantes harán una exposición de sus prácticas a los demás compañeros y profesores y responderán a sus preguntas. - Los profesores se plantean que cada estudiante haga la mejor práctica posible. Para ello, puede ser importante la tutela de las mismas, para que se realicen de la mejor forma posible. Los estudiantes recibirán feedback de los profesores en relación a sus prácticas y se espera que hagan las modificaciones pertinentes. 6

7 V. ORGANIZACIÓN DEL CURSO La asignatura tiene asignados 6 créditos ECTS, lo que representa aproximadamente un total de 150 horas de trabajo del estudiante, que, aproximadamente, debe repartir de la siguiente forma: ACTIVIDAD PRESENCIAL Explicaciones teóricas 28 Explicaciones en Aula de informática 12 Tutorías (fundamentalmente de las 16 prácticas) ACTIVIDAD NO PRESENCIAL Estudio de la asignatura (prácticas y 40 examen) Ejecución de prácticas 34 Elaboración de informes 20 TOTAL 150 La docencia presencial, desarrollada durante unas 13 semanas, se realizará los miércoles, de 4.30 a 7.30, en el aula asignada (para las clases teóricas) o en el aula de informática (para las clases prácticas). Intentaremos seguir el siguiente cronograma de actividades: Semana ACTIVIDAD 1 Presentación y explicaciones sobre Introducción a la medición 2 Explicaciones sobre TCT 3 Aplicaciones sobre TCT (SPSS, Aula de informática) 4 Explicaciones sobre TRI 5 Explicaciones sobre TRI. Entrega de la práctica 1. 6 Aplicaciones sobre TRI (BILOG/PARSCALE, Aula de informática) 7 Explicaciones sobre validez 8 Explicaciones sobre validez. Entrega de la práctica 2. 9 Aplicaciones sobre validez de constructo (LISREL/Mplus, Aula de informática) 10 Explicaciones sobre Interpretación de puntuaciones 11 Aplicaciones de la TRI (DIF), Entrega de la práctica Seminario: informes de los estudiantes sobre el desarrollo de las prácticas 13 Seminario: informes de los estudiantes sobre el desarrollo de las prácticas Tutela de las prácticas (despachos y aula de informática) Como se refleja en el cronograma, las fechas de entrega de las prácticas son: Primera: hasta finales de la quinta semana. Segunda: finales de la octava. Tercera: finales de la semana 12. 7

8 VI. EVALUACIÓN: El 50 % de la calificación dependerá del rendimiento en un examen teórico de 10 preguntas cortas, principalmente dirigido a la evaluación de los conocimientos teóricos adquiridos y de las destrezas en el manejo de software. El 50 % restante dependerá de la calidad que tengan las 3 prácticas individuales realizadas. BIBLIOGRAFÍA TEXTO BÁSICO Martínez Arias, M.R., Hernández Lloreda, M.J. y Hernández Lloreda, M.V. (2006): Psicometría. Madrid: Alianza editorial. De Gruitjer, D.N.M. & Van der Kamp, L.J.T. (2003/2007). Statistical test theory for education and psychology. BIBLIOGRAFÍA COMPLEMENTARIA Abad, F. J.; Ponsoda, V. y Revuelta, J. (2006). Modelos politómicos de respuesta al ítem. Madrid: La Muralla. Allen, M.J. y Yen, W.N. (1979): Introduction to Measurement Theory. Monterey, CA. Books-Cole. American Psychological Association, American Educational Research Association, & National Council on Measurement in Education (1999). Standards for educational and psychological testing. Washington, DC: American Psychological Association. Barbero, I.; Vila, E. y Suárez, J.C. (2003). Psicometría. Madrid: UNED. Crocker, L. y Algina, J. (1986). Introduction to classical and modern test theory. Fort Worth, TX: Harcourt Brace. Embretson, S. E. y Reise, S. (2000). Item response theory for psychologists. US: Lawrence Erlbaum Associates. Embretson, S. y Hersberger, S. (1999). The new rules of measurement: What every Psychologist and Educator should know. New Jersey: Lawrence Erlbaum Associates. García Cueto, E. (1993). Introducción a la Psicometría. Madrid: Siglo XXI. Haladyna, T.M. (1994): Developing and validating multiple-choice test items. Hillsdale, NJ: LEA. Hambleton, R. K. y Swaminathan, H. (1985). Item response theory. Principles and applications. Boston, MA: Kluwer-Nijhoff Publishing. 8

9 Linn, R. L. (1989) (Ed.), Educational Measurement. Washington, DC:American Council on Education. López-Pina, J.A. (1995). Teoría de la respuesta a los items. Bacelona: PPU. Lord, F. M. y Novick, M. R. (1968). Statistical theories of mental test scores. Reading, MA: Addison-Wesley. Martínez Arias, M.R. (1995): Psicometría: Teoría de los tests psicológicos y educativos. Madrid: Síntesis. Maydeu, A. y McArdle, J. (2005). Contemporary psychometrics. Londres: Lawrence Erlbaum Associates. Melia, J. L. (2000). Teoría de la Fiabilidad y la Validez. Valencia: Cristóbal Serrano. McDonald, R. P. (1999). Test theory: a unified treatment. Mahwah, N.J.: LEA. Morales, P., Urosa, B. y Blanco, A. (2003). Construcción de escalas de actitudes tipo Likert. Madrid: Editorial La Muralla. Muñiz, J. (Coord.). (1996). Psicometría. Madrid: Universitas. Muñiz, J. (1990). Teoría de la respuesta a los items: Un nuevo enfoque en la evolución psicológica y educativa. Madrid: Pirámide. Muñiz, J. (2001). Teoría clásica de los tests. Madrid: Pirámide. Nunnally, J.C. y Bernstein, I.J. (1995). Teoría Psicométrica. México: McGraw-Hill. Olea, J.; Ponsoda, V. y Prieto, G. (Eds.) (1999): Tests informatizados: fundamentos y aplicaciones. Madrid: Pirámide. Rao, C.R. y Sinharay, S. (Eds.) (2007). Handbook of Statistics 26: Psychometrics. Ámsterdam: Elsevier. Santisteban, C. (1990). Psicometría. Teoría y práctica en la construcción de tests. Madrid: Norma. Santisteban, C. y Alvarado, J.M. (2001).Modelos Psicométricos. Madrid: Ed.UNED. Tomás, J.M.; Oliver, A. y Meliá, J.L. (1992). Teoría de la respuesta al ítem: Fundamentos, modelos y aplicaciones. Valencia: Cristóbal Serrano. van der Linden, W. J. y Hambleton, R. K. (1997). Handbook of modern item response theory. New York: Springer-Verlag. Wright, B. D. y Stone, M. H. (1979). Best test design. Chicago, IL: MESA Press. Wright, B. D. y Masters, G. N. (1982). Rating scale analysis. Chicago, IL: MESA Press. 9