Cierre de ciclo de avalúo del aprendizaje 1 er semestre del año académico 2006-07 Presentado por Eduardo A. Kicinski, Ph.D, Coordinador de Avalúo del Departamento de Economía Recinto Universitario de Mayagüez
Una breve introducción El Departamento de Economía esta comprometido con cumplir su Misión de formar economistas de pensamiento crítico, con aptitud creativa e investigativa, un profundo compromiso social y capacitados para contribuir al desarrollo socioeconómico.
Una breve introducción A tales fines, prepara estudiantes con un conocimiento conceptual y cuantitativo en las áreas de: Teoría microeconómica Teoría macroeconómica Desarrollo económico Econometría Economía de Puerto Rico Economía aplicada Economía internacional
Una breve introducción Actividad de avalúo Para evaluar el el proceso de aprendizaje del los estudiantes en retener principios básicos de la teoría microeconómica se llevó a cabo la siguiente actividad de avalúo: Se ofreció la prueba de aprovechamiento de Econ.3021 (Principios de Microeconomía) a las secciones de Econ.3091 (Microeconomía Intermedia). Se seleccionó este curso, debido a que es la continuación del curso de Principios básicos de Microeconomía. Se ofreció al principio del semestre (pre-prueba) y al final del semestre (post-prueba), para comparar los resultados.
Una breve introducción Actividad de avalúo Para evaluar el proceso de aprendizaje del los estudiantes en retener principios básicos de la teoría macroeconómica se llevó a cabo la siguiente actividad de avalúo: Presentación del Informe de de la Prueba de Aprovechamiento de Econ.3022 (Principios de Macroeconomía) del 2 do semestre del año académico 2005-06
Una breve introducción Actividad de avalúo Para evaluar el proceso de aprendizaje del los estudiantes en retener principios básicos de la economía de Puerto Rico se llevó a cabo la siguiente actividad de avalúo: Presentación del Informe de de la Prueba de Aprovechamiento de Econ.3085 (Desarrollo Social y Económico de Puerto Rico)
Una breve introducción Actividad de avalúo Finalmente como última actividad de avalúo, el Departamento de Economía comenzó el proceso de preparar una prueba de aprovechamiento matemático. Se hace con el fin de evaluar si el egresado del Departamento de Economía posee destrezas de pensamiento crítico, razonamiento matemático y análisis cuantitativo. Este objetivo forma parte del perfil del egresado del Departamento de Economía. Se ofreció la prueba de aprovechamiento matemático, de forma preliminar, a los estudiantes de cuarto año o más del Departamento.
Una breve introducción A continuación presentamos los resultados de los Informes y de las pruebas ofrecidas, y del acciones tomadas a la luz de los resultados obtenidos. Actividad de avalúo Acciones concretas
Actividad de Avalúo de Principios de Microeconomía Actividad de avalúo En el primer semestre del año académico 2006-07, se ofreció la prueba de aprovechamiento de Econ.3021 (Principios de Microeconomía) a las dos secciones de Econ.3091 (Microeconomía Intermedia). La misma fue repartida a principios del semestre (pre-prueba), un total de 40 estudiantes en 2 secciones. Se ofreció nuevamente la prueba a 29 estudiantes a finales del semestre (postprueba), para comparar los resultados.
Resumen de los principales resultados Por ciento de respuestas correctas Preg. 1-5 100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% Preg.1 Preg.2 Preg.3 Preg.4 Preg.5 Pre-prueba Post-prueba
Resumen de los principales resultados Por ciento de respuestas correctas Preg. 6-10 100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% Preg.6 Preg.7 Preg.8 Preg.9 Preg.10 Pre-prueba Post-prueba
Resumen de los principales resultados Por ciento de respuestas correctas Preg. 11-15 80% 70% 60% 50% 40% 30% 20% 10% Pre-prueba Post-prueba 0% Preg.11 Preg.12 Preg.13 Preg.14 Preg.15
Análisis de los resultados La muestra es relativamente pequeña, con 40 estudiantes en la pre-prueba y 28 estudiantes en la post-prueba. En 8 de las 15 preguntas hubo una leve mejoría en el por ciento de respuestas correctas. En las preguntas 4, 8, 10-13, el por ciento de respuestas correctas aumentó en 6% o más. Por otro lado, en las preguntas 1, 5-7 y 9, el por ciento de respuestas correctas disminuyó en 5% o más.
Las acciones concretas a la luz de los resultados Acciones concretas Una vez computados los resultados de la pre-prueba, los mismos fueron entregados al profesor del curso de Microeconomía intermedia, Jeffry Valentín, Ph.D Esto permitió al profesor estar conciente de las áreas de la teoría microeconómica que necesitaban reforzarse.
Las acciones concretas a la luz de los resultados Acciones concretas Precisamente, en la mayoría de las preguntas donde se observó una mejoría porcentual, fueron en áreas donde se observó una deficiencia inicial (preguntas 2, 11-14). En las preguntas, donde se observó una disminución en el por ciento de respuestas correctas fueron en su mayoría, las áreas donde se observó un dominio inicial (preguntas 1,5-7). Ante la limitación de tiempo, el reforzar áreas problemáticas implica un sacrificio potencial en las áreas más sólidas.
Actividad de Avalúo de Principios de Macroeconomía (Econ.3022): Actividad de avalúo En el 2 do semestre de año académico 2005-06 se llevo a cabo por segunda vez la prueba de aprovechamiento del curso de Econ.3022, Principios de Macroeconomía. La misma fue repartida a un total de 231 estudiantes, en 10 secciones. En el semestre anterior se dio la prueba por primera vez. En ese caso, la prueba fue repartida a un total de 141 estudiantes, en siete secciones.
Resumen de los principales resultados De un total de 20 preguntas, tan solo en 2 preguntas se obtuvo un por ciento favorable de 70 por ciento o más. En tan solo 4 de las 20 preguntas, se obtuvo un por ciento aceptable de 60 por ciento o más. Al comparar los resultados del 2 do semestre, observamos que el por ciento de respuestas correctas disminuyó dramáticamente en varias preguntas.
Prueba de Aprovechamiento de Econ.3022 Comparación del 1 er y 2 do semestre 2005-06 1 er Sem. 2005-06 2 do Sem. 2005-06 Pregunta Por ciento de Por ciento de Δ Respuestas correctas Respuestas correctas 1 86% 86% 0% 2 71% 81% +10% 3 70% 53% -17% 4 68% 62% -6% 5 23% 25% +2%
Prueba de Aprovechamiento de Econ.3022 Comparación del 1 er y 2 do semestre 2005-06 1 er Sem. 2005-06 2 do Sem. 2005-06 Pregunta Por ciento de Por ciento de Δ Respuestas correctas Respuestas correctas 6 53% 45% -8% 7 25% 25% 0% 8 73% 54% -19% 9 46% 26% -20% 10 33% 14% -19%
Prueba de Aprovechamiento de Econ.3022 Comparación del 1 er y 2 do semestre 2005-06 1 er Sem. 2005-06 2 do Sem. 2005-06 Pregunta Por ciento de Por ciento de Δ Respuestas correctas Respuestas correctas 11 42% 24% -18% 12 64% 57% -7% 13 67% 52% -15% 14 85% 63% -22% 15 33% 29% -4%
Prueba de Aprovechamiento de Econ.3022 Comparación del 1 er y 2 do semestre 2005-06 1 er Sem. 2005-06 2 do Sem. 2005-06 Pregunta Por ciento de Por ciento de Δ Respuestas correctas Respuestas correctas 16 82% 45% -37% 17 22% 27% +5% 18 22% 28% +6% 19 32% 18% -14% 20 56% 11% -45%
Análisis de los resultados Hay varias posibles razones para explicar los resultados poco alentadores: El curso de Econ. 3022 se presta para un enfoque más diverso y heterogéneo. La muestra es relativamente pequeña. La falta de tiempo posiblemente influyó para que algunos tópicos no se discutieran. Puede ser que el curso, siendo de carácter heterogéneo, no se presta para un examen de este tipo.
Análisis de los resultados continuación Los estudiantes demuestran debilidades en aquellas preguntas donde hay que llevar a cabo cómputos matemáticos o análisis de gráficas La traducción de algunos términos pudo haber afectado la forma de contestar las preguntas.
Las acciones concretas a la luz de los resultados Acciones concretas El Departamento acordó las siguientes acciones a la luz de los resultados obtenidos en La Prueba de aprovechamiento de Econ. 3022: Crear un Comité departamental de Econ.3022 con la encomienda de identificar los objetivos educativos del curso. Una vez identificados los objetivos, ponderar los mismos para determinar su relativa importancia Crear una nueva prueba de aprovechamiento que guarde relación con los objetivos educativos y su relativa ponderación.
Las acciones concretas a la luz de los resultados Acciones concretas El Comité de Econ.3022 ya determinó los objetivos educativos del curso y su relativa ponderación. Esto se hace con el fin de reducir el grado de heterogeneidad que tiene el curso. El Comité esta trabajando en la nueva prueba de aprovechamiento de Econ.3022. La prueba debe estar lista para la aprobación del Departamento, para el 2 do semestre del año académico 2006-07.
Actividad de Avalúo de curso de Desarrollo Social y Económico de PR Actividad de avalúo En el 2 do semestre de año académico 2005-06 se llevo a cabo por segunda vez la prueba de aprovechamiento del curso de Econ.3085, Desarrollo Social y Económico de Puerto Rico. La prueba fue repartida a un total de 78 estudiantes.
Resumen de los principales resultados En 8 de 15 preguntas se obtuvo un por ciento favorable de 70 por ciento o más. En 10 de 15 preguntas, se obtuvo un por ciento aceptable de 60 por ciento o más. Estos resultados son comparables con el semestre anterior, donde se obtuvo 7 de 15 preguntas con un por ciento favorable de 70 por ciento o más, y 10 de 15 preguntas con un por ciento favorable de 60 por ciento o más.
II. Resumen de los principales resultados Las preguntas donde se obtuvo un por ciento menor fueron las preguntas 1, 2, 6, 7 y 15. Los estudiantes superan el 70 por ciento de respuestas correctas en 6 de las últimas 7 preguntas.
Prueba de aprovechamiento de Econ.3085 Comparación de 1 er y 2 do semestre del año académico 2005-06 1 er sem. 2005-06 2 do sem. 2005-06 Preg. Por ciento de respuestas correctas Por ciento de respuestas correctas Δ 1 53% 57% +4% 2 32% 26% -4% 3 69% 65% -4% 4 73% 81% +8% 5 80% 73% -7%
Prueba de aprovechamiento de Econ.3085 Comparación de 1 er y 2 do semestre del año académico 2005-06 1 er sem. 2005-06 2 do sem. 2005-06 Preg. Por ciento de respuestas correctas Por ciento de respuestas correctas Δ 6 66% 51% -14% 7 12% 19% +7% 8 36% 62% +26% 9 81% 88% +7% 10 81% 77% -4%
Prueba de aprovechamiento de Econ.3085 Comparación de 1 er y 2 do semestre del año académico 2005-06 1 er sem. 2005-06 2 do sem. 2005-06 Preg. Por ciento de respuestas correctas Por ciento de respuestas correctas Δ 11 76% 88% +12% 12 83% 72% -9% 13 83% 78% -4% 14 71% 72% +1% 15 52% 34% -18%
Los cambios sugeridos por el Comité de Econ. 3085 Acciones concretas Durante el presente semestre, los doctores Edwin Irizarry Mora y Jeffry Valentín Mari revisaron la prueba de aprovechamiento de Econ. 3085. Eliminaron preguntas (#1, 4, 5, 6, 7, 8) Revisaron preguntas (#3, 9, 15) Aumentaron de 15 a 20 preguntas Incluyeron preguntas del periodo colonial español y de los efectos del cambio de soberanía.
Cambios sugeridos por el Comité de Econ. 3085 Acciones concretas Por lo tanto, sus recomendaciones cambian substancialmente la prueba de aprovechamiento de Econ.3085 La aceptación de estas recomendaciones no permite la comparación de las pruebas de aprovechamiento a través de tiempo. Si permite una comparación parcial de aquellas preguntas que retiene la prueba revisada de la prueba original ( preguntas #2, 3, 9, 10, 11, 12, 13, 14 y 15).
Las acciones concretas a la luz de los resultados Acciones concretas El Departamento aprobó con algunos cambios de redacción las nuevas preguntas de la prueba de aprovechamiento. La nueva prueba de aprovechamiento fue ofrecida a finales del 1 er semestre del año académico 2006-07. Los resultados serán presentados durante el 2 do semestre del año académico 2006-07.
Actividad de avalúo de aprovechamiento matemático Actividad de avalúo Durante el 1 er semestre de año académico 2006-07 se preparó una prueba preliminar de aprovechamiento matemático. La misma incluye preguntas de aplicación matemática incluidas en las pruebas de aprovechamiento de Econ.3021 y Econ.3022. Incluye además preguntas de mayor complejidad. La prueba se ofreció a 10 estudiantes de 4 to año o más del Departamento de Economía.
Resumen de los principales resultados La muestra del grupo es sumamente pequeña, tan solo 10 estudiantes. Por lo que todas las advertencias con respecto al sesgo de una muestra pequeña aplican aquí. De un total de 14 preguntas, 9 son preguntas que fueron utilizadas de las pruebas de aprovechamiento de Econ.3021 y Econ.3022 Por lo que tenemos unos resultados que nos sirven como base para comparar resultados, aunque el tamaño del la muestra y la población de los grupos son distintos.
Actividad de avalúo de aprovechamiento matemático Usamos como base los resultados obtenidos en la prueba de aprovechamiento de Econ.3021 del 1 er semestre del año académico 2005-06 y los resultados de la prueba de aprovechamiento de Econ.3022 del 2 do semestre de año académico 2005-06.
Resumen de los principales resultados: La primeras tres preguntas fueron utilizadas en la prueba de Aprovechamiento de Econ.3021 100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% Pregunta 1 Pregunta 2 Pregunta 3 Grupo 3021 Grupo 4to año
Resumen de los principales resultados: Las preguntas #7, 8, 9, 10, 11 y 12 fueron utilizadas en la prueba de Aprovechamiento de Econ.3022 60% 50% Grupo 3022 Grupo 4to año 40% 30% 20% 10% 0% Preg.7 Preg.8 Preg.9 Preg.10 Preg.11 Preg.12
Prueba de aprovechamiento matemático (preliminar)- 1 er semestre del año académico 2006-07 100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% 1 2 3 4 5 6 7 8 9 10 11 12 13 14 Grupo 4to año
Análisis de los resultados Los economistas usamos herramientas cuantitativas básicas como el uso de gráficas, las tablas, sacar por cientos y el algebra. A medida que se instruye al estudiante en el campo teórico de la economía, aumenta la complejidad de los instrumentos matemáticos, con el uso del cálculo, ecuaciones diferenciales, algebra de matrices y la estadística. Por lo tanto es sumamente importante el dominio de destrezas matemáticas para ser un buen economista. La prueba, al igual que las pruebas de aprovechamiento de Econ.3021 y Econ.3022, nos sugiere que hay serias deficiencias en el área de aprovechamiento matemático.
Las acciones concretas a la luz de los resultados Acciones concretas Se hizo entrega el Informe de la prueba preliminar de aprovechamiento matemático. El Informe fue discutido en una reunión departamental. En la reunión departamental, se aprobó la siguiente medida: Hacer una revisión curricular, donde se modifiquen los pre-requisitos de algunos cursos, con el fin de que el estudiante tome los cursos avanzados de economía con una mejor preparación en las matemáticas.
Comentarios finales La experiencia y los resultados del proceso de avalúo de los cursos de economía, ha sido uno que nos sugiere dos posibles caminos: Modificar el perfil del egresado del Departamento de Economía, para que refleje un perfil más realista. Atender las deficiencias que nos sugieren los resultados, con el fin de cumplir con nuestra Misión.
Comentarios finales La disciplina de la economía nos imparte un sentido de racionalismo, por lo que generalmente somos personas realistas. La disciplina también nos imparte un sentido de reconocer el costo potencial de no ser fiel a nuestro compromiso con nuestra Misión. Nuestro país necesita buenos economistas, por lo que seguiremos atacando las deficiencias observadas. La alternativa de aceptar la mediocridad no es aceptable.