INFORME DE EVALUACIÓN EXTERNA

Transcripción

1 Pontificia Universidad Católica de Puerto Rico PONTIFICIA UNIVERSIDAD CATÓLICA DE PUERTO RICO C INFORME DE EVALUACIÓN EXTERNA Maestría en Educación con especialidad en Educación Comercial y Sistemas de Colegio de Educación Recinto de Ponce Comité Evaluador de Programas Académicos (CEPA) Muniz Garcia Maria d. [Pick the date] Agosto 2014

2 TABLA DE CONTENIDO INTRODUCCIÓN... 3 EVALUACIÓN EXTERNA... 3 EVALUACIÓN DEL PROGRAMA... 5 TABLA 2: HALLAZGOS DE LA EVALUACIÓN DEL PROGRAMA GRADUADO EN EDUCACIÓN CON ESPECIALIDAD EN EDUCACIÓN COMERCIAL Y SISTEMAS DE OFICINA... 6 TABLA 3: EVALUACIÓN DE LA ESTRUCTURA Y MONTAJE DEL INFORME OBSERVACIONES Y RECOMENDACIONES GENERALES DEL INFORME Y DEL PROGRAMA TABLA 4: COMPENDIO DE RESULTADOS DE EVALUACIÓN DEL INFORME DE AUTO ESTUDIO. 26 TABLA 5: OBSERVACIONES Y RECOMENDACIONES REALIZADAS POR EL COMITÉ PARA MEJORAR EL PROGRAMA (COLUMNA 1) Y MEJORAR EL INFORME (COLUMNA 2) Page 2 of 28

3 INTRODUCCIÓN La evaluación de programas académicos constituye una de las prácticas más importantes en una institución de educación superior ya que contribuye a la identificación de las fortalezas y áreas a mejorar en los programas. Los resultados de las evaluaciones son importantes ya que fomentan la revisión curricular, mejoras a los programas y a los servicios académicos de apoyo, sustentan decisiones gerenciales y académicas, y contribuyen a fortalecer la retención estudiantil, entre otros. En el proceso se hace énfasis en evidenciar la calidad y la efectividad de los programas a base de resultados. Esta evaluación es importante para la revisión curricular de programas que inició a partir de mayo de EVALUACIÓN EXTERNA Con el propósito de realizar una evaluación imparcial del programa, la Vicepresidencia Asociada para Asuntos Académicos junto a la de Avalúo Institucional designó un Comité Evaluador Eterno (CEPA) para evaluar los Informes de Autoevaluación de los Programas en cuestión. El Comité estuvo compuesto por un miembro del Comité de Avalúo Institucional (CAI) y tres (3) evaluadores eternos que representan los recintos de Arecibo, Mayagüez y Ponce (Tabla 1). La coordinación de los trabajos estuvo a cargo de la Directora de la de Avalúo Institucional. Tabla 1 Miembros del Comité NOMBRE DEL PROFESOR/A FUNCIÓN UNIDAD / RECINTO/EXPERIENCIA Profa. Lourdes Echevarría García Dr. Oscar Pérez Laguillo Miembro CAI Evaluador Eterno Colegio de Ciencias, Recinto de Arecibo E directora del Colegio y presidió el comité de avalúo de su unidad Enlace del Recinto Arecibo al Comité de Avalúo Institucional (CAI) Colegio de Ciencias, Recinto de Mayagüez Preside el Comité de Avalúo Colegio Ciencias E decano de Asuntos Académicos y E Page 3 of 28

4 NOMBRE DEL PROFESOR/A FUNCIÓN UNIDAD / RECINTO/EXPERIENCIA director Colegio de Ciencias del Recinto Profa. Ivette Torres Vera Dra. Mirta Rivera Ramos Profa. María de los A. Muñiz García Evaluadora Eterna Miembro CAI Coordinadora Comité Colegio de Ciencias, Recinto de Ponce E enlace del Colegio de Ciencias al Comité de Avalúo Institucional (CAI) Directora del Departamento de Química. Colegio de Educación, Recinto de Ponce Miembro Comité Revisión Curricular del Colegio de Educación Enlace de Avalúo en el Colegio de Educación. Directora Avalúo Institucional El comité evaluador eterno utilizó la rúbrica provista para esos fines (Formulario EPA-05 Rúbrica para la Evaluación de Programas Académicos en la PUCPR). Esta fue revisada en junio de 2014 y ajustada a la Guía para la Autoevaluación de Programas Académicos revisada en septiembre de Todos los programas fueron evaluados por dos integrantes del comité y en ocasiones en consulta con los demás miembros. Para mantener la transparencia del proceso, los miembros del comité evaluaron los programas de otras unidades y no aquellos a los que están adscritos y no emitieron juicio con relación a la evaluación que se hizo sobre su unidad. Las labores de este comité consistieron en analizar las autoevaluaciones recibidas junto con la evidencia enviada, establecer la dinámica de trabajo a seguir y redactar los informes de los hallazgos y recomendaciones por programas. Las evaluaciones se realizaron en un periodo de 10 días laborables finalizando el 30 de junio de Las recomendaciones a los programas se sometieron a la de Avalúo Institucional (OAI), responsable de divulgar los mismos a los diversos estamentos y unidades de la PUCPR. Le corresponde a cada director (a) de unidad, discutir las recomendaciones con sus respectivos decanos y facultad para completar un plan de acción que deberá enviar a la de Avalúo Institucional. Page 4 of 28

5 EVALUACIÓN DEL PROGRAMA Las evaluaciones que realizó el comité se fundamentaron eclusivamente en la información provista en los informes que enviaron los departamentos a la de Avalúo Institucional. Se utilizó la rúbrica revisada provista para esos fines (Tabla 2) que se encuentra en el Manual para la Evaluación de Programas Académicos de la PUCPR vigente y la Guía para la Autoevaluación de Programas Académicos de la PUCPR (versión revisada en septiembre de 2013). Durante el proceso se discutieron y analizaron en grupo aspectos comunes y particulares de los documentos para mantener el máimo de imparcialidad y equidad. Como parte de la retro-comunicación a los documentos enviados por los directores, se utilizó una rúbrica adicional (Tabla 3) que contiene todos los elementos solicitados en el bosquejo para el informe de auto evaluación del programa que ayudará en el proceso de mejorar los futuros informes y facilite el proceso de evaluación. Algunos informes de auto evaluación carecen de la evidencia y análisis necesarios para que el comité CEPA emita un juicio amplio y completo con respecto al desempeño del programa. A estos fines se acordó junto con la de Avalúo Institucional (OAI), que los informes que no sometieron la evidencia en más del 40% de los ítems, se devolverán a los departamentos para que completen los mismos en la fecha que provea la oficina. Se presentan sugerencias y recomendaciones que ayudarán en el desarrollo del plan de acción para atender las necesidades del programa. Page 5 of 28

6 Pontificia Universidad Católica de Puerto Rico TABLA 2: HALLAZGOS DE LA EVALUACIÓN DEL PROGRAMA GRADUADO EN EDUCACIÓN CON ESPECIALIDAD EN EDUCACIÓN COMERCIAL Y SISTEMAS DE OFICINA Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de 1.0 I. Introducción 1.1 Título correcto del 1.1 programa y el grado(s) que otorga 1.2 Incluye fechas de autorizaciones, 1.2 acreditaciones, licencias y acreditaciones profesionales (de tenerlas). 2.0 II. Metas y Objetivos 2.1 Los objetivos del programa responden a la misión, metas y objetivos 2.1 institucionales (competencias institucionales). 3.0 III. Justificación y Pertinencia del programa 3.1 Las características del programa que justifican su 3.1 permanencia, están claramente definidas. Indica véase Apéndices pero no especifica cuáles

7 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de 3.2 El impacto del programa sobre otros programas o 3.2 departamentos de la institución está claramente establecido. 4.0 IV. Currículo La secuencia curricular se presenta claramente al estudiante y cumple con los requisitos en los cursos. 4.2 El perfil del egresado responde a la misión, metas y objetivos institucionales (competencias institucionales). 4.3 Hay congruencia entre los resultados del aprendizaje en el programa (metas y objetivos) con las competencias del perfil del egresado. 4.4 Hay congruencia entre el currículo, el perfil del egresado y las Page 7 of 28

8 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de competencias Los prontuarios de los cursos de la concentración, especialidad y de colegio incorporan los componentes esenciales requeridos institucionalmente y responden a las competencias institucionales que propenden hacia el logro del perfil del egresado del programa. 4.6 Los prontuarios están actualizados El tiempo que le toma a los estudiantes completar el programa es cónsono con la secuencia curricular establecida y con otros programas similares. Posible error indica que le toma 44 trimestres completar el grado Page 8 of 28

9 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de 4.8 Se justifica adecuadamente los cursos 4.8 de la secuencia curricular que no se ofrecieron en los pasados cinco años. 4.9 Hay consistencia en la descripción de los cursos 4.9 del programa en el Catálogo y las diversas fuentes donde se divulga Se justifica adecuadamente la inclusión, modificación o 4.10 eliminación de cursos en el programa durante los pasados años El departamento ofrece actividades cocurriculares y 4.11 etracurriculares que contribuyen a fortalecer el programa Los resultados de la reválida profesional en los 4.12 pasados 4 años satisface las epectativas de la No han habido cambios o creación de cursos por lo que se recomienda una revisión para atemperarlo a las necesidades de la sociedad actual Page 9 of 28

10 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de institución y de las agencias acreditadoras. 5.0 V. Estudiantes La tendencia de matrícula anual durante los pasados 4 años satisfizo las epectativas institucionales. 5.2 La tendencia de matrícula anual y la planificación de matrícula durante los pasados 3 ó 4 años satisfizo la epectativa institucional. 5.3 La tendencia de matrícula para los próimos 3 ó 4 años satisface la epectativa institucional. 5.4 Las tasas de admisión al programa vs matriculados de los pasados 4 años satisfizo las epectativas institucionales. Indican que tiende a disminuir por la situación económica actual. Completar tabla 5.3 de proyecciones de matrícula. Page 10 of 28

11 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de 5.5 Los créditos generados en los pasados 4 años satisfizo las epectativas institucionales. 5.6 Los créditos proyectados en los próimos 3 ó 4 años satisface las epectativas institucionales. 5.7 El porciento de retención en el programa en los pasados 5 años satisface las epectativas de la institución. 5.8 La tasa de graduación satisface las epectativas de la institución. 5.9 La tasa de aprobación de cursos de concentración o especialidad en los pasados 3 ó 4 años satisface las epectativas de la institución Las estrategias implantadas para mejorar las tasas en caso de que no Eiste una disminución en créditos generados, aunque proyectan un aumento Proyectan una disminución en créditos, indican se satisfacen las epectativas si los estudiantes toman una clase por trimestre. No incluyeron datos oficiales pero indican que los estudiantes que toman el eamen comprensivo lo aprueban. Page 11 of 28

12 5.11 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de fueran las esperadas son adecuadas La evidencia de que los egresados del programa tienen éito, cumple con las epectativas de la institución. 6.0 VI. Facultad 6.1 El programa cuenta con suficientes profesores para 6.1 responder a la demanda de cursos. 6.2 El personal docente adscrito al programa posee la preparación académica 6.2 superior al nivel que enseña y en la disciplina que enseña. 6.3 El personal docente adscrito al programa posee 6.3 la eperiencia adecuada en la enseñanza. Para mejorar el informe se recomienda que se indique el número del apéndice al cual se hace referencia o se coloque la evidencia directamente después de donde se menciona. Page 12 of 28

13 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de 6.4 El personal docente adscrito al programa enseña cursos que están de acuerdo a su área de especialidad. 6.5 Los resultados de evaluaciones de facultad al finalizar el término académico se utilizan adecuadamente para fortalecer los cursos y mejorar las ejecutorias de la facultad y fortalecer el proceso de enseñanza aprendizaje en el programa. 6.6 El plan de mejoramiento profesional de la facultad está dirigido a fortalecer el programa. 6.7 La facultad cumple con las horas del plan de mejoramiento profesional en el tiempo requerido. Mencionan que eisten ecelentes resultados de evaluación pero no indican si éstos se utilizan adecuadamente para fortalecer los cursos y mejorar las ejecutorias de la facultad y el proceso de enseñanzaaprendizaje del programa. Se presentan solamente tres evidencias de plan de mejoramiento profesional Se presentan evidencias de tres docentes Page 13 of 28

14 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de 6.8 La facultad del programa está actualizada en conocimientos y metodología de enseñanza, avalúo e integración de la tecnología en el aprendizaje, entre otros. 6.9 Las estrategias del departamento para retener y atender las necesidades de desarrollo profesional de la facultad del programa son adecuadas y están respaldadas por un presupuesto. VII. Resultados del Avalúo del Aprendizaje Estudiantil 7.1 Se implementaron estrategias adecuadas para avaluar el aprendizaje estudiantil a nivel de programa durante los pasados 3 a 4 años y tiene evidencia de los resultados del avalúo. Page 14 of 28

15 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de 7.2. Se implementaron prácticas frecuentes de avalúo en los cursos que han contribuido a mejorar el proceso de enseñanza aprendizaje. 7.3 La efectividad del programa en el logro de sus metas u objetivos se evidencia adecuadamente mediante los resultados del avalúo de: Evaluación de programas por candidatos a graduación Satisfacción de los egresados del programa Satisfacción de los patronos de los egresados. 7.4 Se utilizan los resultados del avalúo de la satisfacción de los candidatos a graduación, Indicar número de apéndice Tomarán en consideración los resultados del avalúo para determinar la satisfacción de candidatos a graduación, egresados y patronos. Page 15 of 28

16 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de egresados y los patronos para mejorar el programa. 7.5 Se utilizan los resultados del avalúo del aprendizaje estudiantil 7.5 para mejorar los procesos de enseñanza aprendizaje y realizar cambios curriculares. 7.6 Se utiliza una diversidad de estrategias de avalúo y evaluación 7.6 para medir el aprendizaje estudiantil en los cursos de concentración o especialidad. 8.0 VIII. Servicios de apoyo Los servicios de orientación y consejería académica y profesional responden a las necesidades de los estudiantes del programa. Utilizarán los resultados de avalúo para mejorar los procesos de enseñanza-aprendizaje para revisión curricular Page 16 of 28

17 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de 8.2 El programa cuenta con asociaciones estudiantiles y programas de intercambio (si aplica) que propenden al logro del perfil del egresado. 8.3 Los servicios administrativos que brinda el programa satisfacen las necesidades estudiantiles. 8.4 Los cambios o revisiones que realizó el programa en los servicios de apoyo que ofrece, contribuyeron a mejorar su eficiencia y efectividad. IX. Recursos físicos y tecnológicos para el aprendizaje 9.1 Los recursos físicos y tecnológicos accesibles para el desarrollo del programa atienden las necesidades de aprendizaje y satisfacen al estudiantado. Page 17 of 28

18 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de 9.2 Los recursos físicos y tecnológicos para la enseñanza y el aprendizaje satisfacen las necesidades docentes. 9.3 El programa cuenta con recursos tecnológicos actualizados y suficientes para garantizar la efectividad del proceso de enseñanza-aprendizaje. 9.4 El programa cuenta con instalaciones físicas, laboratorios y equipos auiliares actualizados para atender las nuevas tendencias en el programa y en la disciplina. 9.5 Las instalaciones físicas del programa se utilizan ai máimo de su capacidad X. Recursos fiscales y humanos en apoyo al programa Page 18 of 28

19 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de 10.1 Suficiencia de los recursos humanos disponibles para el funcionamiento del programa: Se mantiene una proporción adecuada de facultad a tiempo completo y tiempo parcial en el programa La facultad adscrita al programa es suficiente para cubrir las horas créditos que se generan anualmente Se mantiene una proporción adecuada de horas crédito de investigación por nivel de instrucción. Page 19 of 28

20 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de Se mantiene una proporción adecuada estudiantes por facultad tiempo completo y tiempo parcial por nivel de instrucción Suficiencia del presupuesto asignado para el funcionamiento del programa: Las necesidades del programa que no han sido atendidas por insuficiencia de presupuesto asignado a este se presentan con su correspondiente justificación y proyección presupuestaria. Page 20 of 28

21 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de El programa cuenta con un plan de inversión financiera para llevarlo a un nivel de calidad alto El programa cuenta con recursos eternos para su operación y continuidad de servicios El programa cuenta con acuerdos colaborativos que contribuyen a 10.4 fortalecer los recursos humanos y fiscales del programa XI. Servicio a la Comunidad En el programa se integran al currículo temas, investigaciones, servicios y gestiones en las comunidades. Fomentar acuerdos colaborativos para aumentar el fondo fiscal. Page 21 of 28

22 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de 11.2 Los estudiantes y la facultad del programa se incorporan en 11.2 oportunidades de servicio profesional público, proyectos comunitarios e internados, entre otros. XII. Evaluación General del 12.0 Programa 12.1 La evaluación del programa por los estudiantes evidencia que 12.1 éstos se sienten satisfechos con los diversos componentes del mismo La evaluación del programa por la facultad evidencia que ésta se 12.2 siente satisfecha con los diversos componentes del mismo. XIII. Fortalezas y 13.0 limitaciones en el Programa Hace referencia a apéndices pero no específica cuál, no indica número Page 22 of 28

23 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de 13.1 Se identifican las fortalezas del programa en los pasados años Se identifican las áreas que necesitan mejorar Se identifican los retos para el programa. XIV. Plan de Acción 14.0 Preliminar 14.1 Se establece un plan de acción preliminar para los hallazgos que necesitan 14.1 atención en el que se incluye los recursos fiscales que se necesitan. Page 23 of 28

24 Cumple Cumple Parcial No cumple No proveyó información No aplica TABLA 3: EVALUACIÓN DE LA ESTRUCTURA Y MONTAJE DEL INFORME C CP NC NP NA CRITERIOS A CONSIDERAR Inicio Portada Nombre del programa Departamento al que está adscrito el programa Colegio y recinto Fecha al momento de completarse el informe Segunda página Director del Programa al momento de completarse el informe Estamentos o comités en el departamento o colegio que trabajaron el informe ya sea por áreas o completo y las fechas en que completaron las áreas. Resumen Ejecutivo Breve descripción del programa académico Resumen de las metas u objetivos del programa Hallazgos sobresalientes del proceso de evaluación Progreso demostrado por el programa en el logro de sus metas y objetivos Fortalezas más significativas del programa Áreas que se necesitan mejorar Habla de la Institución, no es específico del programa a ser evaluado Page 24 of 28

25 Cumple Cumple Parcial No cumple No proveyó información No aplica C CP NC NP NA CRITERIOS A CONSIDERAR Principales recomendaciones para mejorar el programa Conclusiones sobre el estado actual del programa y los retos que enfrenta Estructura del trabajo Realizó en trabjo según el formato establecido en el Manual EPA Incluyó apéndices sin identificar los mismos con números o letras, hace referencia (ver apéndices) Page 25 of 28

26 Pontificia Universidad Católica de Puerto Rico OBSERVACIONES Y RECOMENDACIONES GENERALES DEL INFORME Y DEL PROGRAMA Concluida la evaluación eterna utilizando la Rúbrica sobre los Hallazgos de la Evaluación del Programa (Tabla 2) provista en el Manual para la Evaluación de Programas Académicos de la PUCPR, el Comité resume los resultados de la misma en la Tabla 4 a continuación. TABLA 4: COMPENDIO DE RESULTADOS DE EVALUACIÓN DEL INFORME DE AUTO ESTUDIO ANÁLISIS DE CUMPLIMIENTO DEL PROGRAMA ACADÉMICO C CP NC NP NA Total Resultados finales Por ciento 84% 6% 6% 1% 3% 100% NOTA: C = Cumple; CP = Cumple parcialmente; NC = No Cumple; NP = No Proveyó; NA = No Aplica El 84% de las premisas presentadas en el informe indican un alto grado de cumplimiento del programa. Utilice las observaciones y recomendaciones realizadas por el comité presentado en la Tabla 5, primera columna, que podrá utilizar para reforzar su Plan de Acción (EPA-04) previamente preparada. Además, queremos compartir con su unidad las observaciones relacionadas con la evaluación realizada en las premisas en la categoría de No proveyó la Información. Estas observaciones y recomendaciones le ayudarán en la preparación de futuros informes de evaluación de programas académicos. También le incluimos las recomendaciones que le ayudarán para la revisión y mejoramiento del programa (Tabla 5, columna 2).

27 Pontificia Universidad Católica de Puerto Rico TABLA 5: OBSERVACIONES Y RECOMENDACIONES REALIZADAS POR EL COMITÉ PARA MEJORAR EL PROGRAMA (COLUMNA 1) Y MEJORAR EL INFORME (COLUMNA 2). Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de Observaciones y recomendaciones para Observaciones y recomendaciones para mejorar el mejorar el programa informe. Para mejorar el informe se recomienda que se indique el número del apéndice al cual se hace referencia o se coloque la evidencia directamente después de donde se menciona. 0 Resumen Ejecutivo La información hace referencia a la institución y no al programa graduado en educación con especialidad en Educación Comercial y Sistemas de. 1 I. Introducción 2 II. Metas y Objetivos 3 III. Justificación y Pertinencia del programa 4 IV. Currículo Atemperar el contenido de los cursos a las necesidades tecnológicas actuales de la sociedad, ya que no ha habido cambios o modificaciones en los cursos. 5 V. Estudiantes Promocionar el programa para aumentar matrícula Preparar una lista de estrategias para lograr aumentar la matrícula del programa. 6 VI. Facultad VII. Resultados del Avalúo del Aprendizaje 7 Estudiantil Promover la participación de la facultad en el proceso de avalúo 8 VIII. Servicios de apoyo Posible error en el criterio, 4.7 indica que le toma 44 trimestres completar el programa. Completar tabla 5.3 de proyecciones de matrícula. Presentar datos oficiales de la tasa de graduación. Indicar el número de apéndice al citar el mismo en el teto. Presentar evidencia de resultados de evaluación para fortalecer los cursos Indicar número de apéndice al cual se hace referencia. 9 IX. Recursos físicos y tecnológicos para el aprendizaje

28 Título del programa: Programa Graduado en Educación con especialidad en Educación Comercial y Sistemas de Observaciones y recomendaciones para Observaciones y recomendaciones para mejorar el mejorar el programa informe. X. Recursos fiscales y humanos en apoyo al 10 programa Fomentar acuerdos colaborativos y escribir propuestas para obtener fondos que ayuden a mejorar el programa. 11 XI. Servicio a la Comunidad 12 XII. Evaluación General del Programa 13 XIII. Fortalezas y limitaciones en el Programa Escribir narrativo de los resultados de evaluación del programa por la facultad. Hacer referencia a apéndices y específicar número. 14 XIV. Plan de Acción Preliminar 15 Otras recomendaciones al programa Indicar los costos de las actividades del plan de acción. NOTA: Es necesario desarrollar un plan de acción que atienda áreas importantes como avalúo del aprendizaje en los cursos y otros aspectos que se recomienda atender. Deberán enviar copia digital del plan (EPA-04) revisado a la de Avalúo Institucional. Es necesario realizar una revisión curricular que atienda estos aspectos que son parte importante de las nuevas competencias del egresado de la PUCPR y que contribuya a renovar el programa. Page 28 of 28