Diseño de pruebas de contenidos

Transcripción

1 Diseño de pruebas de contenidos teóricos Elaborar una prueba de evaluación de contenido teórico con diferentes ítems. Aplicar las normas de elaboración y corrección de los diferentes tipos de ítems. Realizar la tabla de especificaciones de una prueba teórica 1

2 Prueba de contenidos teóricos Examen escrito cuyas características principales son: Presencia de un alto número de preguntas breves en su enunciado y sobre todo en su respuesta. La valoración de los resultados y las respuestas aceptables están previamente fijadas. El procedimiento de la prueba está previamente determinado 2

3 Tabla de especificaciones Finalidad: lograr que la prueba sea representativa de los objetivos que queremos evaluar. Pasos a seguir: Determinar las áreas de contenido a evaluar dentro de cada U.D. Otorgar un porcentaje de importancia a cada una de las áreas (U.D. o partes de contenido) Fijar el número de ítems para cada contenido en función del número de ítems de la prueba Repartir los ítems en función de los niveles de conocimiento 3

4 Tabla de especificaciones 4

5 Tabla de especificaciones: Niveles de conocimiento El conocimiento de un determinado contenido puede exigirse a distintos niveles Recordar datos Interpretación correcta de información Resolver un problema Suponen distintos grados de complejidad intelectual. Para distinguirlos se utiliza la taxonomía de Bloom Conocimiento Comprensión Aplicación Análisis Síntesis Evaluación 5

6 Tabla de especificaciones: Niveles de conocimiento Conocimiento: Recordar o reconocer información específica como: hechos, fechas, nombres, símbolos, teorías, definiciones y otros Comprensión: Entender el material que se ha aprendido. Esto se demuestra cuando se presenta la información de otro modo, se transforma, se buscan relaciones, se asocia, se interpreta lo aprendido o se presentan posibles efectos o consecuencias. Aplicación: Llevar el conocimiento y destrezas adquiridas a nuevas situaciones. Análisis: Encontrar patrones; organizar las partes; reconocer significados ocultos; identificar componentes. Síntesis: Generar, organizando los elementos de la información disponible, un producto original, que puede ser la comunicación de ideas o experiencias sobre un tema, un determinado plan de acción o un modelo hipotético para explicar distintos fenómenos. Evaluación: El alumnado emitirá un juicio de valor sobre un determinado material. Los criterios de evaluación se le pueden suministrar o dejar que el propio alumnado los determine. 6

7 Tabla de especificaciones: Niveles de conocimiento Cuál es el nombre de este botón en Microsoft Excel? Fuente Cuadro de texto Combinar y centrar Cambiar mayúsculas y minúsculas En una hoja de cálculo, necesito saber cuantas celdas contienen un valor mayor que 100 Qué función o funciones serían las más adecuadas para calcularlo? Sumar.si Contar.si Contar y si Sumar y si Si aparecen los siguientes símbolos ### en una celda de Microsoft Excel A qué es debido? El contenido de la celda es numérico y se le ha aplicado un formato inadecuado Se ha escrito texto en una celda cuyo formato es numérico Error en una fórmula cuyo resultado es numérico Falta espacio en una celda con contenido numérico, para poder ver su contenido 7

8 Clasificación de ítems Ítems de la prueba teórica OBJETIVA Ítems para la evaluación de aprendizajes complejos Evocación Reconocimiento Selección Pruebas de ensayo Pruebas de ejercicios interpretativos Respuesta breve Texto incompleto Verdadero o falso Correspondencia Selección múltiple Miden aprendizajes a nivel de: Conocimiento, Comprensión o Aplicación Miden aprendizajes a nivel de: Análisis, Síntesis o Evaluación 8

9 Clasificación de ítems Dependiendo del nivel de aprendizaje u objetivo a evaluar utilizaremos un tipo de ítems u otros Tipo de ítem Evocación Reconocimiento Selección Objetivos Ensayo Breve Ensayo extenso Ejercicio interpretativo Conocimiento X X X Comprensión X X X X Aplicación X X X X Análisis X X X Síntesis X X Evaluación X X 9

10 Ítems de evocación 10

11 Ítems de evocación: Normas de elaboración Redactar la pregunta de manera que únicamente sea posible una respuesta. Evitar el uso de expresiones idénticasa las que figuran en los manuales. Cuando la respuesta al ítem sean números indicar el tipo de unidades exigidas. Considerar válida toda respuesta que exprese correctamente el concepto requerido. Los espacios en blanco de la misma longitud. Limitar la cantidad de ítems de evocación a un 20% del total, pues miden objetivos sencillos. 11

12 Ítems de evocación: Normas de corrección La suma de los aciertos será la puntuación total. 12

13 Ítems de reconocimiento: Verdadero o falso Miden capacidades del alumnado para: Diferenciar hechos y opiniones Identificar relaciones causa-efecto Distinguir conclusiones válidas de las que no lo son Su uso debe ser limitado: Reconocer una proposición como falsa no garantiza que se conozca la respuesta correcta El alumnado puede fijar o recordar enunciados falsos como verdaderos Es difícil encontrar situaciones reales en las que algo sea categóricamente falso o verdadero. La incidencia del azar es del 50% 13

14 Verdadero/Falso: Normas de elaboración Cada enunciado sólo debe incluir una idea o concepto. Evitar formulaciones negativas y especialmente la doble negación. 14

15 Verdadero/Falso: Normas de elaboración La verdad o falsedad de los ítems debe ser lo más categórica posible. Las proposiciones muy generales deben evitarse. 15

16 Verdadero/Falso: Normas de elaboración Redactar los ítems verdaderos con la misma extensión que los falsos. Evitar términos como: siempre, nunca, sólo, nadie, ninguno. Se asocian con respuestas falsas. Son escasas las situaciones verdaderas que no tienen excepciones. con frecuencia, usualmente, a veces. Se asocian con respuestas verdaderas. El porcentaje de ítems verdaderos y falsos debe variar. 16

17 Verdadero/Falso: Normas de corrección Para compensar las respuestas que puedan deberse al azar, se resta al total de aciertos el número de errores. Si la puntuación resultante fuese negativa se califica con cero. 17

18 Ítems de reconocimiento: Correspondencia Miden la capacidad de identificar relaciones basándose en el conocimiento de asociaciones concretas. 18

19 Ítems de reconocimiento: Correspondencia La variedad de campos a asociar es amplia. Por ejemplo: 19

20 Ítems de reconocimiento: Correspondencia Ventaja: se puede medir gran cantidad de información en poco tiempo. Dada la variedad de conceptos que incluye cada ítem. Limitaciones: Dificultad de encontrar material homogéneo para la construcción de listas amplias de elementos a asociar. Frecuente riesgo de que existan claves, que favorecen la elección de la respuesta correcta 20

21 Correspondencia: Normas de elaboración Establecer un número desigual de premisas Especificando en las instrucciones que las premisas y respuestas pueden relacionarse una vez, varias veces o ninguna vez. Evitando el acierto por eliminación. El material que compone el ítem debe ser homogéneo. La lista de premisas debe ser breve (3-6) El ítem no debe dividirse en varias hojas Evitar claves reveladoras La lista de premisas debe estar colocada en orden lógico: alfabético o secuencia numérica 21

22 Correspondencia: Normas de corrección Cada ítem de correspondencia se corregirá según una de las siguientes fórmulas: Puntuación=Número de aciertos dividido entre número de alternativas. Puntuación=Número de aciertos 22

23 Ítems de reconocimiento: Selección múltiple Es el más utilizado porque mide aprendizajes más complejos. El ítem está formado por: Base o pregunta: Enunciado del problema Opciones o alternativas: Posibilidades que se ofrecen para la respuesta Distractores: Alternativas incorrectas 23

24 Ítems de reconocimiento: Selección múltiple Selección de la respuesta correcta Selección de la respuesta más correcta 24

25 Ítems de reconocimiento: Selección múltiple Ventajas Amplia aplicabilidad a los distintos objetivos del aprendizaje. Reduce el acierto por azar Su valor diagnóstico Son adecuadas para el alumnado de bajo nivel verbal. Limitaciones Incapacidad para medir objetivos que supongan creatividad Dificultad para elaborar suficientes distractores aceptables 25

26 Selección múltiple: Normas de elaboración La pregunta debe tener sentido por sí sola, sin alternativas. Evitar formulación negativa, si se usa destacarla. Evitar sobrecargar de información la pregunta Evitar la inclusión de términos absolutos en los distractores Las palabras que se vayan a repetir en todas las alternativas las incluimos en la pregunta 26

27 Selección múltiple: Normas de elaboración Cuando se pretende medir la comprensión de términos, conceptos, éstos deben figurar en la pregunta, mientras que definiciones o descripciones figurarán en las alternativas. Evitar claves reveladoras: Verbales Gramaticales Por heterogeneidad Se recomienda 4 alternativas y que la verdadera sea sólo una 27

28 Selección múltiple: Normas de corrección Para controlar la incidencia del azar, dividimos los errores entre la diferencia del número de alternativas total y las alternativas correctas, el resultado lo restamos a los aciertos. 28

29 Selección múltiple: Ejemplos 29

30 Selección múltiple: Ejemplos 30

31 Corrección de pruebas con distintos tipos de ítems Corregir cada tipo de ítems según formulación específica. Sumar todas las puntuaciones directas. Pasar a puntuación decimal utilizando la fórmula: 31

32 Resumen Corrección de pruebas Tipo de ítem Fórmula Aclaración de abreviaturas Respuesta breve y texto incompleto Verdadero / Falso Selección múltiple Correspondencia Prueba formulada con distintos tipos de ítems P P=A P=A-E = A P=A/N Ó P=A E N n P=Puntuación A=Aciertos P=Puntuación A=Aciertos E=Errores P=Puntuación A=Aciertos E=Errores N=Nº total de alternativas N=nº de alternativas verdaderas P=Puntuación A=Aciertos N=Nº total de alternativas 1. Agrupar los ítems según tipo 2. Corregir cada tipo de ítems por separado 3. Sumar todas las puntuaciones directas 4. Pasarlo a puntuación decimal (regla de tres en base a puntuación máxima 10) 32

33 33

34 34

35 Encabezado de una prueba de conocimiento Las pruebas de conocimiento deben tener un encabezado y unas instrucciones generales con el fin de presentarlas y dejar claro al alumnado el modo de cumplimentarla. Encabezado Nombre y número de curso Tipo de prueba Nombre de módulo y/o U.U.D.D, que se evalúan Centro Nombre apellidos del alumno Fecha Instrucciones Nº de ítems, tipo, tiempo estimado Normas de cumplimentación Forma de calificación, calificación mínima para apto 35

36 Bibiografía CENTRO DE REFERENCIA NACIONAL DE FORMACIÓN PROFESIONAL EN JARDINERÍA DE LOS REALEJOS. (2010): Introducción a la metodología didáctica, Tenerife CENTRO NACIONAL DE FORMACIÓN PROFESIONAL LAS PALMAS. (2012): Manual de metodología didáctica, Las Palmas 36