GUÍAS PRUEBAS SABER Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de 2011

Transcripción

1 GUÍAS PRUEBAS SABER Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de 2011

2 Presidente de la República Juan Manuel Santos Calderón Ministra de Educación Nacional María Fernanda Campo Saavedra Viceministro de Educación Preescolar, Básica y Media Mauricio Perfetti del Corral Directora General Margarita Peña Borrero Secretaria General Gioconda Piña Elles Jefe de la Oficina Asesora de Comunicaciones y Mercadeo Ana María Uribe González Director de Evaluación Julián Patricio Mariño von Hildebrand Director de Producción y Operaciones Francisco Ernesto Reyes Jiménez Director de Tecnología Adolfo Serrano Martínez Subdirectora de Análisis y Divulgación Maria Isabel Fernandes Cristóvão Elaboración del documento Gabriela Villamizar Martínez Maria Isabel Fernandes Cristóvão Revisor de estilo Fernando Carretero Socha Diagramación Nancy Alejandra Guzmán Escobar ISBN de la versión electrónica: Bogotá, D.C., mayo de 2012 Advertencia Con el fin de evitar la sobrecarga gráfica que supondría utilizar en español o/a para denotar uno u otro género, el ICFES opta por emplear el masculino genérico en el que todas las menciones de este se refieren siempre a hombres y mujeres. ICFES Todos los derechos de autor reservados. Todo el contenido es propiedad exclusiva y reservada del ICFES y es el resultado de investigaciones y obras protegidas por la legislación nacional e internacional. No se autoriza su reproducción, utilización ni explotación a ningún tercero. Solo se autoriza su uso para fines exclusivamente académicos. Esta información no podrá ser alterada, modificada o enmendada.

3 GUÍAS Contenido Presentación Características de la aplicación muestral de las pruebas SABER realizada en Características de la prueba Objetivo Características de las pruebas Niveles de desempeño Características de las pruebas de lenguaje, matemáticas y ciencias naturales Prueba de lenguaje Prueba de matemáticas Prueba de ciencias naturales Tipos de resultados Comparación de resultados Cómo consultar los resultados Consulta de los resultados de un establecimiento educativo Ejemplos Recomendaciones Anexo Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de

4 Presentación En el marco de la estrategia de mejoramiento de la calidad de la educación, se adelantan evaluaciones periódicas del desempeño de los estudiantes de educación básica y se recoge información para identificar los factores que inciden en sus resultados, con el fin de orientar la toma de decisiones de política. Las pruebas SABER vienen aplicándose desde comienzos de la década de los años Con la entrada en vigencia de la Ley 715 de 2001, su aplicación tiene carácter censal y debe hacerse por lo menos cada tres años. Como consecuencia, hasta 2009 se realizaron tres operativos censales y se prepara la aplicación de Adicionalmente, a partir de 2011 se realizan operativos muestrales a fin de monitorear los resultados del sistema educativo para que cada uno de sus actores tome decisiones oportunas y pertinentes en pro del mejoramiento de la educación del país. En reconocimiento al compromiso de los establecimientos educativos que formaron parte de la muestra en 2011, el ICFES elaboró un reporte con los resultados obtenidos por sus estudiantes para que dispongan de información para revisar sus planes de acción y para orientar la definición de estrategias de mejoramiento. Esta guía, que contiene las orientaciones para que los establecimientos educativos participantes en la muestra de 2011 obtengan sus respectivos reportes y realicen una adecuada lectura e interpretación de los resultados, está organizada en ocho capítulos. El primero describe brevemente la aplicación muestral realizada el año anterior; el segundo, las características generales de las pruebas: objetivos y qué se evalúa. A su vez, los capítulos tres y cuatro describen los niveles de desempeño y el marco conceptual de las pruebas de lenguaje, matemáticas y ciencias naturales. En el quinto se explican los tipos de resultados producidos para los establecimientos educativos; el sexto da cuenta de las comparaciones que se pueden efectuar a partir de la información reportada. Finalmente, en el capítulo siete se explica cómo obtener los resultados de los establecimientos educativos, los cuales están disponibles para consulta y descarga en la página web y en el ocho se formulan algunas recomendaciones para la formulación de metas de mejoramiento a partir de los resultados. 4

5 GUÍAS 1. Características de la aplicación muestral de las pruebas SABER realizada en 2011 En 2011, las pruebas SABER se aplicaron a una muestra representativa nacional de 700 establecimientos educativos, oficiales y privados, urbanos y rurales. En esta oportunidad se evaluaron cerca de estudiantes de quinto grado y de noveno, quienes contestaron pruebas de lenguaje, matemáticas, ciencias naturales y competencias ciudadanas. Además, se aplicaron varios cuestionarios, con el propósito de recoger información sobre el contexto sociodemográfico de los estudiantes y los contextos escolares. Tanto la prueba de competencias ciudadanas como la totalidad de los cuestionarios tuvieron un carácter de pilotaje, con miras a la aplicación censal que se realizará en octubre de Por este motivo no se entregan resultados en competencias ciudadanas ni información, según niveles socioeconómicos de los establecimientos educativos. En la aplicación muestral realizada en 2011 también participaron aquellos estudiantes que presentaban algún tipo de discapacidad (física, sensorial o cognitiva) o que cursaban alguno de los siguientes modelos educativos flexibles auspiciados por el Ministerio de Educación Nacional: Escuela Nueva, Aceleración del Aprendizaje o Etnoeducación en el caso de quinto grado, y Postprimaria Rural, Telesecundaria o Etnoeducación, para noveno. Los resultados de los estudiantes con discapacidad cognitiva (síndrome de Down o de Asperger) no se tomaron en cuenta al momento de estimar los puntajes promedio y los niveles de desempeño en cada área y grado evaluados. Sin embargo, aquellos establecimientos que reportaron alumnos con este tipo de discapacidad podrán consultar sus resultados en su informe. A partir de la información obtenida por esta aplicación se generarán dos tipos de reportes de resultados: uno destinado a cada uno de los establecimientos educativos participantes en la muestra, para darles retroalimentación sobre los desempeños de sus estudiantes, y otro en el que se analizarán los resultados agregados para el total de la muestra, así como las principales diferencias en los mismos según tipo de colegio (oficial urbano, oficial rural o privado) y género de los alumnos. Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de

6 2. Características de las pruebas 2.1 Objetivo El principal objetivo de las pruebas SABER es determinar en qué grado los estudiantes de educación básica se acercan al logro de los resultados esperados, según los estándares básicos de competencias definidos por el Ministerio de Educación Nacional 1. Los resultados de esta evaluación permiten que las instituciones educativas, las secretarías y el Ministerio de Educación Nacional (MEN) construyan planes de mejoramiento en sus respectivos ámbitos de actuación y valoren los avances en el tiempo Características de las pruebas En 2011 se evaluaron las competencias en lenguaje, matemáticas, ciencias naturales y competencias ciudadanas que los estudiantes han alcanzado hasta la finalización del ciclo de básica primaria o grado quinto y hasta la culminación del ciclo de básica secundaria, o noveno grado. La construcción de estas pruebas partió de lo establecido en los estándares básicos de competencias, en cuanto a las competencias y componentes establecidos para cada una de estas áreas (véase tabla 1). Tabla 1. Competencias y componentes evaluados en las pruebas aplicadas en 2011 Área Competencias Componentes Lenguaje Matemáticas Ciencias naturales Comunicativa Razonamiento y argumentación Comunicación, representación y modelación Planteamiento y resolución de problemas Uso comprensivo del conocimiento científico Explicación de fenómenos Indagación Semántico Sintáctico Pragmático Numérico-variacional Geométrico-métrico Aleatorio Entorno vivo Entorno físico Ciencia, tecnología y sociedad 1 Ministerio de Educación Nacional (2006). Estándares básicos de competencias en lenguaje, matemáticas, ciencias y ciudadanas. Lo que los estudiantes deben saber y saber hacer con lo que aprenden. Bogotá: Ministerio de Educación Nacional, Documento No. 3, p ICFES (2011). Pruebas SABER 5o. y 9o. Lineamientos para la aplicación muestral de Bogotá, ICFES, septiembre. 6

7 GUÍAS Al igual que en 2009, las pruebas aplicadas en 2011 se estructuraron con la metodología denominada diseño de especificaciones basado en el modelo de evidencias, que consiste en un conjunto de procesos que parten de la identificación de las competencias que se evaluarán y llegan hasta la definición de las preguntas, de modo que estas se conviertan en las evidencias de los conocimientos, habilidades o capacidades que quieren medirse (véase figura 1). Este modelo permite construir instrumentos de evaluación masiva con alto grado de validez, y garantiza además la comparabilidad de los resultados en el tiempo. El primer paso de la metodología consiste en definir cuáles son los resultados de aprendizaje que se espera que los estudiantes alcancen y que quieren medirse. Este responde a lo deseable, que está establecido en los referentes de política educativa, específicamente en los estándares básicos de competencias. Luego de definir los resultados de aprendizaje y de determinar aquellos que se quieren evaluar, es posible seleccionar y diseñar actividades de evaluación que permitan recoger las evidencias que se necesitan para emitir los juicios pertinentes sobre el logro (o no) de los resultados esperados. De ese modo, en este estrato se define qué se quiere medir y se describe el objeto de la medida. En el siguiente estrato se construyen afirmaciones, que especifican el referente a partir del cual se harán las inferencias sobre los resultados de la evaluación. Las afirmaciones son enunciados globales acerca de los conocimientos, capacidades y habilidades de los estudiantes. Involucran acciones complejas que articulan varios procesos de pensamiento en un marco conceptual o disciplinar amplio. Por su parte, cada afirmación se apoya en una serie de evidencias que corresponden a enunciados que representan acciones o ejecuciones observables que revelan el constructo que se va a medir y a través de las cuales es posible verificar si este se ha alcanzado. De las evidencias se construyen tareas, que se refieren a lo que se les pide a los estudiantes que hagan en una evaluación. Las tareas son enunciados que representan una actividad específica y corresponden a una descripción de una familia de preguntas o de actividades de evaluación. Para cada tarea se construyen preguntas. Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de

8 8 Figura 1. Proceso de construcción de especificaciones de pruebas a través de la metodología de diseño de especificaciones basado en el modelo de evidencias

9 GUÍAS 3. Niveles de desempeño Los niveles de desempeño que se reportan a partir de los datos obtenidos en las pruebas, muestran lo que saben y saben hacer los estudiantes en cada área y grado; asimismo, describen las exigencias conceptuales y cognitivas que se requieren para responder preguntas con diferentes grados de complejidad. Estos niveles de desempeño tienen las siguientes características: Son globales, pues están definidos para la prueba total y no para cada uno de los componentes y competencias evaluados. Son jerárquicos, pues tienen complejidad creciente. Es decir, el nivel avanzado es más complejo que el satisfactorio y este último es más complejo que el nivel mínimo. Son inclusivos, ya que los estudiantes ubicados en un determinado nivel, por ejemplo, satisfactorio, también son aptos para cumplir los desempeños determinados para el nivel mínimo. En la tabla 2 se presentan las descripciones genéricas de cada uno de los niveles de desempeño establecidos para estas pruebas. Tabla 2. Descripción de los niveles de desempeño Nivel Descripción: Un estudiante promedio ubicado en este nivel Avanzado Satisfactorio Mínimo Insuficiente Muestra un desempeño sobresaliente en las competencias esperadas para el área y grado evaluados. Muestra un desempeño adecuado en las competencias exigibles para el área y grado evaluados. Este es el nivel esperado que todos, o la gran mayoría de los estudiantes debería alcanzar. Muestra un desempeño mínimo en las competencias exigibles para el área y grado evaluados. No supera las preguntas de menor complejidad de la prueba. Para obtener las descripciones de los niveles de desempeño establecidos en cada área y grado, consúltese el anexo. Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de

10 4. Características de las pruebas de lenguaje, matemáticas y ciencias naturales 4.1 Prueba de lenguaje Los estándares básicos de competencias en esta área parten del reconocimiento de que existen múltiples manifestaciones del lenguaje, que brindan a las personas la posibilidad de apropiarse del entorno e intervenir sobre la realidad social de formas muy ricas, diversas y complejas 3. Por ello, se organizan en torno a cinco factores: (a) producción textual; (b) comprensión e interpretación textual; (c) literatura, que supone un abordaje de la perspectiva estética del lenguaje; (d) medios de comunicación y otros sistemas simbólicos; y (e) ética de la comunicación, un aspecto transversal a los cuatro factores anteriores. No obstante esta diversidad de manifestaciones, en todas ellas ocurren dos procesos fundamentales: la comprensión y la producción. La primera se refiere a la búsqueda y reconstrucción del sentido y los significados presentes en diferentes tipos de textos (literarios, informativos, descriptivos, avisos, tablas, gráficos, entre otros) y otras formas de comunicación no verbal, como gestos, música y expresiones artísticas en general. A su vez, la segunda tiene que ver con la generación de significados, tanto para expresarse como para transmitir información o interactuar con los demás. En concordancia con estos planteamientos, la prueba de lenguaje evalúa dos competencias: la lectora y la escritora. La primera abarca la comprensión, el uso y la reflexión sobre las informaciones contenidas en diferentes tipos de textos, e implica una relación dinámica entre estos y el lector. La segunda se refiere a la producción de textos escritos de manera que respondan a las necesidades de comunicarse (exponer, narrar, argumentar, entre otras), sigan unos procedimientos sistemáticos en su elaboración y permitan poner en juego los conocimientos de la persona que escribe sobre los temas tratados y el funcionamiento de la lengua en las situaciones comunicativas. De esta manera, en la valoración de ambas competencias se contemplan los cinco factores definidos en los estándares. Para la evaluación de competencia lectora y la escritora se consideran tres componentes transversales: el sintáctico, el semántico y el pragmático. 3 Ministerio de Educación Nacional (2006). Estándares básicos de competencias. Bogotá: Ministerio de Educación Nacional. p

11 GUÍAS Competencia lectora La competencia lectora explora la forma como los estudiantes leen e interpretan diferentes tipos de textos. Se espera que puedan comprender tanto la información explícita como la implícita en los textos, establecer relaciones entre sus contenidos y lo que saben acerca de un determinado tema, así como realizar inferencias, sacar conclusiones y asumir posiciones argumentadas frente a los mismos. En términos generales, la prueba de lectura les propone a los estudiantes una reflexión en torno a qué dice el texto (contenidos -conceptuales e ideológicos-); cómo lo dice (organización); para qué lo dice y por qué lo dice (pragmática); cuándo lo dice y quién lo dice. Las preguntas de la prueba se orientan a establecer la capacidad de los estudiantes para realizar lecturas literales, inferenciales o críticas. Con base en las orientaciones establecidas en los estándares básicos de competencias, las preguntas que evalúan la competencia lectora se organizan alrededor de textos seleccionados de acuerdo con los siguientes criterios: (a) la pertinencia de la temática en función de la edad de los estudiantes y el grado que cursan; (b) el vocabulario; (c) la complejidad sintáctica; (d) los saberes previos según el grado cursado; (e) la complejidad estilística; (f) la complejidad de la estructura del texto; y (g) la extensión. Asimismo, se toman en cuenta diferentes tipos de textos, atendiendo la diversidad de formas de organización y estructuración de información. La tabla 3 muestra los tipos de textos que se utilizan en la prueba. Tabla 3. Tipos de textos utilizados Textos literarios Descriptivos Narrativo (prosa y narrativa icónica) Lírico Textos expositivos Informativo Explicativo Argumentativo Nota: en quinto grado no se evalúa el texto lírico y en noveno no se evalúa el texto descriptivo Competencia escritora De acuerdo con los estándares, esta competencia se refiere a la producción de textos escritos, de manera que atiendan a los siguientes requerimientos: (a) responder a las necesidades comunicativas, es decir, si se requiere relatar, informar, exponer, solicitar o argumentar sobre un determinado tema; (b) cumplir procedimientos sistemáticos para su elaboración; y (c) utilizar los conocimientos de la persona que escribe acerca de los temas tratados, así como el funcionamiento de la lengua en las diversas situaciones comunicativas. Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de

12 La prueba evalúa el proceso de escritura y no la escritura en sí. Esto significa que no se les solicitará a los estudiantes la elaboración de textos escritos, sino que las preguntas indagarán sobre los tipos de textos que ellos utilizarían para lograr un determinado propósito o finalidad comunicativa, la forma como los organizarían para expresar un mensaje o una idea, y aspectos relacionados con el uso adecuado de las palabras y frases para producir textos con sentido Componentes que se evalúan La prueba de lenguaje considera los siguientes tres componentes transversales a las dos competencias evaluadas: Semántico: hace referencia al sentido del texto en términos de su significado. Este componente indaga por el qué se dice en el texto. Sintáctico: se relaciona con la organización del texto en términos de su coherencia y cohesión. Este componente indaga por el cómo se dice. Pragmático: tiene que ver con el para qué se dice, en función de la situación de comunicación. 4.2 Prueba de matemáticas En esta prueba se adopta la perspectiva integradora de los lineamientos curriculares y estándares básicos de competencias respecto a los conocimientos, procesos y contextos. Se privilegian como contextos las situaciones problemáticas enmarcadas en las mismas matemáticas, la vida diaria y las otras ciencias. La evaluación se refiere al saber hacer en el contexto matemático escolar, es decir, a las formas de proceder asociadas al uso de los conceptos y estructuras matemáticos. En la prueba, la aproximación toma en cuenta las significaciones que el estudiante ha logrado construir y que pone en evidencia cuando se enfrenta con diferentes situaciones problema. En ella se evalúa el significado de los conceptos matemáticos y la práctica significativa, relacionada esta última con la matematización que le exige al estudiante simbolizar, formular, cuantificar, validar, esquematizar, representar, generalizar, entre otros. Estas actividades le permitirán desarrollar descripciones matemáticas, explicaciones o construcciones. Lo anterior implica indagar por las formas de proceder (las competencias) y por los aspectos conceptuales y estructurales de las matemáticas (los componentes). 12

13 GUÍAS Las competencias La prueba evalúa competencias matemáticas de comunicación, modelación, razonamiento, planteamiento y resolución de problemas, elaboración, comparación y ejercitación de procedimientos. En la construcción de las pruebas estas competencias se reagruparon así: el razonamiento y la argumentación; la comunicación, la representación y la modelación; y el planteamiento y resolución de problemas. En estas últimas quedan inmersas, desde luego, la elaboración, comparación y ejercitación de procedimientos. El razonamiento y la argumentación: relacionados, entre otros, con aspectos como el dar cuenta del cómo y del porqué de los caminos que se siguen para llegar a conclusiones, justificar estrategias y procedimientos puestos en acción en el tratamiento de situaciones problema, formular hipótesis, hacer conjeturas, explorar ejemplos y contraejemplos, probar y estructurar argumentos, generalizar propiedades y relaciones, identificar patrones y expresarlos matemáticamente y plantear preguntas, reconocer distintos tipos de razonamiento y distinguir y evaluar cadenas de argumentos. La comunicación, la representación y la modelación: se refieren, entre otros aspectos, a la capacidad del estudiante para expresar ideas, interpretar, usar diferentes tipos de representación, describir relaciones matemáticas, relacionar materiales físicos y diagramas con ideas matemáticas, modelar usando lenguaje escrito, oral, concreto, pictórico, gráfico y algebraico, manipular proposiciones y expresiones que contengan símbolos y fórmulas, utilizar variables y construir argumentaciones orales y escritas, traducir, interpretar y distinguir entre diferentes tipos de representaciones, interpretar lenguaje formal y simbólico y traducir de lenguaje natural al simbólico formal. El planteamiento y resolución de problemas: se relacionan, entre otros, con la capacidad para formular problemas a partir de situaciones dentro y fuera de las matemáticas, desarrollar, aplicar diferentes estrategias y justificar la elección de métodos e instrumentos para la solución de problemas, justificar la pertinencia de un cálculo exacto o aproximado en la solución de un problema y lo razonable o no de una respuesta obtenida, verificar e interpretar resultados a la luz del problema original y generalizar soluciones y estrategias para dar solución a nuevas situaciones problema. Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de

14 4.2.2 Los componentes Para estructurar la prueba se reorganizaron los cinco pensamientos descritos en los lineamientos curriculares y en los estándares básicos de competencias en los tres componentes evaluados: el numérico-variacional, el geométrico-métrico y el aleatorio. Esta división no pretende separar las matemáticas en elementos discretos; por el contrario, estos tienen la intención de proporcionar un esquema de clasificación útil que describe el espectro total de los componentes matemáticos planteados en los estándares. A veces no resulta tan claro clasificar los ítems en una sola categoría de componente, pero al hacerlo se acerca al objetivo de asegurar que los conocimientos y habilidades matemáticos importantes se miden de una manera balanceada. Numérico-variacional: indaga por la comprensión de los números y de la numeración, el significado del número, la estructura del sistema de numeración; por el significado de las operaciones, la comprensión de sus propiedades, de su efecto y de las relaciones entre ellas; por el uso de los números y las operaciones en la resolución de problemas diversos, el reconocimiento de regularidades y patrones, la identificación de variables, la descripción de fenómenos de cambio y dependencia; por conceptos y procedimientos asociados a la variación directa, a la proporcionalidad, a la variación lineal en contextos aritméticos y geométricos, a la variación inversa y al concepto de función. Geométrico-métrico: se relaciona con la construcción y manipulación de representaciones de los objetos del espacio, las relaciones entre estos y sus transformaciones; más específicamente, con la comprensión del espacio, el desarrollo del pensamiento visual, el análisis abstracto de figuras y formas en el plano y en el espacio a través de la observación de patrones y regularidades, el razonamiento geométrico y la solución de problemas de medición, la construcción de conceptos de cada magnitud (longitud, área, volumen, capacidad, masa, etc.), comprensión de los procesos de conservación, la estimación de magnitudes, la apreciación del rango, la selección de unidades de medida, de patrones y de instrumentos, el uso de unidades, la comprensión de conceptos de perímetro, área y volumen. Aleatorio: indaga por la representación, lectura e interpretación de datos en contexto; por el análisis de diversas formas de representación de información numérica, el análisis cualitativo de regularidades, de tendencias, de tipos de crecimiento, y la formulación de inferencias y argumentos usando medidas de tendencia central y de dispersión; y por el reconocimiento, descripción y análisis de eventos aleatorios. 14

15 GUÍAS 4.3 Prueba de ciencias naturales Esta prueba busca establecer y diferenciar las competencias de los estudiantes para poner en juego sus conocimientos básicos de las ciencias naturales en la comprensión y resolución de problemas. La prueba evalúa, además, la comprensión que los estudiantes tienen sobre las particularidades y los alcances del conocimiento científico y su capacidad para diferenciar este conocimiento de otros saberes. La evaluación también se propone conocer la capacidad de los estudiantes para establecer relaciones entre nociones y conceptos provenientes de contextos propios de la ciencia y de otras áreas del conocimiento, poniendo en ejercicio su capacidad crítica, entendida esta como la habilidad para identificar inconsistencias y falacias en una argumentación, para valorar la calidad de una información o de un mensaje y para asumir una posición propia. Lo anterior forma parte de los requerimientos del mundo moderno que exigen la capacidad de interpretar y actuar socialmente de manera reflexiva, eficiente, honesta y ética. En este mismo contexto, la prueba evalúa el conocimiento del lenguaje de la ciencia para la comunicación, según distintas circunstancias y modalidades del mundo moderno. Por tanto, se tiene en cuenta que para lograr el dominio y la comprensión del lenguaje propio de las ciencias, el estudiante transita paulatinamente desde un universo de significados muy ligado a su realidad cercana, que se enriquece permanentemente, hasta alcanzar niveles cada vez más altos de abstracción y de generalización. Los estándares básicos proponen siete competencias que, en su conjunto, intentan mostrar cómo el estudiante comprende y usa el conocimiento de las ciencias para dar respuestas a sus preguntas, ya sean estas de carácter disciplinar, metodológico o actitudinal. La prueba aborda tres competencias que involucran el aspecto disciplinar y metodológico del trabajo de las ciencias Las competencias Uso comprensivo del conocimiento científico: capacidad para comprender y usar conceptos, teorías y modelos en la solución de problemas, a partir del conocimiento adquirido. Esta competencia está íntimamente relacionada con el conocimiento disciplinar de las ciencias naturales; pero no se trata de que el estudiante repita de memoria los términos técnicos ni las definiciones de conceptos de las ciencias, sino que comprenda los conceptos y las teorías y los aplique en la resolución de problemas. Las preguntas buscan que el estudiante relacione conceptos y conocimientos adquiridos con fenómenos que se observan con frecuencia, de manera que pase de la simple repetición de los conceptos a un uso comprensivo de estos. Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de

16 Explicación de fenómenos: capacidad para construir explicaciones y comprender argumentos y modelos que den razón de fenómenos. Esta competencia se relaciona con la forma en que los estudiantes van construyendo sus explicaciones en el contexto de la ciencia escolar. La escuela es un escenario de transición desde las ideas previas de los alumnos hacia formas de comprensión más cercanas a las del conocimiento científico. La competencia explicativa fomenta en el estudiante una actitud crítica y analítica que le permite establecer la validez o coherencia de una afirmación o un argumento. Es posible dar explicaciones de un mismo fenómeno utilizando representaciones conceptuales pertinentes de diferente grado de complejidad. Indagación: capacidad para plantear preguntas y procedimientos adecuados para buscar, seleccionar, organizar e interpretar información relevante y así dar respuesta a esas preguntas. Esta competencia, entonces, incluye los procedimientos y las distintas metodologías que se dan para generar más preguntas o intentar dar respuesta a una de ellas. Por tanto, el proceso de indagación en ciencias implica, entre otras cosas, observar detenidamente la situación, formular preguntas, buscar relaciones causa/efecto, recurrir a los libros u otras fuentes de información, hacer predicciones, plantear experimentos, identificar variables, realizar mediciones y organizar y analizar resultados. En el aula de clases no se trata de que el alumno repita un protocolo ya establecido o elaborado por el docente, sino que formule sus propias preguntas y diseñe su propio procedimiento. Aunque esta prueba no evalúa las competencias actitudinales, se reconoce su importancia, pues estas se enfocan a la formación de ciudadanos. Esta dimensión consta de cuatro competencias que involucran la formación de personas capaces de comunicarse efectivamente en sociedad y de poder dialogar abiertamente con otros pares sobre situaciones que aquejan a una comunidad: (1) la comunicación, entendida como la capacidad para escuchar, plantear puntos de vista y compartir conocimiento; (2) el trabajo en equipo, visto como una capacidad para interactuar productivamente asumiendo compromisos; (3) la disposición para aceptar la naturaleza abierta, parcial y cambiante del conocimiento; (4) la disposición para reconocer la dimensión social del conocimiento y para asumirla responsablemente Los componentes La comprensión de las ciencias naturales en el contexto de la vida cotidiana va adquiriéndose gradualmente a lo largo de las experiencias que responden a la curiosidad propia de los estudiantes y en la medida en que estos conocen el lenguaje y los principios de la ciencia. La estructura de la prueba propone, entonces, preguntas alrededor de situaciones de la vida diaria para estimular la costumbre de observar el medio y las situaciones del día tras día y de preguntar por los fenómenos desde la perspectiva de las ciencias naturales. 16

17 GUÍAS De acuerdo con lo anterior, y teniendo en cuenta los estándares básicos de competencias, esta prueba se conforma de preguntas que se inscriben en alguno de los siguientes componentes: Entorno vivo: aborda temas relacionados con los seres vivos y sus interacciones. Se centra en el organismo para entender sus procesos internos y sus relaciones con los medios físico y biótico. Además, se abordan los siguientes temas unificadores: estructura y función, homeóstasis, herencia y reproducción, ecología, evolución, diversidad y similaridad. La salud, entendida como el respeto y cuidado del cuerpo, forma parte de este componente y también del de ciencia, tecnología y sociedad (CTS). Entorno físico: se orienta a la comprensión de los conceptos, principios y teorías a partir de los cuales la persona describe y explica el mundo físico con el que interactúa. Dentro de este componente se estudia el universo haciendo énfasis en el sistema solar y la Tierra como planeta y la materia y sus propiedades, estructura y transformaciones, apropiando nociones o conceptos como mezclas, combinaciones, reacciones químicas, energía, movimiento, fuerza, tiempo, espacio y sistemas de medición y nomenclatura. Ciencia, tecnología y sociedad (CTS): busca estimular en los jóvenes la independencia de criterio basada en conocimientos y evidencias y un sentido de responsabilidad crítica hacia el modo como la ciencia y la tecnología pueden afectar sus vidas, las de sus comunidades y las del mundo en general. Desde este componente se busca un mayor acercamiento entre la ciencia y el mundo del estudiante, propiciando una comprensión más amplia del significado social de los conocimientos científicos y del desarrollo tecnológico. El componente CTS explora si los estudiantes diferencian entre objetos diseñados por el ser humano y aquellos que provienen de la naturaleza; si reconocen las herramientas y técnicas que ayudan a resolver problemas y contribuyen al bienestar de las personas; si identifican, analizan y explican situaciones o fenómenos en los que la ciencia y la tecnología han cambiado el curso de la vida de la gente, por ejemplo en el hogar, en la salud, en las comunicaciones y en el transporte. Asimismo, la prueba indaga si los estudiantes reconocen las transformaciones que la ciencia y la tecnología han generado en el medio y en la sociedad. Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de

18 5. Tipos de resultados La aplicación realizada en 2011 permitió generar reportes de resultados para cada establecimiento educativo participante de la muestra, así como para el total nacional y para los siguientes grupos de referencia, que abarcan los respectivos tipos de instituciones: oficiales urbanas, oficiales rurales y privadas. A diferencia de la aplicación censal efectuada en 2009, en esta oportunidad no se generaron reportes de resultados para las sedes y jornadas que integran los establecimientos. Para cada área y grado se estimaron cuatro tipos de resultados, los cuales ofrecen, en conjunto, información específica sobre el estado general de las competencias de los estudiantes de cada institución educativa (véanse las tablas 4 a 7). Tabla 4. Primer tipo de resultado: puntaje promedio Puntaje promedio Qué es? Es una medida que se obtiene al sumar los puntajes obtenidos por cada estudiante en una determinada área y dividir ese total por el número de estudiantes evaluados. Para qué sirve? Para saber cuál fue el puntaje más representativo de los estudiantes en un determinado grado y área. Para realizar comparaciones con los puntajes promedio obtenidos por los distintos grupos de referencia; por ejemplo, respecto al conjunto de los establecimientos educativos oficiales urbanos, o frente al total de instituciones que participaron en la aplicación muestral. Tabla 5. Segundo tipo de resultado: error estándar Error estándar Qué es? Es una medida estadística utilizada para determinar la incertidumbre respecto a la estimación de un parámetro; en este caso, los puntajes promedio en las áreas y grados evaluados. Para qué sirve? Para conocer la incertidumbre respecto a la estimación de los puntajes promedio en las áreas y grados evaluados, para el establecimiento educativo, el total nacional y los grupos de referencia. El error estándar se presenta con un decimal; si este es mayor que 20,0, la incertidumbre es bastante amplia lo cual no permite sacar conclusiones apropiadas para los resultados presentados. 18

19 GUÍAS Tabla 6. Tercer tipo de resultado: desviación estándar Desviación estándar Qué es? Es una medida que expresa la magnitud en la cual la mayoría de los puntajes se aleja, hacia arriba o hacia abajo, del promedio. Un menor valor de la desviación estándar quiere decir que la distribución de los estudiantes es más homogénea, es decir, que la mayoría obtuvo puntajes similares. Por el contrario, un alto valor de la desviación estándar significa mayor heterogeneidad, es decir: mientras algunos estudiantes obtuvieron puntajes muy altos, otros sacaron puntajes muy bajos. Para qué sirve? Para conocer qué tan homogéneos (o heterogéneos) fueron los puntajes obtenidos por los estudiantes de un determinado grado en cada una de las áreas evaluadas. Para realizar comparaciones con las desviaciones estándar de los distintos grupos de referencia. Por ejemplo, para saber si los puntajes obtenidos por los estudiantes de su establecimiento educativo son más homogéneos (o heterogéneos) que los logrados por los alumnos del conjunto de instituciones educativas oficiales urbanas. Tabla 7. Cuarto tipo de resultado: niveles de desempeño Niveles de desempeño Qué es? Es la distribución porcentual (numérica o porcentual) de los estudiantes según los desempeños alcanzados en cada una de las áreas evaluadas. Los niveles de desempeño describen las competencias de los estudiantes en cuanto a lo que saben y saben hacer en una determinada área y grado. Se establecieron cuatro niveles de desempeño: avanzado, satisfactorio, mínimo e insuficiente. Los significados de cada nivel de desempeño para las áreas y grados evaluados pueden consultarse en las tablas del anexo de esta guía. Para qué sirve? Para saber cómo se encuentran los estudiantes en relación con la capacidad para resolver problemas de distintos niveles de complejidad. Para analizar los niveles de aprendizaje alcanzados por los estudiantes y establecer las diferencias entre ellos. Esto permite orientar la definición de metas específicas y/o diferenciales de mejoramiento. Para realizar comparaciones con distintos grupos de referencia. Por ejemplo, para saber si la proporción de estudiantes de su establecimiento educativo ubicados en un determinado nivel de desempeño es mayor, similar o menor que la de los estudiantes de las instituciones educativas oficiales rurales. Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de

20 6. Comparación de resultados Los reportes permiten que cada establecimiento educativo realice comparaciones en las cuales puede conocer qué tan similares o qué tan distintos son sus resultados respecto a ciertos grupos de referencia, con la finalidad de formular metas y planes de mejoramiento. Los grupos de referencia con los cuales pueden compararse los resultados de la aplicación realizada en 2011 son: Total nacional Establecimientos educativos oficiales urbanos Establecimientos educativos oficiales rurales Establecimientos educativos privados Con el propósito de efectuar una adecuada lectura e interpretación de los resultados, las tablas 8 y 9 muestran los tipos de comparaciones que se pueden o no se pueden hacer con estos datos. TÉNGASE EN CUENTA QUE: Todos los resultados presentados se refieren a los estudiantes evaluados. Se entiende por estudiante evaluado quien contestó cinco o más preguntas de las pruebas de cada una de las áreas. Además, los resultados de los estudiantes reportados con discapacidad cognitiva se presentan de forma separada y no se incluyeron al momento de calcular los resultados del establecimiento educativo y de los diferentes grupos de referencia. 20

21 GUÍAS Tabla 8. Comparaciones de resultados que se pueden realizar Comparación Porcentajes de estudiantes por niveles de desempeño Puntajes promedio y errores estándar Puntajes promedio y desviaciones estándar Descripción Entre los porcentajes de estudiantes del establecimiento educativo según niveles de desempeño y la distribución en el total nacional, para la misma área y grado. Entre los porcentajes de estudiantes del establecimiento educativo según niveles de desempeño y la distribución en los demás grupos de referencia, para la misma área y grado. Entre el promedio y el error estándar del establecimiento educativo en un área y grado y el promedio y el error estándar del total nacional en esa misma área y grado. Entre el promedio y el error estándar del establecimiento educativo en un área y grado y el promedio y el error estándar de las instituciones educativas, en esa misma área y grado, de los diferentes grupos de referencia. Entre el promedio y la desviación estándar del establecimiento educativo en un área y grado y el promedio y la desviación estándar del total nacional en esa misma área y grado. Entre el promedio y la desviación estándar del establecimiento educativo en un área y grado y el promedio y la desviación estándar de las instituciones educativas, en esa misma área y grado, de los diferentes grupos de referencia. De igual modo, no es posible efectuar algunas comparaciones debido a que la metodología usada para la estimación de los resultados no permite establecer una escala común para las pruebas aplicadas en ambos, ni entre pruebas de áreas diferentes. Tabla 9. Comparaciones que no se pueden realizar Puntajes promedio y errores estándar Puntajes promedio y desviaciones estándar Rangos de puntaje Comparación Descripción Entre el puntaje promedio y el error estándar del establecimiento educativo en una determinada área y grado y el puntaje promedio y el error estándar de esa institución en otra área y grado. Entre el puntaje promedio y la desviación estándar del establecimiento educativo en una determinada área y grado y el puntaje promedio y la desviación estándar de esa institución en otra área y grado. Entre los rangos de puntaje de áreas y grados diferentes. Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de

22 7. Cómo consultar los resultados La consulta de los resultados de los establecimientos educativos puede realizarse vía internet en cuatro pasos: Ingresar en el sitio web: Ingresar el código DANE de la institución y la contraseña proporcionada por el ICFES. Cambiar la clave la primera vez que se ingresa en el portal de resultados. Seleccionar el grado y el área para los cuales se desea consultar los resultados. Descargar e imprimir el reporte de resultados. Adicionalmente, es posible consultar o descargar la siguiente información: El documento con los lineamientos de la aplicación de las pruebas SABER realizada en Los cuadernillos de las pruebas aplicadas en años anteriores. Otros documentos relacionados con las pruebas SABER. Las respuestas dadas a las preguntas frecuentes acerca del contenido del sitio web. Preguntas, solicitudes, dudas y sugerencias al ICFES relacionadas con el contenido del sitio web, a través de la opción Contáctenos. 7.1 Consulta de los resultados de un establecimiento educativo En la página de inicio del portal de resultados se deben seguir estos pasos: Escribir en la primera casilla el código DANE del establecimiento educativo (recuérdese que para esta aplicación no se reportaron resultados por sedes o jornadas); en la siguiente casilla, ingresar la clave que el ICFES asignó, la cual se envió por correo electrónico al rector de cada institución. Si el establecimiento fue evaluado y no cuenta con una clave, por favor, recurrir a los canales de comunicación con la Unidad de Atención al Ciudadano, como se indica en la nota que acompaña los campos de autenticación. 22

23 GUÍAS Reportes de resultados de las pruebas SABER aplicadas a una muestra de establecimientos educativos en 2011 Bienvenido (a)! En este sitio los establecimientos educativos que participaron en la aplicación de las pruebas SABER realizadas en octubre de 2011 podrán consultar y descargar su reporte de resultados. Para orientarle en el uso e interpretación de la información de resultados proporcionada en los reportes, el ICFES preparó una guía. Le recomendamos descargarla y estudiarla antes de realizar las consultas de los reportes. Descargue aquí la guía para la lectura e interpretación de los reportes de resultados de los establecimientos educativos participantes en la aplicación de las pruebas SABER en 2011 Para consultar y descargar los resultados de su establecimiento educativo es necesario que ingrese los siguientes datos: Código DANE: Clave: Recordar clave: Cambiar clave: Ingresar En caso de no contar con la contraseña, por favor comuníquese con la Unidad de Atención al Ciudadano del ICFES a la línea gratuita nacional , o en Bogotá al También se pueden usar las opciones Recordar clave, con la cual se recibirá vía el correo electrónico registrado para el establecimiento educativo, la última clave utilizada para ingresar al sistema, y Cambiar clave, que comprende los campos de código DANE, clave actual, clave nueva y confirmación de clave nueva. La última opción aparecerá automáticamente la primera vez que se ingrese en el sitio web. La clave debe tener 8 caracteres combinando mínimo 4 letras y 2 números. Luego del ingreso al portal de resultados del establecimiento, se pueden observar los resultados de quinto o de noveno grados, escogiendo la opción en el menú de la parte superior de la pantalla. Las opciones de consulta en cada grado son: lenguaje, matemáticas, ciencias naturales, discapacidad cognitiva y estadísticas de los estudiantes evaluados. Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de

24 INICIO GRADO QUINTO GRADO NOVENO Resultados muestrales SABER 5o. y 9o Establecimiento educativo: Colegio Instituto Técnico El Unicornio. Código DANE: Ayuda Cerrar sesión Descargar los resultados de esta prueba Descargar los resultados de todas las pruebas del establecimiento Guía de interpretación de resultados muestrales SABER 5o. y 9o INICIO GRADO QUINTO GRADO NOVENO Lenguaje Resultados muestrales Matemáticas SABER 5o. y 9o Ciencias naturales Establecimiento Discapacidad educativo: Colegio cognitiva Instituto Tecnico El Unicornio. Código DANE: Estadísticas Ayuda Cerrar sesión Descargar los resultados de esta prueba Descargar los resultados de todas las pruebas del establecimiento Guía de interpretación de resultados muestrales SABER 5o. y 9o Luego de elegir el grado y el área para los cuales se desea consultar los resultados, se encontrarán: Los gráficas con los cuatro tipos de resultados descritos en las páginas 18 y 19 de esta guía, a la izquierda de la pantalla. Textos de ayuda para apoyar la lectura e interpretación de los resultados presentados en el gráfico correspondiente, en la parte derecha de la pantalla. Algunas preguntas para orientar los análisis de los resultados del establecimiento educativo, en la parte final de los textos de ayuda. En los resultados de cada prueba, las opciones para descargar la guía de interpretación de resultados y los reportes de todas o cada una de las pruebas. La página caducará a los cinco minutos de inactividad del usuario. Al finalizar la búsqueda de sus resultados no olvidar cerrar la sesión. 24

25 GUÍAS 7.2 Ejemplos A continuación se presentan ejemplos de cada uno de los tipos de resultados producidos para un establecimiento educativo ficticio, así como algunas de sus lecturas e interpretaciones Distribución porcentual de estudiantes según niveles de desempeño La distribución porcentual según niveles de desempeño en lenguaje de los estudiantes de quinto grado del establecimiento oficial urbano El Unicornio fue la siguiente: Comparación de niveles de desempeño en el establecimiento educativo y el total nacional en lenguaje, quinto grado 14% 44% 37% 5% Establecimiento 10% 27% 42% 21% Total nacional Insuficiente Mínimo Satisfactorio Avanzado Comparación de niveles de desempeño del establecimiento educativo con los totales nacionales por tipo de institución en lenguaje, quinto grado 14% 44% 43% 37% 8% 4% 28% 19% 45% 45% 28% 36% 28% 5% 19% 33% 8% Establecimiento Oficial Urbano Oficial Rural Privado Insuficiente Mínimo Satisfactorio Avanzado Guía para la lectura e interpretación de los reportes de resultados institucionales de la aplicación muestral de

26 AYUDA PARA REALIZAR LA LECTURA DE LOS GRÁFICOS Los dos gráficos muestran los porcentajes de estudiantes clasificados en cada uno de los niveles de desempeño, tanto del establecimiento como de distintos grupos de referencia, a fin de propiciar comparaciones. Consulte las descripciones de lo que pueden hacer los estudiantes de cada nivel de desempeño en la guía para la lectura e interpretación de los resultados de SABER Cada nivel se representa con un color distinto, y dentro de cada uno aparece el porcentaje correspondiente a la proporción de estudiantes ubicados en este. Por debajo de la línea oscura se encuentran los porcentajes de estudiantes ubicados en el nivel insuficiente. Debido a que se hicieron aproximaciones a porcentajes sin decimales, es posible que en algunos casos no sumen exactamente 100%. En los dos gráficos aparecen los resultados del establecimiento educativo seguidos por los de los siguientes grupos de referencia: Los estudiantes del total nacional (primer gráfico). Los estudiantes de establecimientos educativos oficiales urbanos del total nacional (segundo gráfico). Los estudiantes de establecimientos educativos oficiales rurales del total nacional (segundo gráfico). Los estudiantes de establecimientos educativos privados del total nacional (segundo gráfico). Ejemplo de lectura de los resultados El 5% de los estudiantes del establecimiento educativo El Unicornio se ubicó en el nivel insuficiente, lo cual quiere decir que ellos no superan las preguntas de menor complejidad de la prueba. A su vez, el 37% quedó clasificado en el nivel mínimo, el 44% en el nivel satisfactorio y el 14% en el avanzado. La proporción de estudiantes del establecimiento educativo El Unicornio ubicados en nivel insuficiente de desempeño (5%) en lenguaje es más baja que la de los siguientes grupos de referencia: El total nacional, que tiene el 21% de estudiantes en ese nivel. Establecimientos educativos oficiales urbanos del total nacional, que tienen el 19% de estudiantes en ese nivel. Establecimientos educativos oficiales rurales del total nacional, que tienen el 33% de estudiantes en ese nivel. 26