Hacia un sistema integrado de evaluacin de resultados de aprendizaje:

Alineacin de SABER 11
Foro Educativo Nacional
Margarita Pea Borrero Directora General - ICFES Bogot, octubre 10 de 2013

Para tener en cuenta

1. La nocin de evaluacin de resultados de aprendizaje es mucho ms amplia que las evaluaciones del ICFES incluye evaluaciones externas como las que hace el ICFES.
2. Las evaluaciones que hace el ICFES son externas, masivas y estandarizadas.

3. Esto permite realizar comparaciones:

Entre lo que se espera alcanzar y lo que se ha logrado. Entre individuos y grupos (instituciones, municipios). En el tiempo.

Para tener en cuenta

4. Pero tienen limitaciones:

No miden la totalidad de los objetivos de la educacin. No dan cuenta de los procesos individuales de los estudiantes.

5. Los resultados de las evaluaciones del ICFES son un indicador indispensable, pero no nico, del aprendizaje de las personas y de la calidad de las instituciones o de la educacin en general.

Con esta presentacin pretendo que Uds. conozcan

1. La manera como el examen de ICFES, ahora SABER 11, ha evolucionado desde su creacin en 1968. 2. Las caractersticas del actual sistema de evaluaciones del cual hace parte SABER 11. 3. Las transformaciones que son necesarias para alinear SABER 11 con el sistema de evaluacin y cumplir con sus propsitos.

1968

1980

2000

2003 2004

2005 2007

2010

Creacin del ICFES (Instituto Colombiano de Fomento a la Educacin Superior) y del Servicio Nacional de Pruebas. Las universidades le solicitaron al ICFES el desarrollo y aplicacin de un examen para la seleccin de aspirantes.

1968

1980

2000

2003 2004

2005 2007

2010

Examen de aptitudes y conocimientos

1. 2. 3. 4.

Aptitudes: Verbal Numrica Razonamiento abstracto Relaciones espaciales

1. 2. 3. 4. 5.

Conocimientos: Lenguaje Matemticas Ciencias Sociales Idiomas (ingls y francs)

1968

1980

2000

2003 2004

2005 2007

2010

El examen se vuelve obligatorio para el ingreso a la educacin superior seleccin. Se solicita al ICFES reportar al MEN los nombres de las instituciones educativas en las que la mayora de alumnos haba tenido puntajes bajos, para tomar medidas correctivas primera aproximacin al uso del examen como medida de calidad.

1968

1980

2000

2003 2004

2005 2007

2010

Examen de aptitudes, conocimientos y habilidades

Aptitudes: 1. Verbal 2. Numrica 3. Razonamiento espacial 4. Aptitud mecnica Formacin especfica (electivas): 1. Idiomas 2. Comercio 3. Electricidad Etc.

Conocimientos: 1. Lenguaje 2. Matemticas 3. Ciencias (Biologa, Fsica y Qumica) 4. Sociales (Historia y Geografa) 5. Filosofa

Resultados individuales: puntaje global en el conjunto de pruebas del examen. Clasificacin de colegios en categoras

1968

1980

2000

2003 2004

2005 2007

2010

Puesta en marcha del examen que se encuentra vigente en la actualidad. Se mantienen los propsitos de seleccin para el ingreso a la educacin superior y valoracin de la calidad de la educacin.

1968

1980

2000

2003 2004

2005 2007

2010

Este nuevo examen fue el resultado de un trabajo de reconceptualizacin que comenz a mediados de los aos 90:

Autonoma curricular de las instituciones educativas Lineamientos curriculares. Evaluacin por competencias: saber hacer en contextos disciplinares. Necesidad de saber si se logran, y en qu medida, los objetivos de la educacin (niveles de logro). Avances a nivel nacional e internacional en medicin (Teora de Respuesta al tem TRI) comparabilidad entre aos.

1968

1980

2000

2003 2004

2005 2007

2010

El examen evaluaba, en tres sesiones de medio da, las competencias de los estudiantes en las siguientes reas:

Lenguaje Matemticas Biologa Fsica Qumica Historia Geografa Filosofa Idiomas (Ingls, Francs o Alemn)

Profundizaciones e interdisciplinares

1968

1980

2000

2003 2004

2005 2007

2010

Estndares bsicos de competencias para la educacin bsica y media:

Lenguaje Matemticas Ciencias (Naturales y Sociales) Competencias ciudadanas Ingls como idioma extranjero

Se ajustaron las pruebas para responder a estos estndares.

1968

1980

2000

2003 2004

2005 2007

2010

Reduccin del tiempo de aplicacin del examen a dos sesiones, en un solo da (2005). Reduccin del nmero de preguntas de las pruebas, de 35 a 24 (2005). Las pruebas de Historia y Geografa se fusionaron en Ciencias Sociales (2006).

Prueba de ingls alineada con el Marco Comn Europeo (2007).

1968

1980

2000

2003 2004

2005 2007

2010

Resultados que produce el examen actual:

Individuales:

Puntaje para cada una de las pruebas Puntajes y niveles en sub-escalas para cada una de las pruebas: componentes y competencias Puesto frente al conjunto total de evaluados

Institucionales (colegios):

Promedios en cada una de las pruebas Distribuciones en los niveles de las sub-escalas Clasificacin en categoras de rendimiento

1968

1980

2000

2003 2004

2005 2007

2010

Decreto 869 de 2010: reglamentacin del examen SABER 11 Objetivos:

Seleccin, nivelacin y prevencin de la desercin en educacin superior. Monitoreo de la calidad de las instituciones educativas, a partir de los estndares bsicos de competencias. Informar para la estimacin del valor agregado de la educacin media y de la educacin superior.

Con la alineacin de SABER 11 se busca

Mayor correspondencia con los estndares (competencias bsicas y ciudadanas). Visin integrada de los objetivos de la educacin en todos los niveles.

Informacin que facilite la toma de decisiones sobre mejoramiento, por parte de autoridades e instituciones (reportes).

La alineacin de SABER 11 en el sistema integrado de evaluacin Estructura de 5 pruebas

3 Lenguaje Lenguaje Razon. Razon. Cuantitativo Cuantitativo 5 Lenguaje Lenguaje Razon. Razon. Cuantitativo Cuantitativo 9 Lenguaje Lenguaje 11 Lectura Crtica Matemticas PRO Lectura Lectura Crtica Crtica Raz. Raz. Cuantitativo Cuantitativo Pensam. Pensam. Cient. Cient. Mat. Mat. y y Estad. Estad. (Especfica) (Especfica) Competencias Competencias Ciudadanas Ciudadanas Investig. Investig. Cs. Cs. Sociales Sociales (Especfica) (Especfica) Pensamiento Pensamiento Cientfico Cientfico (Especfica) (Especfica) Ingls Ingls Comunicacin Comunicacin Escrita Escrita Matemticas Matemticas (incluye (incluye Raz. Raz. Cuantitativo) Cuantitativo) Competencias Competencias Competencias Competencias Ciudadanas Ciudadanas Ciudadanas Ciudadanas

Ciencias Sociales y Competencias Ciudadanas Ciencias Naturales Ingls

Ciencias Ciencias Naturales Naturales

Ciencias Ciencias Naturales Naturales Ingls Ingls

Prueba de Lectura Crtica

Agrupa las pruebas actuales de Lenguaje y de Filosofa.

Evala competencias relacionadas con la lectura de diferentes textos (continuos y discontinuos), incluyendo textos filosficos.
Est alineada con SABER PRO. Est alineada parcialmente con las pruebas de Lenguaje de SABER 3, SABER 5 y SABER 9.

Prueba de Lectura Crtica

Competencias
Identificacin y comprensin de los contenidos explcitos de los textos
Identificacin de eventos, ideas, afirmaciones y dems elementos locales de un texto. Comprensin de los componentes explcitos de un texto: palabras, oraciones, formas gramaticales bsicas.

Comprensin de la articulacin de las partes de un texto para darle sentido global

Comprensin de la manera como se relacionan los elementos de un texto. Comprensin de la organizacin semntica y de la estructura formal de un texto.

Reflexin y evaluacin del contenido de los textos

Establecimiento de relaciones entre el texto y contenidos que no se encuentran en l. Reconocimiento de estrategias discursivas. Evaluacin de la validez y la veracidad de contenidos de los textos.

Prueba de Matemticas

Se divide en dos partes:

Razonamiento Cuantitativo

Evala contenidos genricos de las matemticas. Est alineada con SABER PRO.

Matemticas (de Educacin Media) Evala contenidos especficos de la Media. Est alineada con SABER 3, SABER 5 y SABER 9.

Prueba de Matemticas
Competencias
Interpretacin Formulacin y ejecucin
Diseo y ejecucin de estrategias para el anlisis o resolucin de problemas que involucren informacin cuantitativa y objetos matemticos.

Argumentacin

Capacidad de comprender y producir representaciones de informacin cuantitativa y objetos matemticos en trminos numricos, grficos, diagramas, y esquemas. Incluye extraer informacin y comparar representaciones. Presentacin de datos, representacin grfica y tabular de funciones y relaciones. Comunicacin de informacin cuantitativa y resultados matemticos.

Capacidad de justificar afirmaciones a partir de las propiedades matemticas o de la conceptualizacin de un modelo o un procedimiento.

Modelacin de forma abstracta situaciones reales, escoger y realizar procedimientos.

Evaluacin de modelos, comprensin de sus limitaciones, y ubicacin o evaluacin del resultado de un procedimiento o un clculo en el contexto de un problema.

Verbalizacin de procedimientos y de propiedades de objetos matemticos. Comunicacin del razonamiento cuantitativo y matemtico.

Prueba de Ciencias Sociales y Competencias Ciudadanas

Articula la evaluacin de Sociales con la de Competencias Ciudadanas en torno a los conocimientos de la Constitucin, el pensamiento social, la interpretacin de fuentes, el anlisis de perspectivas, el pensamiento sistmico y la reflexin crtica. Competencias Ciudadanas est alineada con SABER 5, SABER 9 y SABER PRO.

Prueba de Ciencias Sociales y Competencias Ciudadanas

Competencias
Pensamiento social Interpretacin y anlisis de perspectivas

Pensamiento sistmico y reflexin crtica

Prueba de Ciencias Sociales y Competencias Ciudadanas

Comprensin de los conceptos bsicos de las ciencias sociales y establecimiento de relaciones en el espacio y en el tiempo entre acontecimientos inscritos en procesos econmicos, polticos y culturales fundamentales para la comprensin del presente.

Pensamiento social

Incluye conceptos bsicos o fundamentales de la Constitucin poltica de Colombia como parte de la comprensin del presente, junto con el conocimiento de los fundamentos polticos, la estructura poltica, y el funcionamiento poltico de la sociedad actual en diferentes niveles (la familia, el barrio, la localidad, la ciudad, el municipio, el departamento, el pas, otros pases, global).

Prueba de Ciencias Sociales y Competencias Ciudadanas

Capacidad de reconstruccin y coordinacin de perspectivas. Comprender e integrar diversas perspectivas de una misma realidad.

Interpretacin y anlisis de perspectivas

Anlisis de documentos, de fuentes primarias, para relacionarlas con su contexto histrico; anlisis de perspectivas de distintos actores sociales sobre eventos histricos o hipotticos.

Incluye analizar las posibilidades y limitaciones de una fuente y los usos de evidencias para apoyar argumentos o explicaciones histricas.

Prueba de Ciencias Sociales y Competencias Ciudadanas

Reconstruir y comprender el carcter sistmico de la realidad social (dimensional global-local, interdependiente, durable, transformable, estructurado). Implica poder ubicar lo particular dentro de lo ms general, moverse de lo general a lo particular y viceversa, y detectar y reconstruir lo que no es aparente o visible. Identificar relaciones de causa y consecuencia, relaciones de continuidad y transformacin, articular dimensiones culturales, polticas, econmicas, etc. Evaluar los usos, analizar las justificaciones y las consecuencias, de distintos modelos o planteamientos conceptuales de las ciencias sociales.

Pensamiento sistmico y reflexin crtica

Prueba de Ciencias Naturales

Articula las pruebas de Biologa, de Fsica y de Qumica en torno a las competencias que evalan en comn. Incorpora el componente de Ciencia, Tecnologa y Sociedad. Est alineada con SABER 5 y SABER 9 y parcialmente con el mdulo de Pensamiento Cientfico de SABER PRO.

Prueba de Ciencias Naturales

Competencias
Uso comprensivo del conocimiento cientfico
Capacidad para comprender y usar nociones, conceptos y teoras de las ciencias en la solucin de problemas, as como para establecer relaciones entre conceptos y conocimientos adquiridos sobre fenmenos que se observan con frecuencia.

Explicacin de fenmenos
Capacidad para construir explicaciones y comprender argumentos y modelos que den razn de fenmenos naturales, as como establecer la validez o coherencia de una afirmacin o un argumento derivado de un fenmeno o problema cientfico.

Indagacin
Capacidad para plantear preguntas y definir procedimientos adecuados para seleccionar e interpretar informacin relevante para dar respuesta a esas preguntas. Implica, entre otras cosas, plantear preguntas, hacer predicciones, identificar variables, realizar mediciones, organizar y analizar resultados, plantear conclusiones y comunicar apropiadamente sus resultados.

Prueba de Ingls

Se mantienen la estructura y formato de la prueba actual.

Est alineada con SABER PRO.

Prueba de Ingls
Niveles de competencia
A1 Principiante Es capaz de comprender y utilizar expresiones cotidianas de uso muy frecuente, as como frases sencillas destinadas a satisfacer necesidades de tipo inmediato. A2 Bsico Es capaz de comprender frases y expresiones de uso frecuente relacionadas con reas de experiencia que le son especialmente relevantes (informacin bsica sobre s mismo y su familia, compras, lugares de inters, ocupaciones, etc.).
Meta de la educacin media

B1 Pre intermedio Es capaz de comprender los puntos principales de textos claros y en lengua estndar si tratan sobre cuestiones que le son conocidas, ya sea en situaciones de trabajo, de estudio o de ocio.

Formato de las pruebas

Preguntas de seleccin mltiple. Inclusin progresiva de preguntas abiertas:

Reduce el efecto del entrenamiento artificial para el examen. Reduce el ruido que generan las respuestas al azar.

Se mantienen las dos sesiones de aplicacin (un solo da, maana y tarde).

Resultados que producir el examen SABER 11

Resultados individuales

Puntajes especficos

Lectura Crtica Matemticas Razonamiento Cuantitativo Ciencias Naturales Ciencias Sociales Competencias Ciudadanas Ingls

Ubicacin del estudiante en deciles. Niveles de desempeo (a partir de 2015). Puntajes y niveles de desempeo Se contempla reportar tambin: Ubicacin de grupos poblacionales (E. g. personas con discapacidad) en quintiles Puntajes compuestos: Ciencias Naturales y Razonamiento cuantitativo Lectura Crtica, Sociales y Competencias Ciudadanas

Totales

Puesto en aplicacin Global en escala histrica

Resultados que producir el examen SABER 11 Resultados agregados

Promedios Distribuciones por deciles y niveles de Institucionales desempeo Promedios y distribuciones en sub-escalas Clasificacin de colegios

Muchas gracias!

www.icfes.gov.co