You are on page 1of 585

Autora

REPORTE TCNICO Equipo tcnico del LLECE


Hctor Valds Veloz (Coordinador)
Ernesto Trevio
Mauricio Castro
Roy Costilla
Carmen Gloria Acevedo
Ernesto Trevio*
Editor General

Daniel Bogoya
Captulo 1

David Glejberman
Mauricio Castro
Captulo 2

Daniel Bogoya
Giuliana Espinosa
Captulo 3

Claudia Tamassia
Mauricio Castro
Captulo 4

Carlos Pardo
Daniel Bogoya
Captulo 5

Ernesto Leigh
Traduccin
captulo 4 al espaol

Alejandro Urbn
Diagramacin y diseo

*Acadmico e investigador, Facultad de Educacin de la Universidad Diego Portales

Publicado por la Ocina Regional de Educacin de la UNESCO para Amrica Latina y el Caribe
OREALC/UNESCO Santiago.

Permitida su reproduccin total o parcial, as como su traduccin a cualquier idioma citando la fuente.

Los autores son responsables por la seleccin y presentacin de los hechos contenidos en esta publicacin, as como
de las opiniones expresadas en ella, que no son necesariamente el pensamiento de UNESCO y no comprometen a la
Organizacin. Las denominaciones empleadas en esta publicacin y la presentacin de los datos que en ella guran no
implican, de parte de la UNESCO, ninguna toma de posicin respecto al estatuto jurdico de los pases, ciudades, ter-
ritorios o zonas, o de sus autoridades, ni respecto al trazado de sus fronteras o lmites.

ISBN: 978-956-322-008-7
PRESENTACIN

E
l Laboratorio Latinoamericano de Evaluacin de la Calidad de la Educacin (LLECE) es la red de los
sistemas de medicin de la calidad de la educacin de los pases de Amrica Latina y el Caribe. Al
mismo tiempo constituye un mbito de discusin tcnico poltico sobre el aprendizaje, otras vari-
ables relativas al desarrollo personal de los estudiantes, as como los factores asociados a estas.

La creacin del LLECE acontecida en Ciudad de Mxico en noviembre de 1994, marc un hito en el desar-
rollo de nuevas formas de cooperacin entre los pases de la Regin y en el papel de coordinacin que
asume la Ocina Regional de Educacin de la UNESCO, con sede en Santiago de Chile.

Sus objetivos principales consisten en generar conocimientos que contribuyan a que los Ministerios de
Educacin de la regin tomen decisiones informadas en materia de polticas educativas a partir del anli-
sis de los resultados de las investigaciones evaluativas que el LLECE realiza.

En el Laboratorio participan Argentina, Brasil, Chile, Colombia, Costa Rica, Cuba, Ecuador, El Salvador,
Guatemala, Honduras, Mxico, Nicaragua, Panam, Paraguay, Repblica Dominicana, y Uruguay. Tambin
forma parte del LLECE el estado mexicano de Nuevo Len. El LLECE realiza permanentes gestiones para que
se integre a sus actividades el resto de los pases de la regin.

Entre los aos 2004 y 2008 el LLECE realiz el Segundo Estudio Regional Comparativo y Explicativo (SERCE)
que evala el desempeo de los estudiantes en Amrica Latina y el Caribe e indaga sus factores asociados.
Dicho estudio se enmarca dentro de las acciones de la OREALC / UNESCO, tendientes a asegurar el derecho
de todos los estudiantes de la regin a recibir una educacin de calidad.

El principal propsito del SERCE fue generar conocimientos acerca de los rendimientos de los estudi-
antes de 3 y 6 grados de Educacin Primaria en Amrica Latina y el Caribe en las reas de Matemtica,
Lenguaje (Lectura y Escritura) y Ciencias y, al mismo tiempo, explicar dichos logros identicando las
caractersticas de los estudiantes, de las aulas y de las escuelas que se asocian a ellos en cada una de las
reas evaluadas.

Los resultados del referido estudio, se han publicado en los textos siguientes:
Primer reporte de los resultados del SERCE
Resumen Ejecutivo
Aportes para la enseanza de la Lectura
Aportes para la enseanza de la Matemtica
Aportes para la enseanza de las Ciencias

Con estos antecedentes corresponde ahora publicar el Reporte tcnico del SERCE, que busca mediante la
profundizacin y el anlisis detallado de lo realizado en este estudio, ofrecer a los profesionales inte-
resados en la investigacin evaluativa, la informacin que da sustento a todas las publicaciones antes
referidas. Lo anterior, con el objetivo de que puedan obtener un conocimiento ms profundo y amplio de la
realidad educativa latinoamericana y sobre todo de los mtodos cientcos movilizados para estudiarla.

El reporte consta de cinco captulos y un apartado destinado a los anexos. El captulo 1 est dedicado a
explicar el diseo de los instrumentos utilizados en este estudio (45 instrumentos).

Por su parte el captulo 2 se concentra en el diseo de la muestra; mientras que en el captulo 3 se expli-
can detalladamente los procedimientos utilizados para el levantamiento de los datos.
En el captulo 4 se describen las acciones realizadas en la direccin del aseguramiento de la calidad del
estudio, mientras que el captulo 5 y nal muestra exhaustivamente los mtodos y procedimientos utiliza-
dos para el procesamiento de los datos de esta importante investigacin evaluativa.

Finalmente, en los anexos se describen detalladamente los manuales e instructivos diseados y utilizados
como pautas para la realizacin de cada etapa de esta investigacin, as como los indicadores de calidad
y su comportamiento en cada uno de los pases participantes.

Tengo la seguridad de que la lectura minuciosa del presente texto contribuir a la elevacin de la cultura
evaluativa de los directivos y docentes que se entreguen a ella con alta motivacin y ansias de saber.

Dr. C. Hctor Valds Veloz


Coordinador del LLECE
NDICE
CAPTULO 1
DISEO DE INSTRUMENTOS 12

I.1. DISEO DE LAS PRUEBAS DE DESEMPEO 14


I.1.1. MARCO CONCEPTUAL 14
ANLISIS CURRICULAR 14
HABILIDADES PARA LA VIDA 16
ESPECIFICACIONES DE LAS PRUEBAS 17
FORMATO DE LAS PRUEBAS 18
ELABORACIN DE LOS ITEMS 21
PERTINENCIA DE LOS ITEMS 21
ADAPTACIN LINGSTICA Y TRADUCCIN AL PORTUGUS 21
I.1.2. DISEO DE LAS PRUEBAS EN LA FASE PILOTO 23
I.1.3. DISEO DE LAS PRUEBAS DEFINITIVAS 25
PRESENTACIN DEL MODELO DE ANLISIS 25
ITEMS ANMALOS 26
ENSAMBLE DE LAS PRUEBAS DEFINITIVAS 27
ESTRUCTURA DE LAS PRUEBAS DEFINTIVAS 28
ADAPTACIONES LINGSTICAS 31
I.2. DISEO DE LOS CUESTIONARIOS DE CONTEXTO 32
I.2.1. ANTECEDENTES 33
PRIMER ESTUDIO INTERNACIONAL COMPARATIVO 33
OTROS ESTUDIOS INTERNACIONALES 34
Proyecto Regional para Amrica Latina y El Caribe(PRELAC) 35
I.2.2. MARCO CONCEPTUAL 36
CARACTERSTICAS SOCIOCULTURALES 37
OPORTUNIDADES EDUCATIVAS 37
LOGROS ACADMICOS 37
EQUIDAD EDUCATIVA 38
I.2.3. ETAPAS DEL DISEO DE LOS CUESTIONARIOS 39
FACTORES Y VARIABLES 39
CUESTIONARIO 43
CAPTULO 2
DISEO DE LA MUESTRA 44

II.1. UNIVERSOS QUE SON OBJETO DE ESTUDIO 46


II.2. SUBUNIVERSOS DEL ESTUDIO 47
II.3. UNIDADES DE MUESTREO Y MARCO MUESTRAL 48
II.3.1.EXCLUSIONES VLIDAS 48
II.4. MTODO DE MUESTREO 50
II.4.1. CRITERIOS DE ESTRATIFICACIN
PARA LA OPTIMIZACIN DEL MUESTREO 51
II.4.2. CANTIDAD MNIMA DE ESCUELAS POR ESTRATO
EXPLCITO Y POR PAS 58
II.5. MUESTRA EFECTIVA POR PASES 59
II.6. PROCEDIMIENTOS PARA LA SELECCIN DE ESCUELAS Y ALUMNOS.
SISTEMA DE REEMPLAZOS 62
II.7. ESTRATOS ADICIONALES OPTATIVOS PARA CADA PAS Y TRATAMIENTO
DE LAS MUESTRAS PARA ENTIDADES SUBNACIONALES (NUEVO LEN) 63
II.8. ELABORACIN DEL MARCO MUESTRAL EN CADA PAS 64
II.8.1. CRITERIOS Y PROCEDIMIENTOS PARA EL CONTROL
DE LOS MARCOS MUESTRALES POR PARTE DE LA COORDINACIN TCNICA 65
II.8.2. REQUISITOS MNIMOS DE COBERTURA QUE DEBEN SER ALCANZADOS
POR CADA PAS PARA QUE LOS DATOS SEAN CONSIDERADOS CONFIABLES 66
II.8.3. CRITERIOS Y PROCEDIMIENTOS PARA EL CONTROL DE LAS MUESTRAS
REALMENTE OBTENIDAS UNA VEZ CULMINADA LA APLICACIN 77
II.9. MRGENES DE ERROR ESTIMADOS PARA EL DISEO MUESTRAL,
A NIVEL INTERNACIONAL, NACIONAL Y DE ESTRATO 78
II.10. SISTEMA DE PONDERACIONES PARA LA ESTIMACIN
DE RESULTADOS A NIVEL NACIONAL Y DE SUBUNIVERSOS 82
SINTAXIS PARA LA GENERACIN DE PESOS. 84

CAPTULO 3
LEVANTAMIENTO DE DATOS 86

III.1. RESPONSABILIDADES Y ROLES 88


III.1.1. COORDINADOR NACIONAL 88
III.1.2. DIRECTOR DE ESCUELA 90
III.1.3. APLICADOR DE INSTRUMENTOS 91
III.2. OPERACIONES EN CAMPO 92
III.2.1. REPRODUCCIN, EMBALAJE Y DISTRIBUCIN DEL MATERIAL 92
III.2.2. CONVOCATORIA Y CAPACITACIN DE APLICADORES 93
III.2.3. APLICACIN DE LOS INSTRUMENTOS 94
III.2.4. RETORNO DEL MATERIAL 96
III.2.5. CODIFICACIN DE RESPUESTAS ABIERTAS 96
III.2.6. EVALUACIN DE LA PRUEBA DE ESCRITURA 99
III.2.7. CAPTURA DE DATOS 101
III.2.8. INFORME FINAL DE APLICACIN 103
III.2.9. MUESTRAS DE RECORRECCIN 104
III.3. SISTEMA DE SUPERVISIN EXTERNA 104
III.3.1. SELECCIN DE LOS OBSERVADORES INTERNACIONALES 105
III.3.2. SELECCIN DE LOS MONITORES EXTERNOS 106
III.3.3. CAPACITACIN DE LOS MONITORES EXTERNOS 107
III.3.4. ESCUELAS VISITADAS POR LOS MONITORES EXTERNOS 107
III.3.5. VISITA AL CENTRO NACIONAL 108
III.3.6. VISITAS DE MONITOREO EXTERNO A LAS ESCUELAS 109
III.3.7. INFORME DE SUPERVISIN 110

CAPTULO 4
ASEGURAMIENTO DE LA CALIDAD 111

IV.1 MUESTREO 112


TASA DE PARTICIPACIN DE LAS ESCUELAS 113
TASA DE PARTICIPACIN DE LOS ESTUDIANTES 113
IV.2. PROCEDIMIENTOS DE IMPLEMENTACIN DEL ESTUDIO PRINCIPAL 115
APLICADORES 116
ADHESIN A LOS PROCEDIMIENTOS 118
ASPECTOS ESCOLARES 118
INSTRUMENTOS 119
OTROS ASPECTOS 119
COMENTARIOS GENERALES SOBRE LA IMPLEMENTACIN 120
IV.3. ACOPIO DE DATOS 120
CAPTURA DE DATOS Y ESTRUCTURA DE LA BASE DE DATOS 121
NATURALEZA CONFIDENCIAL DE LOS INSTRUMENTOS 123
IV.4. CALIFICACIN Y CODIFICACIN 123
IV.5. NDICE DE CUMPLIMIENTO DE LAS PAUTAS DE CALIDAD DEL SERCE. 129
IV.6. RESULTADOS GENERALES ASOCIADOS CON LA CALIDAD 135
MUESTREO 135
ASPECTOS ASOCIADOS CON LA IMPLEMENTACIN
Y ADMINISTRACIN DE DATOS 136
CALIFICACIN DE ITEMS DE RESPUESTA ABIERTA 137
COMENTARIO FINAL 138

CAPTULO 5
PROCESAMIENTO DE DATOS 139

V.1. ESTRUCTURA DE LA BASE DE DATOS REGIONAL


Y PROCEDIMIENTOS PARA SU DEPURACIN 140
V.2. PROCEDIMIENTOS PARA LA ESTIMACIN DE PARMETROS
Y ESCALAMIENTO DE LOS TEMS 153
V.2.1. TEMS DE CIENCIAS 153
DEPURACIN DE LA INFORMACIN 153
ANLISIS DE DATOS 156
INDICADORES POR TEM 156
INDICADORES POR OPCIN 170
MAPA DE DISTRIBUCIN DE HABILIDADES Y DIFICULTADES 189
PROMEDIO, DESVIACIN ESTNDAR Y VALORES
MXIMO Y MNIMO DE DIFICULTADES DE TEMS 191
FUNCIN DE INFORMACIN DE LA PRUEBA 192
VALOR DE DIFICULTAD DE TEMS POR PAS 193
VALOR DE AJUSTE DE TEMS POR PAS 199
VALOR DE DISCRIMINACIN DE TEMS POR PAS 205
PROPORCIN DE RESPUESTAS CORRECTAS DE CADA TEM POR PAS 211
V.2.2. TEMS DE LECTURA 3 217
RESULTADOS SOBRESALIENTES 217
DEPURACIN DE LA INFORMACIN RECIBIDA 217
ANLISIS DE DATOS 220
INDICADORES POR TEM 220
INDICADORES POR OPCIN 224
MAPA DE DISTRIBUCIN DE HABILIDADES Y DIFICULTADES 236
PROMEDIO, DESVIACIN ESTNDAR Y VALORES
MXIMO Y MNIMO DE DIFICULTADES DE TEMS 238
FUNCIN DE INFORMACIN DE LA PRUEBA 239
VALOR DE DIFICULTAD DE TEMS POR PAS 240
VALOR DE AJUSTE DE TEMS POR PAS 246
VALOR DE DISCRIMINACIN DE TEMS POR PAS 252
PORCENTAJE DE RESPUESTAS CORRECTAS DE CADA TEM POR PAS 258
V.2.3. TEMS DE LECTURA 6 264
DEPURACIN DE LA INFORMACIN RECIBIDA 264
ANLISIS DE DATOS 267
INDICADORES POR TEM 267
INDICADORES POR OPCIN 273
MAPA DE DISTRIBUCIN DE HABILIDADES Y DIFICULTADES 291
PROMEDIO, DESVIACIN ESTNDAR Y VALORES
MXIMO Y MNIMO DE DIFICULTADES DE TEMS 293
FUNCIN DE INFORMACIN DE LA PRUEBA 294
VALOR DE DIFICULTAD DE TEMS POR PAS 295
VALOR DE AJUSTE DE TEMS POR PAS 301
VALOR DE DISCRIMINACIN DE TEMS POR PAS 307
PROPORCIN DE RESPUESTAS CORRECTAS DE CADA TEM POR PAS 313
V.2.4. TEMS DE MATEMTICA 3 319
RESULTADOS SOBRESALIENTES 319
DEPURACIN DE LA INFORMACIN RECIBIDA 320
ANLISIS DE DATOS 323
INDICADORES POR TEM 323
INDICADORES POR OPCIN 327
MAPA DE DISTRIBUCIN DE HABILIDADES Y DIFICULTADES 342
PROMEDIO, DESVIACIN ESTNDAR Y VALORES
MXIMO Y MNIMO DE DIFICULTADES DE TEMS 344
FUNCIN DE INFORMACIN DE LA PRUEBA 345
VALOR DE DIFICULTAD DE TEMS POR PAS 346
VALOR DE AJUSTE DE TEMS POR PAS 352
VALOR DE DISCRIMINACIN DE TEMS POR PAS 358
PROPORCIN DE RESPUESTAS CORRECTAS DE CADA TEM POR PAS 364
V.2.5. TEMS DE MATEMTICA 6 370
RESULTADOS SOBRESALIENTES 370
DEPURACIN DE LA INFORMACIN RECIBIDA 371
INDICADORES POR OPCIN 380
MAPA DE DISTRIBUCIN DE HABILIDADES Y DIFICULTADES 398
PROMEDIO, DESVIACIN ESTNDAR Y VALORES
MXIMO Y MNIMO DE DIFICULTADES DE TEMS 400
FUNCIN DE INFORMACIN DE LA PRUEBA 401
VALOR DE DIFICULTAD DE TEMS POR PAS 402
VALOR DE AJUSTE DE TEMS POR PAS 408
VALOR DE DISCRIMINACIN DE TEMS POR PAS 414
PROPORCIN DE RESPUESTAS CORRECTAS DE CADA TEM POR PAS 420
V.3. CONSTRUCCIN DE ESCALAS DE HABILIDADES
Y NIVELES DE DESEMPEO 426
V.3.1. FUNDAMENTACIN TERICA DEL MODELO
LAS TEORAS DE MEDICIN 427
LA TEORA DE RESPUESTA AL TEM (TRI) 428
PARMETROS Y MODELOS EN LA TRI 429
MODELO DE DOS PARMETROS 430
MODELO DE TRES PARMETROS 431
MODELO DE RASCH 432
MODELO UTILIZADO PARA EL PROCESAMIENTO DEL ESTUDIO PRINCIPAL 433
V.3.2. DEPURACIN DE BASES DE DATOS PARA EL ANLISIS DE TEMS 434
POR INFORMACIN INSUFICIENTE 434
POR PREGUNTAS NO ALCANZADAS 434
POR DESAJUSTE DE LOS ESTUDIANTES EVALUADOS 434
V.3.3. VERIFICACIN DE LOS SUPUESTOS DEL MODELO 435
V.3.4. INDICADORES ESTADSTICOS PARA EL ANLISIS DE TEMS 435
INDICADORES DE CATEGORA UNO 436
AJUSTE PRXIMO Y LEJANO (INFIT Y OUTFIT) 436
FUNCIONAMIENTO DIFERENCIAL DE TEMS DIF 437
INDICADORES DE CATEGORA DOS 437
DIFICULTAD 437
DISCRIMINACIN 438
CORRELACIN PRODUCTO MOMENTO PUNTO MEDIDA 438
CURVA CARACTERSTICA DEL TEM CCI 439
PROMEDIO DE HABILIDAD POR OPCIN 439
CORRELACIONES INTER-TEM 440
ERROR ESTNDAR DE MEDICIN 440
MAPA DE DISTRIBUCIN DE HABILIDADES Y DIFICULTADES 441
INDICADORES ESTADSTICOS PARA ANLISIS DE GRUPOS DE TEMS 441
PROMEDIO 441
DESVIACIN ESTNDAR 442
PUNTUACIN MXIMA Y MNIMA 442
FUNCIN DE INFORMACIN 442
V.3.5. DEPURACIN DE BASES DE DATOS PARA GENERACIN
DE ESCALAS DE CALIFICACIN 443
DEPURACIN PREVIA AL PROCESAMIENTO PARA ANLISIS DE TEMS 443
POR INFORMACIN INSUFICIENTE 443
POR PREGUNTAS NO ALCANZADAS 443
POR ASISTENCIA PARCIAL 443
DEPURACIN POSTERIOR AL PROCESAMIENTO PARA ANLISIS DE TEMS 443
POR DESAJUSTE DE LOS ESTUDIANTES EVALUADOS 443
POR ANLISIS DE TEM 443
V.4. ESCALAS DE CALIFICACIN 444
PUNTUACIN TOTAL EN LA PRUEBA 444
NIVEL DE DESEMPEO 444
DESEMPEO RELATIVO POR CATEGORAS DE LA ESTRUCTURA DE LA PRUEBA 444
V.4.1. NIVELES DE DESEMPEO 445
CIENCIAS GRADO 6 REPORTE NIVELES 448
NIVELES DE LECTURA 449
V.4.2. SOFTWARE PARA PROCESAMIENTO 451
V.5. CONSTRUCCIN Y VALIDACIN DE LOS NDICES 452
UTILIZADOS PARA EL ESTUDIO DE FACTORES ASOCIADOS 452
ANEXO 5 ASPECTOS METODOLGICOS 468
INDICADORES ESTADSTICOS DE LOS NDICES 469
INDICADORES ESTADSTICOS DE LOS TEMS DE LOS NDICES 470
DISCRIMINACIN 471

ANEXO
MANUALES E INSTRUCTIVOS 484
A. Tablas 485
Tabla 1.1. Tasa de participacin de escuelas 485
Tabla 1.2. Tasa de participacin de estudiantes, tercer grado 486
Tabla 1.3. Tasa de participacin de estudiantes, sexto grado 487
Tabla 4.1. Nivel de correspondencia para items
de respuesta abierta de tercer y sexto grado 488
Tabla 4.2. ndice Kappa para items de matemticas
de tercer y sexto grado 489
B. RESUMEN INTERNACIONAL 491
I.CARACTERSTICAS DEL MUESTREO 491
II.APLICACIN 491
III.CALIFICACIN DE ITEMS DE RESPUESTA ABIERTA 493
C. RESMENES NACIONALES 494
ARGENTINA 494
BRASIL 497
CHILE 500
COLOMBIA 503
COSTA RICA 506
CUBA 409
ECUADOR 512
EL SALVADOR 515
GUATEMALA 518
MXICO 521
NICARAGUA 524
NUEVO LEN, MXICO 527
PANAM 530
PARAGUAY 533
PER 536
REPBLICA DOMINICANA 539
URUGUAY 542
TRADUCCIN DE TEXTOS DE GRFICOS INEDITABLES 545
D. CRITERIOS Y PROCEDIMIENTOS PARA EL ASEGURAMIENTO
DE LA CALIDAD EN EL SERCE 546
SUMARIO 546
INTRODUCCIN 546
PARTE I 546
ASEGURAMIENTO DE LA CALIDAD EN LA PRODUCCIN
DE INSTRUMENTOS Y RESULTADOS 546
PARTE II
ASEGURAMIENTO DE LA CALIDAD EN LA IMPLEMENTACIN
DEL ESTUDIO EN LOS PASES 547
INTRODUCCIN 548
EL DOCUMENTO TIENE VARIOS PROPSITOS. 548

PARTE I.
ASEGURAMIENTO DE LA CALIDAD
EN LA PRODUCCIN DE INSTRUMENTOS Y RESULTADOS 551
CRITERIO I.1. - INSTRUMENTOS DE MEDICIN - PRUEBAS 551
CRITERIO I.2. INSTRUMENTOS DE MEDICIN - CUESTIONARIOS 553
CRITERIO I.3. - DISEO MUESTRAL 555
CRITERIO I.4. - PROCEDIMIENTOS DE APLICACIN ESTANDARIZADOS 557
CRITERIO I.5. - PROCESAMIENTO Y ANLISIS DE LA INFORMACIN 558
CRITERIO I.6. - REPORTES DE RESULTADOS 559
CRITERIO I.7. ACCESO A LAS BASES DE DATOS 560

PARTE II
ASEGURAMIENTO DE LA CALIDAD
EN LA IMPLEMENTACIN DEL ESTUDIO EN LOS PASES 562
CRITERIO II.1. - EQUIPO DE TRABAJO 562
CRITERIO II.2. - PARTICIPACIN EN LA APLICACIN PILOTO 564
CRITERIO II.3. - APLICACIN DE LAS PRUEBAS SERCE 566
CRITERIO II.4. - SUPERVISIN EXTERNA DE LA APLICACIN DEFINITIVA 568
CRITERIO II.5. - CUMPLIMIENTO DE PLAZOS Y CRONOGRAMAS 570
CRITERIO II.6. - ELABORACIN DEL MARCO MUESTRAL NACIONAL 572
CRITERIO II.7. - COBERTURA A LOGRAR EN LA APLICACIN DEFINITIVA 574
CRITERIO II.8. - CODIFICACIN DE PREGUNTAS DE RESPUESTA ABIERTA 576
CRITERIO II.9. - CAPTURA DE DATOS Y CONFORMACIN DE BASES DE DATOS 578
CRITERIO II.10. - CONFIDENCIALIDAD DE LOS INSTRUMENTOS 580
CRITERIO II.11. - CONFIDENCIALIDAD DE LOS RESULTADOS PROVISORIOS 582
CRITERIO II.12. - TRANSPARENCIA EN LA DIVULGACIN DE RESULTADOS 583
1
CAPTULO

DISEO
DE
INSTRUMENTOS
E
ste apartado describe la metodologa utilizada en el diseo y elaboracin de los instrumentos empleados
en el SERCE, as como el procedimiento seguido para analizar y aprobar las adaptaciones estructurales
y lingsticas especcas requeridas por los pases participantes y para realizar la respectiva traduccin
del espaol al portugus, con miras a producir la versin aplicada en Brasil. Los instrumentos se
conforman, por una parte, con las pruebas de desempeo acadmico, y por otra parte, con los cuestionarios
de factores asociados. Las actividades realizadas (cuadro I.1) para poder elaborar cada uno de los instrumentos
comprendieron, desde el anlisis curricular de la regin y la revisin del estado del arte en cada campo, hasta las
adaptaciones especcas de las versiones nacionales.

Cuadro I.1. Cronograma de la construccin de los instrumentos

Actividades Periodo

1. Elaboracin del anlisis curricular de la regin. Feb Nov 2004

2. Elaboracin de documentos sobre habilidades para la vida. Feb Mar 2005

3. Elaboracin de los items para las pruebas.


Recepcin de propuestas de items de los pases.
Mar Abr 2005
Seleccin de items propuestos por los pases.
Construccin de items nuevos por parte de expertos.

4. Consulta a los pases sobre pertinencia curricular de los items y ensamble de


Abr 2005
bloques y cuadernillos para la aplicacin piloto.

5. Elaboracin de los items para los cuestionarios. Abr May 2005

6. Adaptacin lingstica de pruebas y cuestionarios en castellano, atendiendo re


May Dic 2005
querimientos de los pases, y traduccin al portugus.

7. Aplicacin piloto de pruebas y cuestionarios. Jun Dic 2005

8. Anlisis conceptual y estadstico de items, estructuracin de la prueba para la


Mar 2006
aplicacin denitiva y ensamble de bloques y cuadernillos.

9. Anlisis conceptual y ajuste de cuestionarios para la aplicacin denitiva. May Jun 2006

10. Adaptaciones lingsticas y estructurales de las versiones nacionales para apli-


Abr Oct 2006
cacin denitiva.

CAPTULO 1 DISEO DE INSTRUMENTOS 13


I.1. DISEO
DE LAS PRUEBAS DE DESEMPEO

T
eniendo en consideracin las reas y grados denidos para ser evaluados, as como las recomendaciones
emanadas de la primera reunin del Comit Tcnico Consultivo (UNESCO, 2004a), se disearon siete
pruebas en total: tres de ellas dirigidas a evaluar los desempeos de los estudiantes de tercer grado
en lectura, matemtica y escritura; y otras cuatro pruebas encaminadas a evaluar el desempeo de los
estudiantes de sexto grado en los mismos campos de lectura, matemtica y escritura, ms el de ciencias naturales.
Enseguida se presenta el marco conceptual, el alcance y el formato de las pruebas y los principales elementos
derivados de la aplicacin piloto que permitieron anar las versiones denitivas.

I.1.1. MARCO CONCEPTUAL


El SERCE fue denido como un estudio de base curricular, teniendo en consideracin slo los elementos comunes
en la regin, y con el enfoque de habilidades para la vida declarado por UNESCO. La atencin de esta denicin
implic la elaboracin de un anlisis curricular de la educacin bsica ofrecida en los pases participantes y la
conformacin de paneles de expertos por cada rea disciplinar evaluada, quienes fueron responsables de disear
y conformar las pruebas, a partir de los items propuestos por los mismos pases.

ANLISIS CURRICULAR
Como un aporte al LLECE, el Instituto Colombiano para el Fomento de la Educacin Superior (ICFES) dispuso
y coordin un equipo de expertos en cada una de las reas previstas para la evaluacin: lenguaje, matemtica
y ciencias. Cada rea cont con cuatro especialistas expertos en los fundamentos conceptuales y la pedagoga
del rea y en proyectos de evaluacin a gran escala. Adicionalmente, se constituy un equipo trasversal socio-
pedaggico que brind su apoyo y particip en las discusiones semanales de los equipos de rea y se cont
tambin con el concurso de dos lectores crticos que revisaron cada uno de los textos generados y sugirieron los
ajustes pertinentes en el documento nal.

El trabajo se realiz durante cerca de nueve meses en los que se solicit a los pases latinoamericanos que
remitieran material curricular relevante, en particular: los diseos o estructuras curriculares nacionales, los
materiales dirigidos a estudiantes de los grados a evaluar (tercero y sexto) en las reas previstas (lenguaje,
matemtica y ciencias) y las pruebas utilizadas en operativos nacionales de evaluacin. Adicionalmente se
solicit informacin sobre la legislacin y normativa que rige aspectos de poltica curricular en cada pas. En
algunos casos no fue posible obtener todo el material mencionado, en especial fue difcil acceder a las pruebas
nacionales debido a las polticas de condencialidad de los pases; sin embargo, se logr acopiar cantidad
suciente de documentacin.

14 REPORTE TCNICO
Cuadro I.1.1.1. Enfoques identicados en el anlisis curricular

rea
Dimensin
Lenguaje1 Matemtica Ciencias
Con nfasis en el aspecto formativo Con nfasis en las estruc-
de la matemtica. turas conceptuales de las
ciencias.
Lingstico textual. Con nfasis en la importancia de
Disciplinar Gramatical prescriptivo. la educacin matemtica en la Descriptivo de las ciencias y
sociedad. de las leyes que lo rigen.

Pragmtico. Pragmtico.

Activo constructivista.
Activo constructivista.
Pedaggica Interactivo constructivista.
Instruccional directivo.
Instruccional directivo.

Con nfasis en la indagacin de


habilidades y destrezas.
Con nfasis
en contenidos. Con nfasis en destrezas y conteni-
Con nfasis en contenidos y
dos prescritos.
habilidades prescritos.
Con nfasis
en habilidades. Orientado hacia la evaluacin de
Evaluativa competencias bsicas que se ex-
Con nfasis en el uso del
conocimiento para la reso-
A partir de estndares, plicitan en indicadores generales o
lucin de problemas nove-
logros acadmicos, en diseos de grado.
dosos.
competencias o
desempeos. Enfoque que orienta explcitamente
estndares de logro acadmico o
desempeos.

Lenguaje1

El anlisis curricular ofrece una panormica del currculo de la regin latinoamericana basada en la revisin de la
documentacin proveniente de Argentina, Bolivia, Brasil, Chile, Colombia, Costa Rica, Cuba, Ecuador, El Salvador,
Honduras, Mxico, Nicaragua, Paraguay, Per, Repblica Dominicana, Uruguay y Venezuela2. Para explorar
el enfoque prevaleciente en los pases cuya documentacin fue recibida y estudiada, en cada rea evaluada
(Bogoya, 2005), el anlisis consider tres dimensiones a manera de perspectivas: la disciplinar; la pedaggica; y
la evaluativa (cuadro I.1.1.1).

1 El anlisis curricular se hizo para el rea de lenguaje y comunicacin que incluye lectura,literatura y otros lenguajes; sin embargo, el cuadro nica-
mente recoge las subcategoras consideradas para el primero de estos aspectos.
2 Guatemala y Panam no fueron parte de este anlisis pero participaron en el estudio asumiendo el anlisis regional hecho sobre la base de la
informacin recolectada en los dems pases.

CAPTULO 1 DISEO DE INSTRUMENTOS 15


Habilidades
para la vida

L
a denicin de las pruebas tuvo en consideracin el concepto de life skills que apareci como respuesta
a la necesidad de incluir en el currculo escolar elementos que fomentaran el desarrollo personal de los
estudiantes, ayudarlos a desarrollar su potencial y lograr una vida privada, profesional y social plena.
Adems, que pudieran ayudar a los estudiantes a hacer frente a riesgos, a tomar decisiones en situa-
ciones de emergencia y a desarrollar estrategias de supervivencia. El concepto suele referirse tambin como
competencias especcas, en el sentido de capacidades (saberes, habilidades/aptitudes, valores, actitudes y com-
portamientos) necesarias para enfrentar distintos tipos de contextos y problemas de la vida cotidiana, privada,
social y profesional, as como situaciones excepcionales, de manera exitosa (Atorresi, 2005; Bronzina, 2005;
Macedo, 2005).

Las competencias pueden asociarse con habilidades vinculadas al desempeo que surge en forma autnoma y
genuina, al conocimiento en accin y que puede aplicarse en contextos especcos, al saber que conjuga un saber
hacer con sentido y saber explicar aquello que se hace y por qu se hace.

La construccin y el desarrollo de competencias suponen una articulacin entre la apropiacin conciente del
saber y el desarrollo de habilidades cognitivas. Es necesario entonces, en esta perspectiva, ir ms all de los
conocimientos entendidos como acumulacin de informacin o denicin rgida de conceptos, para entrar en el
desarrollo de procedimientos intelectuales que permitan operar sobre el conocimiento, aplicarlo en situaciones
que aparecen por primera vez y producir nuevos conocimientos (Bogoya, 2000; Braslavsky, 2001).

Las estrategias educativas que procuran formar con el enfoque de las habilidades para la vida constituyen una
importante metodologa para promover la insercin a la sociedad de los jvenes como ciudadanos activos. Es
por esto que en las agendas educativas de todos los currculos debe promoverse el desarrollo de las habilidades
mencionadas para que los aprendizajes se transformen en capacidad para tomar decisiones, resolver problemas
novedosos, pensar creativa y crticamente, comunicarse con eciencia, y establecer y mantener relaciones inter-
personales.

16 REPORTE TCNICO
ESPECIFICACIONES
DE LAS PRUEBAS

Como conclusin del anlisis curricular se lleg a una primera versin de las especicaciones de las pruebas que
sirvieron como base para el diseo de los instrumentos. Dichas especicaciones denen los dominios conceptuales
y los desempeos previstos para cada rea, as como la proporcin de items para cada caso. Con posterioridad a
la publicacin de este anlisis curricular, se acogi la recomendacin del Comit Tcnico Consultivo de emplear
el trmino proceso en vez de desempeo.

Adicionalmente, las especicaciones derivadas del anlisis curricular fueron revisadas por los paneles de expertos
responsables de la construccin de los instrumentos y ajustadas para vincular el enfoque de habilidades para la
vida y las observaciones de los coordinadores nacionales. La modicacin ms importante tuvo lugar en el rea
de lenguaje en donde la prueba se separ en dos: una de escritura y otra de lectura. Por otra parte, se suprimi
el proceso de lectura crtico intertextual y se desagreg el de lectura inferencial en dos procesos: inferencial
simple e inferencial complejo.

Tambin en ciencias se produjo una modicacin importante: uno de los cuatro dominios conceptuales denidos
en el anlisis curricular ciencia, tecnologa y sociedad fue valorado por el panel de expertos como un dominio
transversal, presente en los otros tres dominios, y por tanto retirado de la malla de especicaciones (cuadro
I.1.1.2).

Cuadro I.1.1.2. Dominios y procesos evaluados en las pruebas

Dominio conceptual Procesos


Literal.
Lectura de prrafos y textos.
Lectura Inferencial simple.
Lectura de enunciados y palabras.
Inferencial complejo.
Nmeros.
Reconocimiento de objetos y elemen-
Geometra.
tos.
Matemtica Medicin.
Solucin de problemas simples.
Estadstica.
Solucin de problemas complejos.
Variacional.
Reconocimiento de conceptos.
Seres vivos y salud.
Aplicacin de conceptos e interpret-
Ciencias Tierra y ambiente.
acin.
Materia y energa.
Solucin de problemas.

CAPTULO 1 DISEO DE INSTRUMENTOS 17


FORMATO
DE LAS PRUEBAS

En todos los casos las pruebas son de lpiz y papel, mientras que los formatos de los items varan dependiendo
del rea evaluada. En las dos pruebas de lectura, una para tercero y la otra para sexto grado, todos los items son
cerrados, es decir, estn estructurados con un enunciado y cuatro opciones de respuesta con una nica opcin
correcta, y estn asociados a textos que se presentan en el transcurso del instrumento. Tras cada texto se plan-
tean entre dos y cinco items, que el estudiante evaluado debe responder, luego de leer el texto correspondiente,
seleccionando la opcin que considere correcta entre las cuatro posibles que se ofrecen.

En las dos pruebas de matemtica, una para tercero y la otra para sexto grado, y en la prueba de ciencias para
sexto grado, se utilizaron items abiertos, en los que el estudiante tiene que producir su propia respuesta, y tam-
bin items cerrados con un enunciado y cuatro opciones de respuesta con una nica opcin correcta. Finalmente,
en las dos pruebas de escritura, una para tercero y la otra para sexto grado, se pidi al estudiante producir un
texto escrito, primero en borrador y luego en limpio, siguiendo una determinada consigna (cuadro I.1.1.3).

Cuadro I.1.1.3. Nmero de items por prueba

Nmero de Items3
Grado rea
Cerrados Abiertos Total

Lectura 66 0 66

Tercero Matemtica 66 6 72

Escritura 0 2 2

Lectura 96 0 96

Matemtica 87 9 96
Sexto
Ciencias 84 6 90

Escritura 0 2 2
Nmero de items3

3 Los items que nalmente conformaron la prueba fueron seleccionados despus de la aplicacin piloto, en donde se puso a prueba una cantidad
mayor de ellos. Los criterios de seleccin combinaron los requerimientos de las especicaciones de las pruebas y el valor de los parmetros estadsticos resul-
tantes luego de la aplicacin piloto.

18 REPORTE TCNICO
La cantidad de items por prueba, a excepcin de la de escritura, ucta entre 66 y 96 por rea y grado.
Se estim que los estudiantes pueden ser evaluados en sesiones de no ms de 60 minutos de duracin, para
minimizar el riesgo de cansancio o distraccin, por lo que fue necesario optar por un diseo de evaluacin que
permitiera dividir la prueba en cuadernillos de menor extensin y que asegurara que la mayora de estudiantes
tuviera oportunidad de responder a todos los items propuestos en el cuadernillo, dentro del tiempo de duracin
de cada sesin. Por otra parte, la teora de respuesta al tem (modelo empleado para el escalamiento de las
pruebas) presenta la ventaja, entre otras, de permitir la estimacin del desempeo de cada estudiante frente a
toda la prueba, a partir de la ejecucin real en slo un subconjunto de items.

Para asegurar que todos los estudiantes evaluados respondieran una muestra semejante de items, en trminos
de los dominios conceptuales, los procesos evaluados y su nivel de dicultad, se opt por un modelo de bloques
incompletos balanceados. Cada prueba de lectura, matemtica y ciencias se dividi en 6 bloques (B1, B2, B3, B4,
B5 y B6), cada uno con un determinado nmero de items cerrados y abiertos (cuadro I.1.1.4).

Cuadro I.1.1.4. Distribucin de items por prueba, segn bloque, rea y grado

Nmero
Nmero de Items
Grado rea Nmero de Items cerrados Total de
abiertos
items

Lectura 11, en todos los bloques. 0 11


Tercero
10, en bloques B2, B4 y B6.
Matemtica 2, en bloques B2, B4 y B6. 12
12, en bloques B1, B3 y B5.

Lectura 16, en todos los bloques. 0 16

13, en bloques B2, B4 y B6.


Matemtica 3, en bloques B1, B3 y B5. 16
16, en bloques B1, B3 y B5.
Sexto

Ciencias 14, en todos los bloques. 1, en todos los bloques. 15

CAPTULO 1 DISEO DE INSTRUMENTOS 19


Establecidos los seis bloques, se denieron seis cuadernillos (C1, C2, C3, C4, C5 y C6) que fueron ensamblados
cada uno con dos de los seis bloques referidos, siguiendo una estructura en espiral (cuadro I.1.1.5), para las
pruebas de lectura, matemtica y ciencias. Este diseo presenta la ventaja de conectar todos los bloques entre s
y asegura que en cada grupo de seis cuadernillos consecutivos, de C1 a C6, cada bloque aparece dos veces, una
en la primera posicin y otra en la segunda posicin, lo que luego permite estimar, entre otros, el efecto de la
posicin del bloque en el cuadernillo.

Cuadro I.1.1.5. Estructura de cuadernillos para lectura, matemtica y ciencias

Cuadernillo Bloque en primera posicin Bloque en segunda posicin

C1 B1 B2

C2 B3 B4

C3 B5 B6

C4 B2 B3

C5 B4 B5

C6 B6 B1

Para el caso de la prueba de escritura, se disearon dos cuadernillos por grado, cada uno con un solo item abierto
de respuesta extensa, requiriendo un texto relativo a una consigna especca que implic la elaboracin de un
borrador que luego se pas a limpio.

20 REPORTE TCNICO
lectura y otra de escritura, para cada grado (UNESCO,
ELABORACIN
2004b).
DE LOS ITEMS
En la XVI Reunin de Coordinadores Nacionales, cel-
ebrada en Managua en marzo de 2005, se present una

T
anto el anlisis curricular como los documentos segunda versin de las pruebas. Los pases contaron con
de habilidades para la vida, fueron circulados tres semanas para enviar sus comentarios en una grilla
entre los pases participantes, en cada una de de consulta que facilitaba su anlisis. En dicha reunin
sus versiones durante la respectiva elaboracin, se acord que tomando como referencia el anlisis cur-
con el n de socializar el alcance del anlisis, precisar ricular del estudio, se requera que por lo menos el 70%
conceptos y recibir aportes que permitieron anar los de los pases deba objetar un determinado tem para
textos denitivos. As mismo, los equipos tcnicos de proceder a suprimirlo (UNESCO, 2005a).
los pases prepararon y remitieron al LLECE numerosos
items ajustados a las especicaciones originales En abril de 2005 se organizaron reuniones de los pan-
planteadas en el anlisis curricular. eles de expertos que estudiaron las grillas de consulta
y anlisis de los pases con las objeciones a los items.
Sobre la base de estos aportes, cada panel de expertos Los items cuestionados fueron retirados o modica-
de rea dispuesto por UNESCO seleccion aquellos items dos.
que fueron empleados en las pruebas y elabor items
nuevos para cumplir con las especicaciones previstas.
Si bien los paneles de expertos fueron coordinados y
constituidos por especialistas o consultores de UNESCO,
ADAPTACIN LINGSTICA
algunos de sus miembros fueron invitados de los Y TRADUCCIN AL PORTUGUS
equipos tcnicos de los propios pases participantes.
De esta forma, se trat de una actividad que tambin
cont con el aporte de las coordinaciones nacionales Constituidos los cuadernillos con los items aproba-
del LLECE. dos conceptualmente por los pases, se procedi a la
diagramacin de una versin estndar que fue enviada
a los coordinadores nacionales junto con una planilla
en la que indicaron el cdigo de tem, la solicitud de
PERTINENCIA adaptacin y la justicacin de la misma, en caso de
DE LOS ITEMS alguna objecin a esta versin. Las solicitudes fueron
consideradas por la coordinacin tcnica del estu-
dio teniendo como criterio no alterar la dicultad de
En el marco del proceso de construccin de los in- los items ni el domino conceptual, los procesos o la
strumentos se dieron sucesivas consultas con los pases estructura de los mismos. Las solicitudes no aprobadas
participantes del estudio, respecto de la calidad y per- fueron explicadas y seguidas con una posibilidad de
tinencia curricular de cada uno de los items propues- rplica por parte del pas solicitante, que siempre tuvo
tos. En la XV Reunin de Coordinadores Nacionales, cel- la oportunidad de ampliar su argumentacin.
ebrada en la Habana en octubre de 2004, se present
una primera propuesta de diseo de las pruebas. En Cada rea tuvo su particularidad, por ejemplo, para el
dicha reunin los pases acordaron modicar los items caso de lectura y escritura se intent emplear, en la
de produccin escrita y separarlos de la prueba de len- medida de lo posible, castellano estndar para efectos
guaje, de forma tal que resultaron dos pruebas: una de de minimizar la cantidad de pedidos de adaptacin.

CAPTULO 1 DISEO DE INSTRUMENTOS 21


En matemtica, las adaptaciones principales estuvi- la que se aproximaron al estudio, en especial al marco
eron en los sistemas de nomenclatura para los smbolos conceptual expresado en el anlisis curricular y los
matemticos y las formas de separacin de los nme- documentos de habilidades para la vida, y a las car-
ros (por ejemplo, algunos pases de la regin usan la actersticas de las pruebas y sus items.
coma y otros el punto, para expresar cifras decimales). En la segunda traduccin, las versiones resultantes de
Aprobados los cambios a cada pas, se diagram una la primera traduccin al portugus fueron de nuevo
versin nacional de manera centralizada. traducidas al castellano por una experta en ambas len-
guas. Esta experta no tuvo conocimiento previo de las
En el caso de las pruebas en portugus, que fueron pruebas y su lengua materna era el castellano.
aplicadas en Brasil, se realiz un proceso de doble tra-
duccin: las pruebas originales (en versin estndar en
castellano) fueron primero traducidas al portugus y Finalmente, se contrastaron la versin original en cas-
luego, desde el portugus al castellano. tellano y la versin proveniente de la segunda traduc-
cin y se identicaron posibles discrepancias semn-
ticas, en cuyo caso se revisaron las traducciones al
Despus, la versin original en castellano y la versin portugus.
resultante de la traduccin de portugus a castellano
fueron comparadas y validadas, antes de aprobar las Este ltimo anlisis fue realizado por la coordinadora
pruebas en portugus. de las pruebas del rea en conjunto con la experta que
supervis el proceso de traduccin en Brasil.
La primera traduccin, de castellano a portugus, es-
tuvo coordinada por el Instituto Nacional de Estudos
e Pesquisas Educacionais- Ansio Teixeira (INEP) del
Ministerio de Educacin de Brasil y por la Secretara
Estadual de Educacin de Goias. Para este propsito se
constituy un equipo de especialistas con experiencia
en la enseanza de las disciplinas o en las reas espe-
ccas.

El equipo se conform con tres especialistas en lengua


portuguesa, tres especialistas en matemtica y dos es-
pecialistas en ciencias naturales, ms un especialista
en lengua portuguesa y espaola.

Los requisitos mnimos para formar parte de este equipo


fueron ser brasileo de nacimiento, haber hecho la es-
colaridad completa en Brasil y tener un amplio dominio
de la lengua espaola. Todo el trabajo fue coordinado
por una especialista en medicin que particip en los
paneles de expertos realizados para la denicin nal
de los items utilizados en la aplicacin piloto.

Los traductores recibieron una capacitacin previa en

22 REPORTE TCNICO
I.1.2. DISEO DE LAS PRUEBAS
EN LA FASE PILOTO

Para la aplicacin piloto se utiliz un nmero de items mayor que el nmero especicado para las pruebas, en
las reas de lectura, escritura y matemtica, con el n de poder seleccionar entre estos items los que arrojaron
los mejores indicadores estadsticos, con destino a las pruebas denitivas. Para este efecto, se construyeron dos
bloques y dos cuadernillos ms que los previstos en el diseo y adicionalmente se colocaron ms items en cada
uno de los bloques (cuadro I.1.2.1).

En el caso de la prueba de ciencias, que slo se dise para el grado sexto, no fue posible alcanzar una produccin
de items mayor que la prevista, debido a que los items presentados en la XVI Reunin de Coordinadores Naciona-
les (UNESCO, 2005a) fueron objetados en su mayora, lo cual oblig a emplear el tiempo disponible, entre la fecha
de esta reunin y la de iniciacin de la aplicacin piloto, en apenas construir los nuevos items que permitieron
reemplazar aquellos objetados.

Cuadro I.1.2.1. Composicin de las pruebas utilizadas en la aplicacin piloto

Nmero de Nmero de Nmero


Nmero de Nmero de
Grado rea items items total de
bloques cuadernillos
cerrados abiertos items

Lectura 104 0 104 8 8

Tercero Matemtica 104 8 112 8 8

Escritura 0 4 4 4 4

Lectura 120 0 120 8 8

Matemtica 120 12 132 8 8


Sexto
Ciencias 83 7 90 6 6

Escritura 0 4 4 4 4

CAPTULO 1 DISEO DE INSTRUMENTOS 23


4
Las pruebas fueron aplicadas en el operativo piloto implementado en los pases participantes , con la direccin y
control del respectivo coordinador nacional y sus equipos de trabajo, siguiendo las pautas indicadas en el Manual
del Coordinador Nacional para la aplicacin piloto (UNESCO, 2005b).

Las muestras nacionales de la aplicacin piloto fueron sucientemente grandes y diversas para valorar las
propiedades estadsticas de los items y de la prueba en su conjunto. As mismo, en el operativo se incorporaron
formularios que permitieron recoger informacin sobre el funcionamiento de las pruebas en campo, en trminos
de comprensin de instrucciones, adecuacin de los plazos y tiempos preestablecidos, entre otros aspectos
operativos que fueron puestos a prueba.

Las pruebas fueron administradas por examinadores externos a las escuelas, siguiendo las indicaciones
proporcionadas por el Manual del Aplicador para la aplicacin piloto (UNESCO, 2005c), donde se indican todos los
procedimientos y se incluyen las instrucciones que debieron darse a los estudiantes. Los directores de las escuelas
tambin recibieron el Manual del Coordinador de Centro Educativo para la aplicacin piloto ((UNESCO, 2005d),
con las instrucciones correspondientes que fueron observadas durante la administracin de las pruebas.

Entre los procedimientos establecidos, se asegur la alternancia de cuadernillos en todas las aulas evaluadas,
de forma tal que se consiguieron similares cantidades de cuadernillos respondidos de cada tipo, en las aulas,
escuelas y pases participantes.

4 La aplicacin piloto se realiz en todos los pases, con excepcin de Ecuador. En el caso de Brasil, la muestra piloto fue representativa nicamente
del Estado de Gois.

24 REPORTE TCNICO
I.1.3. DISEO
DE LAS PRUEBAS DEFINITIVAS

Una vez consolidada la informacin proveniente de la aplicacin piloto, se procesaron estos datos de acuerdo
con el modelo de Rasch, siguiendo la metodologa concertada entre los pases participantes, que se encuentra
documentada en el Manual de Procesamiento para el anlisis de items de la aplicacin piloto (UNESCO, 2005e).
Luego del procesamiento de los datos5, se organizaron reuniones de los paneles de expertos de rea para el
estudio respectivo de los indicadores estadsticos encontrados, la seleccin de los items de mejor desempeo y
que cumplieron con las especicaciones previstas en el diseo, y el ensamble de bloques y cuadernillos para las
pruebas denitivas.

Los objetivos de estos talleres fueron principalmente dos: primero, a la luz de los resultados de la aplicacin
piloto, denir los items, bloques y cuadernillos que conformaron las pruebas denitivas de lectura, matemtica y
escritura para tercer grado y en las mismas reas ms ciencias para sexto grado; y segundo, ajustar los manuales
de codicacin de la respuesta abierta de las pruebas de matemtica y ciencias, considerando los resultados de
la aplicacin y la consistencia entre correctores y supervisores. Adicionalmente, el panel de lenguaje tuvo como
objetivo valorar el nivel de consistencia de la correccin de la escritura, considerando las dicultades surgidas
de la amplitud de criterios a valorar y la poca experiencia en la regin sobre evaluaciones de este tipo a gran
escala.

En cada reunin participaron por lo menos dos especialistas del rea, un especialista en evaluacin y uno en
psicometra. Las principales actividades realizadas en el marco de estas reuniones se indican a continuacin.

PRESENTACIN
DEL MODELO DE ANLISIS

Esta labor estuvo a cargo del especialista en psicometra y consisti en la explicacin a los expertos de rea
del signicado de cada uno de los indicadores estadsticos que arroja el procesamiento de los datos, utilizando el
programa Winsteps, as como los criterios de aceptacin o rechazo de un determinado tem, desde la perspectiva
estadstica (cuadro I.1.3.1).

En el caso de las pruebas de matemtica y de ciencias, se incorporaron en el anlisis los items abiertos con la
metodologa de crdito parcial y se dispuso un anlisis adicional al colapsar crditos distintos en una sola cat-
egora. Tambin se suministr la frecuencia de casos en cada cdigo establecido, considerando tanto el crdito
otorgado como el proceso identicado por el codicador respectivo.

5 En el procesamiento los datos no se consideraron los de Costa Rica, debido a que este pas no remiti las bases de datos dentro del plazo establecido.

CAPTULO 1 DISEO DE INSTRUMENTOS 25


Cuadro I.1.3.1. Indicadores para el anlisis de items

Indicador6 Criterio de aceptacin

Discriminacin (DISCRIM) Mayor o igual que 0,70

Correlacin punto-medida (PTMEA) Mayor o igual que 0,25

Ajuste prximo (INFIT) Mayor o igual que 0,80 y menor o igual que 1,20

Ajuste lejano (OUTFIT) Mayor o igual que 0,80 y menor o igual que 1,20

Promedio de habilidad por opcin Mayor para la clave que para las dems opciones

Funcionamiento diferencial (DIF) Menor o igual que 1,96


6
indicador

ITEMS
ANMALOS

A partir de los informes nacionales y del informe internacional de anlisis de items (UNESCO, 2006a), donde se
reportaron los valores estimados para cada indicador, tem a tem, se identicaron aquellos items cuyos indicado-
res no satiscieron algunos de los criterios establecidos. Adicionalmente, se analizaron de nuevo todos los items
y los respectivos informes de aplicacin provenientes de los pases, donde se incluyeron observaciones derivadas
de las preguntas formuladas por los estudiantes al momento de responder los cuadernillos, con el n de vericar
el cabal cumplimiento de las especicaciones conceptuales de las pruebas.

6 Los trminos entre parntesis indican la denominacin empleada por el programa Winsteps (utilizado para el procesamiento de los datos) y que se
utiliza en los reportes de anlisis de items.

26 REPORTE TCNICO
ceptual y el proceso que evala, la opcin que opera
ENSAMBLE DE
como clave o respuesta correcta y los parmetros es-
LAS PRUEBAS DEFINITIVAS tadsticos estimados con base en los resultados de la
aplicacin piloto.

U
na vez retirados los items anmalos, bien Luego, se veric la distribucin de los items entre cada
por razones conceptuales o estadsticas, se uno de los bloques previstos en el diseo, procurando
procedi a conformar cada una de las prue- cubrir el espectro ms amplio posible de dicultades
bas denitivas. Para ello se seleccionaron los y evitando redundancias o conglomerados demasiado
items cerrados que arrojaron los mejores indicadores densos en algn punto de la escala. En seguida, se pro-
estadsticos y que cumplieron con las especicaciones cedi a ensamblar cada uno de los cuadernillos de las
previstas en el diseo, en trminos de dominios con- pruebas denitivas, siguiendo el diseo establecido.
ceptuales y procesos, derivadas del anlisis curricular.
Igualmente se seleccionaron los items abiertos para Por otra parte, tambin fue necesario revisar y ajustar
incluir en las pruebas denitivas de matemtica y cien- los criterios de codicacin de las preguntas abiertas
cias, con base en criterios similares a los considerados de matemtica y ciencias que se siguieron en la apli-
en el caso de los items cerrados. cacin piloto, segn los resultados del anlisis de la
consistencia observada en la correccin, la tasa de co-
En las pruebas de matemtica y de ciencias, se pro- incidencias entre correctores y supervisores, el ndice
cur la conservacin de los bloques tal como fueron de Kappa estimado y cuyo valor debi ser mayor que
elaborados para la aplicacin piloto, en la medida de lo 0,60 y el juicio integral de los expertos del rea. Los
posible, pero se ajust el nmero de items por bloque. procedimientos de codicacin debidamente ajustados
En las pruebas de lectura, se control la temtica y la constituyeron los manuales respectivos para la apli-
extensin de los distintos textos y se procur man- cacin
tener un nmero similar de preguntas asociadas con denitiva (UNESCO, 2006b; UNESCO, 2006c).
cada texto. Es importante sealar que durante el proceso de con-
formacin de las pruebas denitivas, se atendieron
En el caso de las pruebas de matemtica y lectura de las recomendaciones surgidas en la segunda reunin
tercer grado, se seleccionaron items apropiados de an- del Comit Tcnico Consultivo (UNESCO, 2006d), so-
claje, para realizar la equiparacin entre el primer estu- bre todo en el sentido de mantener la estructura, el
dio y el segundo, dentro de las limitaciones tcnicas enunciado y las opciones de todos los items, en forma
dadas por las diferencias de diseo y de enfoque entre idntica a como fueron utilizados en la aplicacin pi-
uno y otro estudio. En las mismas pruebas, loto, con el n de asegurar la estabilidad en el valor y
para ambos grados, tambin se seleccionaron items la estructura de sus indicadores estadsticos.
apropiados de anclaje, para efectuar la equiparacin
entre tercero y sexto grados, considerando desde luego En el caso de la prueba de ciencias, sin embargo, de-
las restricciones derivadas del nmero de estos items, bido a que no se contaba con items adicionales a los
la diferencia entre algunos dominios conceptuales y la previstos en el diseo, fue necesario introducir modi-
distancia entre los grados considerados. caciones sustanciales en seis items, una modicacin
En seguida, se construyeron las tablas de especica- leve en un tem e introducir un tem completamente
ciones de las pruebas denitivas y la nuevo en reemplazo de uno eliminado, siempre a juicio
tabla de distribucin de items por bloque, incluyendo del respectivo panel de expertos.
el nombre asignado al tem, tanto en la aplicacin pi-
loto como en la aplicacin denitiva, el dominio con-

CAPTULO 1 DISEO DE INSTRUMENTOS 27


En la prueba de matemtica no hubo items con cambios
ESTRUCTURA DE LAS
sustanciales; en total ocho items de tercero y tres de
sexto tuvieron alguna modicacin leve en la notacin PRUEBAS DEFINITIVAS
(por ejemplo: retirar una coma de un enunciado, o alar-
gar un guin para darle mayor visibilidad, o cambiar la
inicial de una palabra de mayscula a minscula). En la Satisfechos todos los pasos anteriores, las pruebas
prueba de lectura, un tem de tercer grado sufri una denitivas para evaluar la escritura comprendieron dos
modicacin en una de las opciones, debido a que se consignas para cada grado. En el caso de tercero, una
observ que su comportamiento fue semejante al de consigna estuvo asociada con listar diez tareas entre
la clave, por un problema de formulacin. Los dems aquellas dadas al estudiante en la escuela o en la casa;
items de estas tres reas (lectura, matemtica y cien- y la otra consigna consisti en listar seis recomenda-
cias) mantuvieron intacta la formulacin utilizada en ciones entre las entregadas por parte de un mdico
la aplicacin piloto. que visitaba la escuela. Para sexto grado, una consigna
pidi escribir sobre el perro, para una enciclopedia so-
En relacin con la prueba de escritura, que corresponde bre el mundo animal que sera publicada con destino a
a un estudio pionero y exploratorio en la regin, con nios de otro planeta; y la otra consigna pidi escribir
un nfasis cualitativo, tambin se estudiaron las ob- sobre el pan, para una enciclopedia sobre comidas lati-
servaciones efectuadas durante la aplicacin piloto y noamericanas que tambin sera publicada con destino
el nivel de consistencia entre los correctores naciona- a nios de otro planeta.
les y el equipo de supervisin centralizado, a la luz Las pruebas de escritura fueron pensadas para explorar
de los indicadores estadsticos que arroj el respec- un proceso que surge en varias etapas y que requi-
tivo procesamiento de los datos, utilizando tambin el ere reexin y madurez alrededor de un tema. En este
modelo de Rasch (UNESCO, 2006e). Para la prueba de sentido, las pruebas previeron tres pasos claramente
tercer grado se eligieron los cuadernillos 2 y 3, pues diferenciados: primero, hacer un borrador o poner ideas
los cuadernillos piloto 1 y 4 no permitieron discriminar en sucio; segundo, pensar cmo mejorar el borrador;
los estudiantes capaces de subclasicar un universo de y tercero, pasar el borrador en limpio, requiriendo
cosas; por su parte, en sexto grado se eligieron los adems la colocacin de un ttulo.
cuadernillos 1 y 3, porque mostraron que permiten es- Por otra parte, las pruebas para lectura y matemtica,
timular un mayor despliegue de la escritura, aunque es en tercero y sexto grados, y en las mismas reas ms
importante advertir que los cuatro cuadernillos piloto ciencias para sexto grado, correspondieron a la estruc-
arrojaron indicadores estadsticos satisfactorios y con tura y especicaciones que se muestran en los cuadros
todos se logr un nivel de escritura aceptable por parte I.1.3.2 a I.1.3.6, respectivamente, en trminos de do-
de los estudiantes. minios conceptuales y procesos.

Luego, se revisaron y ajustaron las instrucciones que -


nalmente aparecieron en forma explcita en cada cuad-
ernillo, con las que los estudiantes pudieron responder
de manera adecuada cada prueba.

28 REPORTE TCNICO
Cuadro I.1.3.2. Especicaciones de la prueba de lectura para tercer grado

PROCESOS
Lectura inferencial Lectura inferencial TOTAL
Lectura literal
simple compleja
DOMINIOS
Porcentaje Porcentaje Porcentaje Porcentaje
Nmero Nmero Nmero Nmero
de items de items de items de items
de items de items de items de items
(%) (%) (%) (%)

Lectura de
25 37,88 23 34,85 9 13,63 57 86,36
prrafos

Lectura de
enunciados 8 12,12 1 1,52 0 0,00 9 13,64
y palabras

TOTAL 33 50,00 24 36,37 9 13,63 66 100,00

Cuadro I.1.3.3. Especicaciones de la prueba de matemtica para tercer grado

PROCESOS
Solucin de TOTAL
Reconocimiento de Solucin de
problemas
objetos y elementos problemas simples
DOMINIOS complejos

Porcentaje Porcentaje Porcentaje Porcentaje


Nmero Nmero Nmero Nmero
de items de items de items de items
de items de items de items de items
(%) (%) (%) (%)

Nmeros 4 5,55 14 19,45 6 8,33 24 33,33

Geometra 10 13,89 6 8,33 1 1,39 17 23,61


Medicin 4 5,56 9 12,50 3 4,16 16 22,22
Estadstica 4 5,56 4 5,56 0 0,00 8 11,12
Variacional 3 4,16 3 4,16 1 1,39 7 9,71

TOTAL 25 34,72 36 50,00 11 15,27 72 100,00

CAPTULO 1 DISEO DE INSTRUMENTOS 29


Cuadro I.1.3.4. Especicaciones de la prueba de lectura para sexto grado

PROCESOS
Lectura inferencial Lectura inferencial TOTAL
Lectura literal
simple compleja
DOMINIOS
Porcentaje Porcentaje Porcentaje Porcentaje
Nmero Nmero Nmero Nmero
de items de items de items de items
de items de items de items de items
(%) (%) (%) (%)

Lectura de
18 18,75 40 41,67 15 15,63 73 76,05
prrafos
Lectura de
enunciados 7 7,29 9 9,37 7 7,29 23 23,95
y palabras

TOTAL 25 26,04 49 51,04 22 22,92 96 100,00

Cuadro I.1.3.5. Especicaciones de la prueba de matemtica para sexto grado

PROCESOS
Reconocimiento de Solucin de TOTAL
Solucin de
objetos y problemas
problemas simples
DOMINIOS elementos complejos
Porcentaje Porcentaje Porcentaje Porcentaje
Nmero Nmero Nmero Nmero
de items de items de items de items
de items de items de items de items
(%) (%) (%) (%)
Nmeros 8 8,33 15 15,63 4 4,17 27 28,13
Geometra 6 6,25 8 8,33 5 5,21 19 19,79
Medicin 4 4,17 11 11,46 6 6,25 21 21,88
Estadstica 8 8,33 7 7,29 1 1,04 16 16,66
Variacional 2 2,08 9 9,38 2 2,08 13 13,54

TOTAL 28 29,16 50 52,09 18 18,75 96 100,00

30 REPORTE TCNICO
Cuadro I.1.3.6. Especicaciones de la prueba de ciencias para sexto grado

PROCESOS
Aplicacin de TOTAL
Reconocimiento de Solucin de
conceptos e
conceptos problemas
DOMINIOS interpretacin
Porcentaje Porcentaje Porcentaje Porcentaje
Nmero Nmero Nmero Nmero
de items de items de items de items
de items de items de items de items
(%) (%) (%) (%)
Seres vivos
15 16,66 16 17,78 5 5,56 36 40,00
y salud
Tierra y
6 6,67 16 17,78 5 5,56 27 30,00
ambiente
Materia y
6 6,67 13 14,44 8 8,88 27 30,00
energa

TOTAL 27 30,00 45 50,00 18 20,00 90 100,00

ADAPTACIONES
LINGSTICAS

Luego de la conformacin de las pruebas denitivas, se someti a consulta en los respectivos pases la versin
estndar, junto con una planilla para efectos de documentar cualquier solicitud de adaptaciones.

Se estableci que las versiones nacionales mantuvieran los cambios aprobados en la fase piloto. Los pases slo
pudieron solicitar adaptaciones adicionales cuando los indicadores estadsticos de las pruebas, al nivel nacional,
mostraron desajustes o valores que no cumplieron con los criterios de aceptacin sealados (cuadro I.1.3.1). Los
nuevos pedidos de adaptacin fueron analizados por las coordinaciones de rea del LLECE y aprobados cuando se
consider pertinente.

En seguida, se diagramaron las versiones nacionales de las pruebas en forma centralizada y los pases tuvieron
luego la responsabilidad de su revisin y aprobacin nal.

CAPTULO 1 DISEO DE INSTRUMENTOS 31


I.2. DISEO DE LOS CUESTIONARIOS
DE CONTEXTO

Los cuestionarios que permiten identicar las variables del contexto donde tienen lugar los procesos educa-
tivos se disearon para atender el objetivo general del SERCE:

Generar conocimiento sobre los aprendizajes de lenguaje, matemtica


y ciencias, y sobre factores asociados en estudiantes de tercero y sexto
grados de educacin bsica primaria, para apoyar a los pases en el
mejoramiento de sus polticas y prcticas educativas, que les posibilite
ofrecer una educacin de mayor calidad y equidad.
(UNESCO, 2005f: 6)

En este sentido, el diseo de los cuestionarios enfatiz en aquellos factores que se encuentran directamente
dentro del mbito de inuencia de los sistemas educativos. Estos factores, vinculados principalmente con los re-
cursos y prcticas que se realizan dentro de las escuelas y los niveles de autonoma con que actan, denominados
modicables, constituyen la principal orientacin para poder formular recomendaciones de poltica resultantes
del anlisis.

Para el diseo tambin se tuvieron en cuenta factores vinculados con las caractersticas socioculturales de los
estudiantes y sus familias, con el n de poner en contexto los resultados de las pruebas (UNESCO, 2006f). El dis-
eo referido correspondi a un proceso de discusin y construccin permanente de acuerdos entre especialistas
y coordinadores nacionales del LLECE7.

7 Se tomaron como base los acuerdos de los coordinadores nacionales de la XVI Reunin (Managua, marzo de 2005), XVII Reunin (Brasilia, junio de
2005) y XVIII Reunin (Montevideo, marzo de 2006). Igualmente se consideraron los aportes de los coordinadores nacionales Beatriz Picaroni, Hctor Valds y
lvaro Fortn, as como de los especialistas Santiago Cueto, Elena Martn y Tabar Fernndez, derivados de la reunin de discusin de cuestionarios de factores
asociados (Cartagena de Indias, noviembre de 2005).

32 REPORTE TCNICO
I.2.1. ANTECEDENTES

Para establecer los referentes que permitieron estructurar el marco conceptual y luego disear los cuestion-
arios respectivos, se parti de los principales hallazgos del Primer Estudio Internacional Comparativo y sobre
los cuales era necesario profundizar, para conrmar y conocer mejor los efectos ya observados. Igualmente, se
revisaron los resultados reportados en otros estudios internacionales semejantes como los que realiza el Southern
and Eastern Africa consortium for monitoring educational quality (SACMEQ8), el Programa PISA de la Organisation
for economic co-operation and development (OECD9) y el estudio TIMSS de la International association for the
10
evaluation of the educational achievement (IEA ). Por otra parte, fue central considerar la losofa del Proyecto
11
Regional de Educacin para Amrica Latina y el Caribe (PRELAC ), que pretende promover cambios para lograr
12
que todos los pases de la regin logren los objetivos y la metas de Educacin para Todos (EPT ) al ao 2015,
principalmente en lo que se reere a la mejora de la calidad y equidad educativa.

PRIMER ESTUDIO
INTERNACIONAL COMPARATIVO

Adems del Primer Informe dedicado a los resultados de rendimiento, el Primer Estudio Comparativo produjo
el Segundo Informe, el Informe Tcnico y el Estudio Cualitativo (UNESCO, 2000, 2001 y 2002), donde se muestran
los resultados agregados de factores asociados para el conjunto de pases, entre los que se destacan algunos
factores modicables como el tamao de la biblioteca escolar (efecto positivo), que los maestros cuenten con
otro trabajo (efecto negativo), percepcin de salario adecuado por parte de los docentes (efecto positivo), invo-
lucramiento de los padres o tutores en el aula o en la escuela (efecto positivo), agrupamiento de estudiantes de
acuerdo con sus habilidades (efecto negativo) y, con mayor peso explicativo en el rendimiento que las anteriores,
el clima de aula (efecto positivo). Todas estas variables estuvieron asociadas signicativamente al rendimiento
tanto en lenguaje como en matemtica, an despus de aplicar controles estadsticos mediante una serie de
covariables.
Desde luego, es importante sealar que las variables que resultaron signicativas para el conjunto de pases no lo
fueron para algunos en particular. Por ejemplo, si bien el clima de aula es altamente signicativo para el conjunto
de pases, al nivel nacional slo fue signicativo en matemtica para Chile, Colombia y Cuba, y en lenguaje para
Chile, Colombia, Cuba, Honduras y Dominicana, aunque en todos los dems pases el efecto es positivo pero no
signicativo.
Por otra parte, el estudio cualitativo13 mostr la importancia de contar con escuelas que propician un clima
favorable para el trabajo entre docentes y estudiantes (respeto, conanza, cordialidad y afecto), alto nivel de
compromiso de los docentes, liderazgo con toma de decisiones participativas, y la activa inclusin de los padres
y madres de familia en el quehacer escolar.

8 Ver http://www.sacmeq.org/.
9 Ver http://www.pisa.oecd.org/
10 Ver http://timss.bc.edu
11 Ver http://www.unesco.cl/medios/biblioteca/documentos/prelac_proyecto_regional_educacion_esp.pdf
12 Ver http://www.unesco.cl/ept/metas.act
13 Este estudio se realiz en siete pases: Argentina, Bolivia, Chile, Colombia, Costa Rica, Cuba y Venezuela.

CAPTULO 1 DISEO DE INSTRUMENTOS 33


y el currculo aprendido (el resultado en las pruebas de
OTROS ESTUDIOS
aprendizaje (Schmidt et al, 1996 y 2001). Las variables
INTERNACIONALES incluidas en el anlisis han sido entre otras la cober-
tura del currculo y el nivel de desempeo esperado
de los estudiantes, referido al nivel de procesamiento

E
stableciendo siempre la concordancia con el intelectual o demanda cognoscitiva involucrado en la
enfoque previsto, se revisaron los resultados resolucin de un determinado problema o ejercicio.
alcanzados en otros estudios internacionales.
Por ejemplo, derivado de los estudios real- Por otra parte, los resultados sugieren que al menos
izados por SACMEQ, en Kenia se encontr un efecto al interior de los pases los niveles de cobertura del
positivo y signicativo en el rendimiento cuando los currculo explican el rendimiento en las pruebas (Baker
docentes tienen una mayor formacin y cuando hacen y Le Tendre, 2005; Schmidt et al, 2001). De hecho,
comentarios a los estudiantes respecto de sus tareas, informes nacionales en Argentina (Cervini, 2001) y
as como cuando se incrementa el nmero de materi- Per (Rodrguez y Vargas, 2002; Zambrano, 2004) han
ales escolares con que cuenta el estudiante. Tambin conrmado esta relacin entre cobertura de currculo y
se encontr que la inasistencia de los estudiantes pro- resultados en las pruebas.
duce un efecto negativo en el rendimiento (Onsomu et
al, 2005). Adicionalmente, el nivel de demanda cognoscitiva ha
sido estimado en otros estudios a partir de muestras
En segundo lugar, el Programme for International Stu- de trabajo de los estudiantes. Estos estudios encuen-
dent Assessment (PISA) de la OECD14) ha generado tran que a mayor nivel de demanda cognoscitiva, se
un interesante reporte de factores asociados que ha logran mayores resultados de aprendizaje (Newmann et
puesto nfasis en los factores escolares de equidad y al, 2001). En lenguaje, Cueto et al (2006) encontraron
rendimiento en la prueba de comprensin de lectura una asociacin entre demanda cognoscitiva y retroali-
(OECD, 2005). Es interesante notar que el clima es- mentacin al estudiante con el incremento de puntajes
colar result una de las variables ms potentes para de inicio a n de ao escolar. El estudio de Cueto et al
explicar el rendimiento escolar. La denicin de clima (2003) tambin encontr una asociacin en-
comprendi las opiniones del director, la disciplina y el tre retroalimentacin correcta del profesor a los ejerci-
sentido de pertenencia de los estudiantes a la escuela. cios de los estudiantes y rendimiento para matemti-
PISA incluy adems una seccin de autonoma escolar ca.
con preguntas sobre decisiones acerca del personal de
la escuela, nanzas, currculo y enseanza, y polticas Otro anlisis interesante realizado por el equipo de
respecto de los estudiantes. Se encontr una asocia- TIMSS est referido a los textos escolares. Valverde
cin positiva entre autonoma y rendimiento. et al (2002) colectaron textos escolares de los pases
En tercer lugar, el Trends in International Mathematics participantes en el estudio para analizar cobertura cur-
and Science Studies (TIMSS15) incluye las oportuni- ricular y niveles de demanda cognoscitiva.
dades de aprendizaje como uno de sus componentes
importantes. El modelo original distingue entre cur-
rculo intencional (referido a la norma o documento
que debe guiar las prcticas escolares), el currculo
implementado (lo que se ensea en las aulas de clase)

14 Ver http://www.pisa.oecd.org/
15 Ver http://nces.ed.gov/timss/

34 REPORTE TCNICO
Proyecto Regional
para Amrica Latina y ElCaribe(PRELAC)

es un proyecto aprobado por los Ministros de Educacin de la regin en la reunin de la


PRELAC 16
Habana el 2002 . El objetivo es promover cambios que permitan que todos los pases
de Amrica Latina logren los seis objetivos de Educacin para Todos (EPT) al 2015,
principalmente en cuanto a la mejora de la calidad y equidad educativa17. Sin embargo, los objetivos de EPT rigen
de manera general y amplia para el mundo y no especcamente para la regin. Por esta razn, en PRELAC se
establecieron cinco focos estratgicos especcos:

Foco 1: En los contenidos y prcticas de la educacin para construir sentidos acerca de nosotros mismos, los
dems y el mundo en el que vivimos.

Foco 2: En los docentes y fortalecimiento de su protagonismo en el cambio educativo para que respondan a las
necesidades de aprendizaje de los estudiantes.

Foco 3: En la cultura de las escuelas para que stas se conviertan en comunidades de aprendizaje y partici-
pacin.

Foco 4: En la gestin y exibilizacin de los sistemas educativos para ofrecer oportunidades de aprendizaje
efectivo a lo largo de la vida.

Foco 5: En la responsabilidad social por la educacin para generar compromisos con su desarrollo y resulta-
dos.18

Estos focos, que constituyen una gua central para la denicin del marco conceptual, incluyen varios temas
especcos, por ejemplo atencin a la diversidad social y cultural en la educacin, capacitacin docente, mto-
dos pedaggicos en el aula, autonoma escolar, participacin de las familias en la gestin de las escuelas, clima
escolar, uso de computadoras y otras tecnologas.

16 Ver http://www.unesco.cl/medios/biblioteca/documentos/prelac_proyecto_regional_educacion_esp.pdf
17 Ver http://www.unesco.cl/ept/metas.act
18 Tomado de http://www.unesco.cl/ept/prelac/4.act

CAPTULO 1 DISEO DE INSTRUMENTOS 35


como el producto, en un smil de proceso produc-
I.2.2. MARCO
tivo donde ciertos insumos (o recursos) y procesos
CONCEPTUAL vericados en un determinado contexto dan cuenta
de dicho producto. El modelo, si bien ampliamente
adoptado, contiene en s mismo limitaciones propias

E
l diseo previsto considera que la variabili- de su carcter instrumental. En efecto, son numer-
dad en los niveles de logro acadmico de los osos los esfuerzos de la teora social, desarrollada en
estudiantes es el resultado de un anidamiento especial en las ltimas cuatro dcadas, por promover
de condiciones que corresponden a diferentes una mirada ms comprensiva y compleja en trminos
niveles o planos de realidad. En los modelos ms usu- de interpretacin de fenmenos sociales. Esto implica
ales la variabilidad en el logro acadmico es vista como prestar atencin a la multidimensionalidad del accionar
el resultado de condiciones que son propias del su- humano y su carcter constitutivo de las estructuras
jeto de la observacin (el estudiante como individuo) sociales en las que se desarrolla, lo cual se vincula
incluyendo variables de su hogar. Asimismo, dichos directamente a los principios y estrategias adoptados
estudiantes muestran su desempeo en un contexto por el PRELAC.
inmediato en el que no se encuentran aislados, sino
que conguran un grupo con el que comparten algunos En los ltimos aos algunos autores han planteado
atributos, empezando por la propia dinmica del aula, modelos relevantes para el anlisis de factores aso-
las relaciones entre pares y fundamentalmente el ac- ciados. Murillo (2003) presenta una serie de modelos
cionar del docente como agente crucial en la estructur- tericos de la literatura internacional y balances de la
acin de las experiencias y prcticas del aula. investigacin sobre ecacia escolar en 12 pases de
Amrica Latina y Espaa. En la misma obra, Martinic y
Por otra parte, los grupos de estudiantes y docentes Pardo (2003) resumen los factores de ecacia escolar
conforman una relacin, al nivel de aula y de escuela, de los estudios. El modelo incluye variables de contex-
que puede ser determinada por la infraestructura y los to (especcamente marco regulatorio del sistema es-
recursos pedaggicos disponibles, y caracterizada por colar y caractersticas de la escuela), de entrada (car-
las formas de administracin y nanciamiento. Es nec- actersticas del profesor y del estudiante y su familia)
esario mencionar que la relacin referida tambin est y de procesos (al nivel de cultura escolar, gestin de
inuida por el rol de liderazgo del director, como el- la escuela y aula), cuya interaccin debe explicar los
emento clave que marca la dinmica institucional tanto productos educativos (principalmente rendimiento). La
hacia el interior de la escuela como en relacin con su discrepancia principal del modelo propuesto aqu con
entorno ms prximo, es decir, respecto de los padres el anterior, y con varios otros de la literatura inter-
de familia y la comunidad local. Las instituciones edu- nacional, es que los estudiantes y sus familias no se
cativas hacen parte de un sistema educativo nacional conciben como insumos para determinados logros aca-
en el que las normas, polticas y esquemas de apoyo dmicos sino que los estudiantes son el foco principal
a la gestin escolar o de toma de decisiones, tienen de anlisis.
un impacto sobre lo que la institucin hace, se espera Con base en los distintos elementos referidos, para el
que haga y puede hacer en su accionar cotidiano. Este diseo de los cuestionarios de contexto se denieron
accionar, nalmente, deriva o no en la satisfaccin de tres ejes principales (caractersticas socioculturales,
las necesidades y potencialidades de aprendizaje de los oportunidades y logros acadmicos) y la equidad edu-
estudiantes. cativa como una caracterstica transversal.

Estos elementos son considerados con frecuencia desde


un esquema conceptual que concibe el logro acadmico

36 REPORTE TCNICO
por variables con alta relevancia en la explicacin del
CARACTERSTICAS
rendimiento, de acuerdo con los hallazgos de la lit-
SOCIOCULTURALES eratura internacional y con los resultados encontrados.
El valor de este segundo eje consiste en engarzarlo a
los otros dos: estudiantes de diversas caractersticas
El primer eje est referido a las caractersticas so- socioculturales asisten a escuelas que brindan mayores
cioculturales de los estudiantes, tanto al nivel individ- o menores niveles de oportunidades educativas, que se
ual como de grupos de estudiantes en aulas y escuelas. ajustan o no a sus necesidades y potencialidades, lo
Este eje considera variables del estudiante (sexo, edad, cual en conjunto permite explicar el rendimiento.
lengua materna y condicin de trabajador) y de sus fa-
milias (educacin de los padres, servicios disponibles y
apoyo a la educacin de los hijos). El eje no supone so-
lamente el control estadstico de variables para ajustar
LOGROS
el rendimiento, sino que es un elemento clave para ACADMICOS
entender los logros acadmicos de los estudiantes. As,
se coloca especial nfasis en identicar qu variables Finalmente el tercer eje est referido a los logros
del eje tienen mayor correlacin con rendimiento, de acadmicos y est representado principalmente por los
modo que pueda generarse un ndice de nivel sociocul- resultados que obtienen los estudiantes en las pruebas
tural. La correlacin de este ndice con los logros aca- de rendimiento. Estos datos sin embargo deben com-
dmicos (tercer eje) no es por s suciente, pues debe plementarse con otros, principalmente con el ndice de
describirse en detalle qu educacin estn recibiendo cobertura educativa logrado en cada sistema educativo
los estudiantes y si esta educacin se adapta a sus para cada uno de los grados evaluados. As, se espera
necesidades y potencialidades. presentar el rendimiento de los estudiantes que estn
en la escuela con el porcentaje de estudiantes en edad
de asistir a la escuela en los grados evaluados y que no
estn asistiendo.
OPORTUNIDADES
EDUCATIVAS El logro acadmico por s solo no es suciente sino que
es necesario presentarlo siempre en conjuncin con la
situacin particular de los dos ejes anteriores.
El segundo eje est conformado por las oportuni-
dades educativas e incluye tanto los insumos o recur-
sos educativos (tiempo de aprendizaje, presencia de
materiales educativos, existencia de biblioteca esco-
lar, recursos nancieros, infraestructura escolar y car-
actersticas del personal docente y directivo) como los
procesos mediante los cuales los insumos se vuelven
pedagoga (por ejemplo, cobertura del currculo, len-
gua de instruccin, autonoma educativa, uso de los
materiales, tareas y clima escolar). El anlisis para este
eje debe hacerse en algunos casos al nivel de aula, en
otros al nivel de escuela y nalmente algunos al nivel
de pas. Al igual que en el primer eje, se prev gen-
erar un ndice de oportunidades educativas, formado

CAPTULO 1 DISEO DE INSTRUMENTOS 37


las echas en dos sentidos indican que se exploran las
EQUIDAD
interacciones entre los ejes en cuestin. Tambin el
EDUCATIVA esquema reere el anlisis de las interacciones entre
insumos y recursos escolares (componente IIa) y pro-
cesos escolares (componente IIb), lo que supone estu-
Una caracterstica que cruza todas las anteriores diar si hay un uso intensivo de recursos en los procesos
es la equidad educativa. La investigacin al respecto pedaggicos y adems valorar si procesos pedaggicos
(al nivel internacional y de Amrica Latina) y los ms complejos son posibles solamente all donde hay
resultados del primer estudio en particular, muestran mayores recursos. Las echas en un solo sentido in-
que existe gran variabilidad de logros acadmicos entre dican que se explora el poder explicativo de uno de
pases, y al interior de los pases entre estudiantes de los ejes sobre la varianza de los resultados, sin llegar
diferentes escuelas. La discusin de equidad (o falta de desde luego a armaciones concluyentes sobre causali-
equidad) en relacin con los tres ejes anteriores supone dad, dada la naturaleza compleja del proceso educativo
una serie de anlisis especcos. En primer lugar, es y las caractersticas del estudio.
necesario estimar qu tan grande es la varianza en los
logros acadmicos al interior de las aulas, las escuelas Finalmente, es importante sealar que para comple-
y los pases (a mayor varianza mayor inequidad). En mentar el anlisis tambin se considera necesario y
segundo lugar, debe establecerse en qu medida los valioso explorar las actitudes de los estudiantes, frente
logros acadmicos se asocian con las caractersticas a las reas que son objeto de evaluacin.
socioculturales de los estudiantes, tanto de manera
individual como en grupos de aulas y escuelas (a
mayor correlacin mayor inequidad). Luego, se procede
a correlacionar las oportunidades educativas con las
caractersticas de los estudiantes: si la correlacin
entre las oportunidades y el nivel sociocultural de los
estudiantes agrupados en aulas es positivo y alto, se
tiene un indicativo de poca equidad. Estos anlisis Figura I.2.2.1. Niveles y ejes de anlisis
pueden efectuarse a la luz de las condiciones entre del marco conceptual
estudiantes que asisten a distintos tipos de escuelas.

Niveles de anlisiss

III. Logros educativoss


Estudiante
Aula
Escu
Es
scu
cuel
elaa
el

Aula
Escuela
Paass
IIb. Procesos escolares

EEn
n el esquema
el es
esqu
q em
qu emaa de marco
dell ma
marc conceptual
rcoo co
conc ptuall ((gura
ncep
ep gur
g I.2.2.1),
uraa I.
I.22.2.
2.
2 2.1)
1)),

38 REPORTE TCNICO
I.2.3. ETAPAS DEL DISEO
DE LOS CUESTIONARIOS

Para llegar al diseo nal de los cuestionarios, teniendo en cuenta los niveles y los ejes de anlisis del marco
conceptual desarrollado, se elabor una propuesta de items que luego fue consultada con los coordinadores
nacionales, para efectos de validar su pertinencia. Las observaciones de los coordinadores fueron analizadas e
incorporadas en una versin piloto estndar que de nuevo fue enviada a consideracin de los pases, junto con
un formato que debi llenarse cuando se requiri alguna adaptacin estructural o lingstica.

Las adaptaciones de estructura corresponden a situaciones especcas de cada pas. Por ejemplo, en el cuestionario
dirigido al docente se pregunta por su nivel educativo ms alto. En la versin para Colombia se prevn ocho
categoras de respuesta: 1, primaria; 2, secundaria; 3, media; 4, normalista; 5, bachiller pedaggico; 6, licenciado;
7, profesional; y 8, posgrado. Por su parte, la versin para Nicaragua contempla siete categoras de respuesta: 1,
primaria; 2, secundaria (media); 3, tcnica (no universitaria); 4, formacin docente / normalista; 5, universitaria;
6, postgrado; y 7, otro.

Una vez conformadas las versiones nacionales, atendiendo las respectivas adaptaciones, y realizada la traduccin
del castellano al portugus, se probaron estos cuestionarios durante la aplicacin piloto. Las observaciones
resultantes, las inquietudes formuladas por quienes respondieron cada cuestionario y los indicadores estadsticos
generados luego del procesamiento de los datos obtenidos, fueron objeto de estudio y anlisis, para establecer y
ajustar las preguntas que nalmente aparecieron en la versin denitiva de los cuestionarios.

Es importante sealar que tambin se incluyeron algunas preguntas ya utilizadas en el Primer Estudio Internacional
(con nes de conrmacin y de comparacin) y en otros estudios internacionales, principalmente PISA y TIMSS,
que han sido validadas en decenas de pases incluidos varios de la regin.

FACTORES
Y VARIABLES

Para el diseo de los cuestionarios se procedi a denir los factores bsicos que permiten explicar las varian-
zas entre los logros acadmicos de los estudiantes, agrupados en distintos niveles, y las variables mediante las
cuales es posible estimar un ndice que permita valorar cada factor.

CAPTULO 1 DISEO DE INSTRUMENTOS 39


Cuadro I.2.3.1. Factores asociados con cada actor del proceso educativo

Cuestionario donde
Factor Variables
se reere
Sexo, edad, lengua materna, educacin
Cuestionarios a
preescolar, edad de ingreso a la escuela,
Caractersticas de estudiantes, padres
repeticin, trabajo infantil, hbitos de lec-
los estudiantes. de familia y
tura, actitudes hacia las reas evaluadas y la
docentes.
escuela, y turno al que asisten19.

Nivel educativo del padre y de la madre, si am-


bos padres viven (en el hogar), hacinamiento
en el hogar, servicios en casa (luz, agua, de- Cuestionarios a
Caractersticas de
sage, telfono, cable e internet), ndice de estudiantes y padres
la familia.
posesin de activos, material del piso de la de familia.
vivienda, materiales educativos y nmero de
libros en el hogar.

Sexo, edad, aos de experiencia, ubicacin


del domicilio respecto de la escuela, formacin
profesional y capacitacin en servicio, estabilidad
en el trabajo, rea que ensea, forma de acceso
Caractersticas del al puesto, manejo de la lengua nativa de los
Cuestionarios a
director y/o do- estudiantes, percepcin del propio salario,
incentivos para desarrollo profesional, satisfaccin
docentes y directores.
cente.
con la escuela y deseo de ser reubicado, otros
trabajos simultneos a docencia, nmero de libros
en el hogar, distribucin del tiempo en la escuela
y manejo de computadoras.

(19)

Los factores fueron agrupados y dispuestos en los distintos cuestionarios para explorar las caractersticas inher-
entes a cada actor del proceso educativo (cuadro I.2.3.1); del contexto de las escuelas, la autonoma del docente
y de la escuela y la existencia y uso de materiales educativos (cuadro I.2.3.2); y de la naturaleza del proceso
educativo mismo, incluyendo el clima del aula y la participacin de los padres de familia en la educacin de sus
hijos (cuadro I.2.3.3).

19 La novedad principal en este grupo respecto del primer estudio fue el anlisis de lengua materna indgena y trabajo infantil.

40 REPORTE TCNICO
Cuadro I.2.3.2. Factores asociados con las escuelas

Cuestionario donde se
Factor Variables
reere

Contexto (urbano o rural) en que se encuentra,


nmero de docentes y estudiantes, nmero de
repitentes y desertores, carcter multigrado
o polidocente completo, grados que ofrece la
Ficha de
escuela, bilinge (en lengua indgena o ex-
empadronamiento y
Caractersticas tranjera), servicios disponibles (luz, agua, de-
cuestionarios a
de la escuela. sage y telfono) y condicin
estudiantes y
de la infraestructura, recursos pedaggicos
directores.
de la escuela (computadoras, laboratorios y
otros), servicio mdico o nutricional, lengua
de la comunidad, biblioteca escolar y proble-
mas en la escuela.

Gestin pblica, privada o mixta, fuentes de


nanciamiento, nivel de autonoma para de-
cisiones nancieras, curriculares, de contrat-
acin de personal, desarrollo profesional y
Autonoma de Cuestionarios a
polticas sobre los estudiantes, comunicacin
la escuela y d docentes, padres de
entre el centro e instancia educativa superior
el docente. familia y directores.
(teniendo en cuenta visitas de supervisores)
y presencia de consejo escolar que incluya al
director, docentes, padres de familia y estu-
diantes.

Materiales educativos disponibles para cada


Existencia y uso Cuestionarios a
estudiante, frecuencia con la que utiliza los
de materiales estudiantes, docentes
textos y recursos de la biblioteca escolar y
educativos. y directores.
del aula.

CAPTULO 1 DISEO DE INSTRUMENTOS 41


Cuadro I.2.3.3. Factores asociados con el proceso educativo

Cuestionario donde se
Factor Variables
reere
Nmero de semanas y das previstos en el ao
escolar y en los que ha habido clases, duracin
Tiempo de Cuestionario
del da escolar, duracin de cada perodo esco-
aprendizaje. a directores.
lar y nmero de horas por rea evaluada a la
semana.
Lengua(s) en que ocurre parte o todo el apren-
dizaje, cobertura curricular, demanda cogno-
Oportunidades de Cuestionario
scitiva, tipo de textos y ejercicios que los estu- 20
aprendizaje. a docentes .
diantes suelen resolver, formas de evaluacin y
tareas para la casa.
Asignacin de estudiantes a grupos homog-
neos o heterogneos y redes o programas de Cuestionarios a estu-
Polticas respecto
apoyo a estudiantes con necesidades espe- diantes, docentes y
de estudiantes.
ciales (sobre todo repetidores o potenciales directores.
desertores).
Conictos y disciplina en el aula, relaciones
entre estudiantes, entre docentes, entre do-
centes y estudiantes, entre docentes y padres
Cuestionarios a estu-
21 de familia, episodios de violencia, comuni-
Clima escolar . diantes, docentes y
cacin entre el personal de la escuela, trabajo
directores.
en equipo de docentes, colaboracin entre
docentes y direccin y motivacin de los do-
centes.

Participacin en reuniones escolares, de aula o


Participacin
en consejo escolar, conocimiento de los profe-
de los padres Cuestionarios a padres
sores, dedicacin al hijo en trminos de lectura
de familia en la de familia, docentes y
y ayuda con las tareas, sentido de pertenencia
educacin de sus directores.
con la escuela, evaluacin del director y de la
hijos.
educacin que reciben los estudiantes.

(20 21)

20 Se denen cinco cuestionarios especcos de oportunidades de aprendizaje, a razn de uno para cada rea y grado evaluado.
21 Se pretende ampliar y profundizar las dimensiones identicadas como signicativas en el primer estudio, referidas el clima del aula.

42 REPORTE TCNICO
CUESTIONARIOS

Denidos los factores y las variables asociadas con cada factor, se procedi a ensamblar once cuestionarios
encaminados a recabar la informacin necesaria para caracterizar el contexto donde tiene lugar el proceso
educativo de los estudiantes. Diez cuestionarios fueron dirigidos a estudiantes, padres de familia, docentes y
directores de escuela, mientras que un cuestionario oper como cha de empadronamiento para reconocer la
localizacin de la escuela, el origen de los recursos econmicos de funcionamiento y la disponibilidad de recursos
educativos (cuadro I.2.3.4).
Para el caso de los docentes, se opt por ensamblar dos cuestionarios. Un primer cuestionario general (QP),
con nfasis en las caractersticas socioculturales, dedicacin a la escuela y distribucin de su tiempo en cada
actividad, satisfaccin con distintos aspectos, percepcin de dicultades y temas donde se considera importante
recibir apoyo tcnico. El segundo cuestionario tuvo el propsito especco de indagar por las caractersticas de
la enseanza en cada rea y en cada grado.

Cuadro I.2.3.4. Estructura de Cuestionarios

Nmero de
Nombre Poblacin que lo responde
preguntas
QA3 Estudiantes de tercer grado. 20
QA6 Estudiantes de sexto grado. 40
QL3 Docentes (sobre enseanza del lenguaje en tercer grado). 13
QL6 Docentes (sobre enseanza del lenguaje en sexto grado). 13

QM3 Docentes (sobre enseanza de la matemtica en tercer grado). 12

QM6 Docentes (sobre enseanza de la matemtica en sexto grado). 12

QC6 Docentes (sobre enseanza de las ciencias en sexto grado). 13


22
QF Padres de familia o persona responsable del estudiante. 20
QP Docentes de tercero y sexto grados. 25
QD Director de escuela. 31
FE Director de escuela. 16
(22)

22 Se advierte que el cuestionario dirigido a los padres de familia (QF) no fue aplicado en Mxico por decisin autnoma del pas.

CAPTULO 1 DISEO DE INSTRUMENTOS 43


2
CAPTULO

DISEO
DE
LA MUESTRA
En este captulo se explica el diseo muestral del Segundo Estudio Regional Comparativo y Explicativo (SERCE)
que lleva adelante el Laboratorio Latinoamericano de Evaluacin de la Calidad de la Educacin de UNESCO/
OREALC. En este captulo se abordan los siguientes temas:

1) Universos que son objeto del estudio.

2) Subuniversos del estudio.

3) Unidades de muestreo y marco muestral.

4) Mtodo de muestreo.

5) Muestra efectiva por pases.

6) Procedimientos para la seleccin de escuelas.

7) Estratos adicionales optativos para cada pas y tratamiento de las muestras para entidades
subnacionales.

8) Elaboracin del marco muestral en cada pas

9) Mrgenes de error estimados para el diseo muestral.

10) Sistema de ponderaciones para la estimacin de resultados a nivel nacional y de subuniversos.

CAPTULO 2 DISEO DE LA MUESTRA 45


II.1. UNIVERSOS QUE SON
OBJETO DE ESTUDIO

E
l SERCE estudia, en primer trmino, estudiar los logros educativos en Lenguaje, Matemtica y Ciencias
de los alumnos matriculados en tercero o sexto grados del nivel primario al nal del ao lectivo 2005-
2006 (escuelas con calendario norte) o ao lectivo 2006 (escuelas con calendario sur), en instituciones
educativas ocialmente reconocidas que otorgan una certicacin que habilita al nio a acceder al grado
o nivel educativo siguiente. No se considera parte del universo a los alumnos matriculados en instituciones de
educacin de adultos, en instituciones de educacin especial o en programas de educacin alternativa no formal
o no presencial. En el caso de 3 no se incluir a las escuelas dirigidas a nios cuya lengua materna es indgena,
dado que se considera que an no tienen suciente dominio del lenguaje como para realizar una prueba escrita.
En cambio, se considera que al nal de la educacin primaria (6), todos los nios deberan haber alcanzado un
nivel de dominio del lenguaje estndar que les permita realizar las pruebas. Tampoco forman parte del universo
de estudio los alumnos con necesidades educativas especiales que estn integrados en escuelas comunes.

En segundo trmino, el SERCE estudia los factores que tienen inuencia y/o explican los logros educativos de los
alumnos. Con este propsito son tambin universos objeto de estudio los siguientes:

s LOSHOGARESDELOSALUMNOSDEYGRADOS

s LOSPADRESOTUTORESDELOSALUMNOSDEYGRADOS

s LASSECCIONESOAULASALASQUEPERTENECENLOSALUMNOSDEYGRADOS

s LOSMAESTROSQUEENSEAN,ENGUAJEY-ATEMTICAALOSALUMNOSDEYGRADOS

s LASESCUELASALASQUEASISTENLOSALUMNOSDEYGRADOS

s LOSDIRECTORESDELASESCUELASALASQUEASISTENLOSALUMNOSDEYGRADOS

Los universos indicados en el apartado a) son estudiados a travs de la aplicacin de pruebas estandarizadas de
Lenguaje, Matemtica y Ciencias, as como de Cuestionarios autoadministrados. Los universos indicados en el
23
apartado b) son estudiados a travs de la aplicacin de cuestionarios autoadministrados .

23 Dado que las escuelas sern seleccionadas por muestreo probabilstico, automticamente estn siendo seleccionados por el mismo procedimiento
alumnos, maestros, padres y hogares, de 3 y 6. De modo que las inferencias sern vlidas para los diversos universos, si bien las estimaciones de error
debern realizarse especcamente para cada universo.

46 REPORTE TCNICO
II.2. SUBUNIVERSOS
DEL ESTUDIO

El estudio obtiene informacin a nivel regional, de cada pas y con desagregaciones dentro del pas al nivel de
los siguientes subuniversos o dominios de escuelas y estudiantes: urbano pblico, urbano privado y rural. Salvo
con la excepcin de Cuba, donde no existen escuelas privadas.

En relacin a las escuelas rurales, dado que alrededor de la mitad de los pases carecen de informacin suciente
como para aplicar la denicin estndar que se intent utilizar en el Piloto (escuelas ubicadas en localidades con
hasta 2500 habitantes), se decidi emplear la denicin de escuela rural vigente en cada pas. Obviamente esto
conlleva limitaciones de comparabilidad, por lo que las comparaciones de escuelas rurales entre pases deben
tomarse con cautela. Esto signica que en los informes regionales se caracteriza a las escuelas rurales de cada
pas.

El dominio urbano pblico ha sido en todos los pases lo sucientemente grande como para permitir una estrati-
cacin sociocultural a posteriori, a partir de los datos recogidos en los cuestionarios de factores asociados.
La estraticacin sociocultural no pudo realizarse en el diseo muestral, por falta de informacin sobre este
aspecto. Sin embargo, en trminos del anlisis, se considera que es particularmente relevante distinguir entre
distintos tipos de escuelas pblicas urbanas, principalmente en trminos de la composicin social de su alum-
24
nado . Para ello se han utilizado ndices y variables que permiten clasicar a estudiantes y escuelas por distintas
caractersticas socioeconmicas.

El subuniverso urbano privado ha sido en todos los pases lo sucientemente grande como para permitir estima-
ciones con niveles de precisin aceptables, que permiten hacer inferencias respecto de los resultados de apren-
dizaje de los estudiantes de estas escuelas en cada pas.

24 Este aspecto fue discutido por el Pleno de Coordinadores Nacionales en la reunin de Brasilia en junio de 2005.

CAPTULO 2 DISEO DE LA MUESTRA 47


II.3. UNIDADES DE MUESTREO

Y MARCO MUESTRAL

Dado el tamao del universo de alumnos de 3 y 6 en la regin, alrededor de 20 millones de estudiantes,


la recoleccin de datos se realiz a travs de muestras nacionales. Para garantizar precisin y conabilidad, el
muestreo tiene carcter probabilstico, a partir de marcos maestrales constituidos por las escuelas de cada pas
que forman parte del universo denido.
25
La unidad de muestreo es la escuela, es decir, un establecimiento escolar que tiene un responsable, su director,
y que puede funcionar en un nico turno, en dos turnos o en jornada completa. El marco muestral de cada pas
estuvo constituido por el listado de la totalidad de las escuelas que forman parte del universo denido.

II.3.1.EXCLUSIONES
VLIDAS

De acuerdo a la denicin de universo dada, no forman parte del mismo las escuelas Especiales (dirigidas
exclusivamente a alumnos con necesidades especiales), de educacin de Adultos y de educacin alternativa no
formal o no presencial.

Se excluyen del universo:

- Las escuelas con menos de 6 alumnos matriculados en 3 y menos de 6 alumnos matriculados en 6 (por una
razn de relacin costo / benecio en la aplicacin).

- Las secciones con menos de 6 alumnos matriculados en el grado (relacin costo / benecio).

- Los alumnos de 3 en escuelas bilinges con lengua indgena (se entiende que no estarn en condiciones de
responder una prueba escrita en castellano o portugus).

Se excluyen de la muestra:

- Las secciones con 6 o ms alumnos matriculados y menos de 4 alumnos esperados en la fecha de las pruebas
(relacin costo / benecio).

25 La expresin establecimiento escolar denota un local fsico donde se desarrollan actividades de enseanza primaria a cargo de un responsable que
es el director del establecimiento. En un mismo local fsico puede funcionar ms de un establecimiento escolar.

48 REPORTE TCNICO
- Los alumnos cuya lengua materna no es el castellano o portugus y que no han recibido al menos dos aos
de enseanza en el lenguaje de la prueba (se entiende que no estarn en condiciones de responder una prueba
escrita).

- Los alumnos con necesidades especiales, cuya situacin les impide desempearse en una prueba escrita (por
ejemplo, un nio ciego) (vase al respecto el Manual del Coordinador Nacional, Aplicacin Piloto, Anexo V, Estu-
diantes con Necesidades Educativas Especiales).

Se excluyen del anlisis:

- En los casos de escuelas en que realizaron la prueba menos del 50% de los alumnos de 3 alumnos que asisten
efectivamente a clases, tanto la escuela como los alumnos fueron excluidos de todos los anlisis y estimaciones
relativas a 3, incluso las nacionales (riesgo de seleccin intencional).

- En los casos de escuelas en que realizaron la prueba menos del 50% de los alumnos de 6 alumnos que asisten
efectivamente a clases, tanto la escuela como los alumnos fueron excluidos de todos los anlisis y estimaciones
relativas a 6, incluso las nacionales (riesgo de seleccin intencional).

Observaciones:

Slo se excluyen del universo las escuelas pequeas en trminos del nmero de alumnos de 3 y de 6. No se
excluyen del universo las escuelas que tienen al menos 6 alumnos en 3 al menos 6 alumnos en 6.

Seleccionada una escuela en la muestra, se procedi a solicitar informacin a la Coordinacin Nacional del
pas sobre el nmero efectivo de alumnos que concurran a clases. Si este nmero era inferior a 4 en 3 y en
6, entonces se procedi a sustituir esta escuela de la muestra por su reemplazo, y sortendose un nuevo
reemplazo.

Las exclusiones en la etapa del anlisis implicaron una reduccin del tamao efectivo de la muestra, lo que debe
ser tenido en cuenta al ponderar o expandir los resultados.

CAPTULO 2 DISEO DE LA MUESTRA 49


II.4. MTODO
DE MUESTREO

El mtodo de muestreo utilizado para el SERCE tiene las siguientes caractersticas:

- aleatorio

- estraticado

- de conglomerados

- en una sola etapa de seleccin.

La muestra se seleccion en cada pas mediante muestreo aleatorio (probabilstico) estraticado de conglomerados.
Los criterios para la estraticacin a priori se comentan en la seccin siguiente. Los conglomerados son las
escuelas del universo. En cada estrato se seleccion una muestra de escuelas, en una sola etapa de seleccin con
probabilidades iguales para todas las escuelas del estrato. La muestra de alumnos en cada estrato se conform
con todos los alumnos (salvo por las exclusiones vlidas) de las escuelas seleccionadas en cada estrato. Este
procedimiento garantiza probabilidades iguales de seleccin para todos los alumnos de un estrato. Sin embargo,
las probabilidades de seleccin de escuelas y alumnos no son iguales si las escuelas (o los alumnos) pertenecen
a estratos diferentes, lo que conduce a muestras no autoponderadas de alumnos.

Observaciones

- La probabilidad de un alumno de pertenecer a la muestra es igual a la probabilidad de que su escuela sea


seleccionada, porque todos los alumnos de su grado pertenecen a la muestra (excepto por las exclusiones
vlidas de la seccin 6).

- La probabilidad de que una escuela pertenezca a la muestra es igual al cociente nh / Nh, donde nh es el
tamao de la muestra de escuelas en el estrato h y Nh es el tamao del universo de escuelas en el mismo
estrato. Por ejemplo, si en un estrato (ver seccin 8) hay 150 escuelas y el tamao de muestra en dicho
estrato es 12, entonces la probabilidad de seleccin de escuelas y alumnos en dicho estrato es 0,08 (12
/ 150). Si en otro estrato para el mismo pas hay 6 escuelas y el tamao de la muestra es 3, entonces la
probabilidad de seleccin de escuelas y alumnos en dicho estrato es 0,50.

50 REPORTE TCNICO
26

II.4.1. CRITERIOS DE ESTRATIFICACIN


PARA LA OPTIMIZACIN DEL MUESTREO

Se utilizaron tres criterios para la estraticacin a priori de las escuelas con el propsito de
optimizar el muestreo y no para presentar resultados. Los resultados pueden presentarse de acuerdo a
los subuniversos mencionados anteriormente. Los criterios son:

o Tipo de gestin y rea geogrca

o Tamao

o Relacin entre la matrcula de 6 y la matrcula de 3

El tipo de gestin, como variable de estraticacin, permite proporcionar informacin desagregada por
subuniversos de estudio: las escuelas de gestin pblica y las de gestin privada.

El tamao de la escuela se conoce que incide en los logros acadmicos de los alumnos, y la relacin
matrcula de 6 / matrcula de 3 permite discriminar las escuelas con diferentes tasas de retencin,
lo que tambin puede estar asociado al rendimiento escolar. Se reconoce que esta posible asociacin
puede verse distorsionada por aquellas escuelas nuevas (que pueden tener una escasa o nula matrcula
de 6) y tambin por los casos de pases donde el 3 y el 6 grados se dictan en diferentes escuelas.

El criterio tipo de gestin y rea geogrca determina tres categoras de escuelas, coincidentes con
27
los subuniversos de estudio: URBANO PBLICO, URBANO PRIVADO y RURAL .

El criterio tamao de la escuela determina tres categoras de escuelas, para lo cual se recomienda
utilizar las mismas deniciones para todos los pases:

28
- PEQUEA: escuela con una sola seccin en el grado

- MEDIANA: escuela con dos o tres secciones en el grado

- GRANDE: escuela con cuatro o ms secciones en el grado.

26 En este documento el trmino estrato se emplea a los efectos del muestreo. No se trata de estratos para el reporte de resultados. Para la denomi-
nacin de los subconjuntos de escuelas sobre los cuales se espera reportar resultados se emplea el trmino subuniverso.
27 Se considera que la escuela es rural segn la denicin propia de cada pas.
28 Si la escuela tiene alumnos de 3 y 6, el tamao estar dado por la cantidad de secciones en 3. Si la escuela slo tiene alumnos de 6, entonces
el tamao estar dado por la cantidad de secciones de este grado.

CAPTULO 2 DISEO DE LA MUESTRA 51


La relacin entre la matrcula de 6 y la de 3 (R6/3) determina cuatro categoras de escuelas, con resultados
bastante diferentes por pases. Las cuatro categoras son:

- R6/3 0,8

- 0 R6/3 < 0,8

- Matrcula de 3 = 0

El valor 0,8 es paramtrico. De hecho se han realizado pruebas con el valor 0,75 (ver ANEXO 2) y se encontr
que en la mayora de los pases este valor de la variable determina tamaos desiguales para los estratos. Dicha
desigualdad se reduce en parte aumentando el lmite de 0,75 a 0,8.

En el caso de las escuelas ubicadas en zonas rurales el escaso nmero de escuelas grandes justica que se
colapsen los tamaos GRANDE y MEDIANA en una sola categora.

Con las deniciones precedentes, las escuelas del universo en cada pas se clasican en 32 estratos, como
mximo. Esto se puede observar en la tabla 1. En algunos pases esta desagregacin origin estratos sin escuelas
o con un nmero muy reducido de escuelas, por lo que se colapsaron estos casos en un nmero ms reducido
de estratos nales. Por ejemplo, en aquellos pases donde las escuelas con matrcula nula en 3 representan
menos del 5% de las escuelas, a los efectos de la seleccin de la muestra, todas las escuelas urbanas pblicas
con matrcula nula en 3 podran conformar un nico estrato a priori, y lo mismo podra hacerse con las urbanas
privadas y las rurales con matrcula nula en 3.

A los efectos de obtener estimaciones desagregadas de los subuniversos de estudio que determinan el tipo de
gestin y el rea geogrca, no se permiti colapsar estratos a priori que pertenecen a diferentes subuniversos
de estudio.

52 REPORTE TCNICO
Tabla 1. Estratos a priori para la seleccin de la muestra

TIPO DE GESTIN, REA GEOGRFICA Y TAMAO

RELACIN URBANO PBLICO URBANO PRIVADO RURAL


M6 / M3
S.I. PEQ. MED. GRA. S.I. PEQ. MED. GRA. S.I. PEQ. M/G

R 0,8 1 2 3 4 5 6 7 8 9 10 11

0 R < 0,8 12 13 14 15 16 17 18 19 20 21 22

M3 = 0 23 24 25 26 27 28 29 30 31 32 33

La Tabla 1 indica los estratos en que se dividi la muestra en primera instancia, aunque despus se llevaron a
cabo algunos colapsos de estratos. La muestra de 3 se seleccion en los estratos 1 a 22 y la muestra de 6 en
los estratos 1 a 33, excepto por aquellos casos ya mencionados en las exclusiones vlidas.

Si en un pas, la cantidad de escuelas en el marco sin informacin de matrcula resulta signicativa, entonces
se agregaron estratos que indicaban sin informacin (S.I.) y la muestra en este estrato ser proporcional a su
importancia en el total de escuelas en el pas.

A partir del diseo anterior, se realizaron algunos colapsos de estratos, quedando la estraticacin por pas
de la forma en que se describe en las siguientes tablas:

CAPTULO 2 DISEO DE LA MUESTRA 53


Tabla 2. Escuelas de la muestra para SERCE Argentina
Publico Urbano Privado Urbano Rural Total
Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 9 31 13 9 12 2 29 3
M6/M3>=0 & M6/M3 <0.80 3 8 4 4 4 1 25 3
M3=0 2 1 1 1 1 3
Total 169

Tabla 3. Escuelas de la muestra para SERCE Brasil


Publico Urbano Privado Urbano Rural Total
Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 7 11 3 6 3 3 1 10 3
M6/M3>=0 & M6/M3 <0.80 3 8 17 8 3 9 3 39 13 3
M3=0 3 6 7 2 1 3
Total 175

Tabla 4. Escuelas de la muestra para SERCE Chile

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 22 30 3 23 17 2 43 3
M6/M3>=0 & M6/M3 <0.80 1 1 1 6 4 1 14
M3=0 3 3 3
Total 180

Tabla 5. Escuelas de la muestra para SERCE Colombia

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 5 4 1 8 2 1 13 3
M6/M3>=0 & M6/M3 <0.80 22 16 5 20 3 71 3
M3=0 3 5 8 3 2 1 3 2 1
Total 205

54 REPORTE TCNICO
Tabla 6. Escuelas de la muestra para SERCE Costa Rica
Publico Urbano Privado Urbano Rural Total
Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 17 12 13 6 3 36 9
M6/M3>=0 & M6/M3 <0.80 10 7 3 4 3 37 5 1
M3=0 2 1 2
Total 171

Tabla 7. Escuelas de la muestra para SERCE Cuba

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 16 42 13 60 5
M6/M3>=0 & M6/M3 <0.80 5 14 5 36 4
M3=0 2 1 2 1
Total 206

Tabla 8. Escuelas de la muestra para SERCE Republica Dominicana

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 1 11 10 2 11 3 3 6 3
M6/M3>=0 & M6/M3 <0.80 2 12 12 2 3 9 3 23 28 8
M3=0 4 3 1 2 1 4 13 4
Total 184

Tabla 9. Escuelas de la muestra para SERCE Ecuador

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 20 18 6 12 3 2 41 3 1
M6/M3>=0 & M6/M3 <0.80 9 6 3 12 3 1 42 4
M3=0 2 3 3
Total 194

CAPTULO 2 DISEO DE LA MUESTRA 55


Tabla 10. Escuelas de la muestra para SERCE El Salvador

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 9 20 6 5 3 27 3 1
M6/M3>=0 & M6/M3 <0.80 8 12 4 8 2 1 55 8 1
M3=0 3 3 3
Total 182

Tabla 11. Escuelas de la muestra para SERCE Guatemala

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 10 16 1 10 3 28 3
M6/M3>=0 & M6/M3 <0.80 12 18 2 11 3 92 12 1
M3=0 2 1 2 1 3
Total 231

Tabla 12. Escuelas de la muestra para SERCE Mxico

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 19 28 3 5 3 3 45 5
M6/M3>=0 & M6/M3 <0.80 7 9 4 3 29 4
M3=0 2 1 3 3
Total 176

Tabla 13. Escuelas de la muestra para SERCE Mxico-Nuevo Len

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 23 30 3 4 3 1 30 5
M6/M3>=0 & M6/M3 <0.80 10 14 4 3 2 23 5
M3=0 3 1 1
Total 165

56 REPORTE TCNICO
Tabla 14. Escuelas de la muestra para SERCE Nicaragua

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 11 21 6 9 3 3 25 3
M6/M3>=0 & M6/M3 <0.80 12 12 3 8 3 72 3 1
M3=0 3 1 1 2 3 1 2
Total 208

Tabla 15. Escuelas de la muestra para SERCE Panam

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 3 5 14 1 7 3 3 2 36 4
M6/M3>=0 & M6/M3 <0.80 3 4 9 8 3 1 42 5 1
M3=0 1 . 4
Total 159

Tabla 16. Escuelas de la muestra para SERCE Paraguay

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 7 19 9 8 3 3 56 8
M6/M3>=0 & M6/M3 <0.80 8 11 3 8 3 54 9
M3=0 1 2 3
Total 215

Tabla 17. Escuelas de la muestra para SERCE Per

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 16 20 9 12 2 1 26 1
M6/M3>=0 & M6/M3 <0.80 7 6 1 1 12 3 1 39 2
M3=0 3 3 3
Total 168

CAPTULO 2 DISEO DE LA MUESTRA 57


Tabla 18. Escuelas de la muestra para SERCE Uruguay

Publico Urbano Privado Urbano Rural Total


Mi P M G Mi P M G Mi P M G
M6/M3>=0.80 34 33 7 13 3 3 35
M6/M3>=0 & M6/M3 <0.80 21 34 7 3 25
M3=0 1

Total 219

II.4.2. CANTIDAD MNIMA DE ESCUELAS


POR ESTRATO EXPLCITO Y POR PAS

El diseo muestral recomend que el nmero de escuelas por pas fuera al menos 150, con un mnimo de 3
por estrato a priori. De esta manera, y con los ajustes que se indican en la seccin siguiente, se esperaba obtener
en cada pas una muestra real no inferior a 4.000 alumnos en 3 y 3.500 en 6. Dado que el 3 y el 6 grado se
ofrecen en instituciones educativas diferentes en Brasil y Colombia, las muestras de 6 grado se reducen consid-
erablemente en estos pases. Sin embargo, como se observa abajo, se trata de escuelas densamente pobladas, lo
que ayuda a completar la cuota esperada de alumnos en la muestra.

58 REPORTE TCNICO
II.5. MUESTRA EFECTIVA
POR PASES

Despus de aplicar el diseo muestral y los distintos criterios de exclusin de se lleg a la muestra efectiva para
cada pas. Las siguientes tablas presentan las muestras efectivas para cada pas por rea y grado.

Tabla 19
Tamao efectivo de las muestras para Lenguaje 3

Pas Escuelas Alumnos


Argentina 146 5781
Brasil 136 5388
Colombia 181 5634
Costa Rica 145 5025
Cuba 186 5291
Chile 150 5791
Ecuador 172 4993
El Salvador 175 7302
Nuevo Len 157 5574
Guatemala 212 6677
Mxico 148 4579
Nicaragua 178 6211
Panam 145 6163
Paraguay 193 5066
Per 154 4640
R. Dominicana 139 3947
Uruguay 207 6558

CAPTULO 2 DISEO DE LA MUESTRA 59


Tabla 20
Tamao efectivo de las muestras para Matemtica 3

Pas Escuelas Alumnos


Argentina 151 6272
Brasil 136 5534
Colombia 183 5784
Costa Rica 144 4714
Cuba 186 5291
Chile 151 5880
Ecuador 178 5212
El Salvador 175 7399
Nuevo Len 157 5411
Guatemala 213 6881
Mxico 149 4621
Nicaragua 175 6384
Panam 145 6196
Paraguay 194 5110
Per 154 4763
R. Dominicana 145 4374
Uruguay 207 6837

Tabla 21
Tamao efectivo de las muestras para Lenguaje 6

Pas Escuelas Alumnos


Argentina 150 6069
Brasil 75 5001
Colombia 88 5851
Costa Rica 146 4539
Cuba 187 5883
Chile 157 6616
Ecuador 167 5096
El Salvador 167 6237
Nuevo Len 157 4998
Guatemala 193 5157
Mxico 150 4723
Nicaragua 153 6128
Panam 133 5003
Paraguay 187 4307
Per 134 4504
R. Dominicana 107 4370
Uruguay 202 5989

60 REPORTE TCNICO
Tabla 22
Tamao efectivo de las muestras para Matemtica 6

Pas Escuelas Alumnos


Argentina 149 6151
Brasil 77 5201
Colombia 87 5870
Costa Rica 122 4008
Cuba 187 5879
Chile 156 6648
Ecuador 172 5210
El Salvador 167 6270
Nuevo Len 154 4695
Guatemala 193 5249
Mxico 150 4711
Nicaragua 155 6468
Panam 139 5364
Paraguay 189 4362
Per 134 4585
R. Dominicana 108 4502
Uruguay 203 6160

Tabla 23
Tamao efectivo de las muestras para Ciencias 6

Pas Escuelas Alumnos


Argentina 155 6039
Colombia 88 5911
Cuba 193 5897
El Salvador 174 6281
Nuevo Len 159 4711
Panam 153 5444
Paraguay 190 4466
Per 140 4604
R. Dominicana 108 4473
Uruguay 211 6153

CAPTULO 2 DISEO DE LA MUESTRA 61


II.6. PROCEDIMIENTOS PARA LA SELECCIN DE ESCUELAS Y ALUMNOS.
SISTEMA DE REEMPLAZOS

Para la seleccin de las escuelas en cada pas se procede de la siguiente manera:

a) En primer lugar las escuelas se clasican por estrato a priori.

b) Se analiza la conveniencia de colapsar algunos de los estratos.

c) Se determina el tamao de la muestra en cada estrato.

d) Se seleccionan las escuelas de cada estrato mediante muestreo aleatorio simple sin reposicin
(probabilidades de seleccin iguales para todas las escuelas de un mismo estrato).

e) Se seleccionan suplentes respectivas para cada unidad de la muestra, tambin por muestreo aleatorio
simple sin reposicin. Cada escuela titular de la muestra tendr una escuela suplente. La escuela suplente
se elige en el mismo estrato de la titular, y en caso de disponerse de la informacin en el marco, en la
misma jurisdiccin de la titular.

Seleccionada una escuela en la muestra en los estratos 1 a 24, entonces todos los alumnos de 3 y de 6
pertenecen a la muestra de alumnos, salvo por lo mencionado en las exclusiones vlidas.

Seleccionada una escuela en la muestra en los estratos 25 a 32, entonces todos los alumnos de 6 pertenecen a
la muestra de alumnos, salvo por lo mencionado en las exclusiones vlidas.

El proceso de seleccin de escuelas se realiz por la CT-LLECE. Cada pas recibi el listado de escuelas titulares
con sus respectivas suplentes y con su cdigo LLECE asignado.

Los reemplazos de escuelas se realizaron mediante el sistema de suplentes respectivas. Los reemplazos, en todos
los casos, fueron autorizados por el Coordinador Nacional. ste elabor un informe de los reemplazos autorizados,
con la causal que los motiv y con las acciones que realiz para evitar el reemplazo.

62 REPORTE TCNICO
II.7. ESTRATOS ADICIONALES OPTATIVOS PARA CADA PAS
Y TRATAMIENTO DE LAS MUESTRAS PARA ENTIDADES SUBNACIONALES
(NUEVO LEN)

El diseo muestral seguido tiene, como una de sus caractersticas, la exibilidad. Ello implica que
se pueden denir criterios adicionales de estraticacin, se pueden variar los tamaos de muestra por
estrato (a condicin de respetar los mnimos establecidos para el operativo nacional) y que la infor-
macin que se recoja a nivel de las entidades subnacionales puede agregarse junto con la informacin
del nivel nacional, adecuadamente ponderada. Se proporcionar a los pases un formulario para indicar
sus opciones nacionales adicionales en materia de muestra.

Para las muestras de Nuevo Len se siguieron los mismos criterios que para la determinacin de las
muestras de los pases (estraticacin a priori, muestreo en conglomerados en una sola etapa de selec-
cin, probabilidades iguales para todas las escuelas de un mismo estrato mediante muestreo aleatorio
simple sin reposicin) de manera de garantizar precisin y conabilidad de los resultados a nivel re-
gional.

En el caso de Uruguay, se sobremuestrearon establecimientos en las reas urbanas considerando a las


escuelas de tiempo completo, de contexto sociocultural crtico y aquellas que no tenan ningn pro-
grama. La tabla 24 da cuenta de la distribucin de escuelas por estrato de acuerdo a la clasicacin
recin indicada.

Tabla 24. Escuelas de la muestra para SERCE Uruguay


Privado
Publico Urbano Rural Total
Urbano
Mi P M G Mi P M G M P M G
TC CSC NP TC CSC NP TC CSC NP

M6/M3>=0.80 22 3 9 8 5 20 1 3 13 3 3 35
M6/M3>=0 & M6/
12 3 6 7 17 10 3 7 3 25
M3 <0.80
M3=0 1
Total 219

CAPTULO 2 DISEO DE LA MUESTRA 63


II.8. ELABORACIN DEL MARCO MUESTRAL
EN CADA PAS

Cada pas elabor un marco muestral, que consisti en una matriz de datos que en cada la presenta una
escuela y la informacin de identicacin de cada centro escolar, y en cada columna una variable asociada a cada
escuela. Las variables asociadas son:

a) Nombre de la escuela

b) Cdigo de identicacin nacional de la escuela (si existe)

c) Mes de inicio de los cursos en la escuela

d) Mes de nalizacin de los cursos en la escuela

e) Ubicacin 1 - Direccin

f) Ubicacin 2 - Localidad

g) Cdigo de Ubicacin 2

h) Ubicacin 3 - Departamento, provincia o estado

i) Cdigo de Ubicacin 3

j) Cantidad de alumnos en 1 en la escuela

k) Cantidad de alumnos en 2 en la escuela

l) Cantidad de alumnos en 3 en la escuela

m) Cantidad de alumnos en 4 en la escuela

n) Cantidad de alumnos en 5 en la escuela

o) Cantidad de alumnos en 6 en la escuela

p) Cantidad de alumnos en 7 en la escuela

q) Cantidad de alumnos en 8 en la escuela

r) Cantidad de alumnos en 9 en la escuela

s) Cantidad de secciones de 3 (el dato ms actualizado)

64 REPORTE TCNICO
t) Cantidad de secciones de 6 (el dato ms actualizado)

u) Turnos en que funciona la escuela (matutino tarde doble turno - jornada completa)

v) rea (urbana o rural) (empleando la denicin de ruralidad propia del pas)

w) Gestin (pblica o privada) (las escuelas de gestin privada que reciben subvencin estatal deben
ser consideradas privadas, salvo que el pas desee establecer un subuniverso explcito que permita
diferenciar ambos tipos de escuelas)

x) Lengua en que se ensea en 3

y) Ao al que corresponden los datos de la base.

Uruguay solicit que las escuelas de Condicin Social Crtica fueran un subuniverso de su muestra, por lo cual
identic a tales escuelas en el marco muestral.

II.8.1. CRITERIOS Y PROCEDIMIENTOS PARA EL CONTROL


DE LOS MARCOS MUESTRALES POR PARTE DE LA COORDINACIN TCNICA

Las propiedades deseables de los marcos muestrales aplicables a este caso son:

- Cobertura: todas las escuelas del universo investigado se encuentran en el marco (completitud) y cada
unidad del universo a investigar gura una sola vez en el marco29.

- La identicacin y la ubicacin que guran en el marco son sucientes para direccionar al personal de campo
en caso que la escuela sea sorteada en la muestra.

- Actualizacin: las variables de estraticacin en el marco corresponden al dato ms actual posible.

- Calidad: las variables del marco no contienen errores (no contienen errores de importancia).

A los efectos de lograr estimaciones precisas, conables y no sesgadas de los parmetros a investigar, la
Coordinacin Tcnica control que los marcos muestrales cumplan satisfactoriamente con las propiedades
deseables arriba enumeradas.

29 Se recomiend tener un cuidado especial con los locales que albergan dos escuelas, una en el turno de la maana y otra en el turno vespertino.

CAPTULO 2 DISEO DE LA MUESTRA 65


En particular, para controlar la completitud se utiliz la variable Cantidad de alumnos en la escuela, porque la
suma de dicha variable a travs de todas las escuelas del marco debe coincidir razonablemente con la matrcula
de la educacin primaria del pas.

Para controlar la calidad y actualizacin del marco, una vez seleccionada la muestra, se solicit a la Coordinacin
Nacional que contacte a las escuelas y actualice la informacin sobre cantidades de secciones y alumnos de 3
y 6. Esta informacin actualizada permiti ajustar la asignacin de cuadernillos a los alumnos y se emple a
posteriori por la Coordinacin Tcnica para realizar un anlisis de la calidad de la informacin empleada para
sortear la muestra.

II.8.2. REQUISITOS MNIMOS DE COBERTURA


QUE DEBEN SER ALCANZADOS POR CADA PAS
PARA QUE LOS DATOS SEAN CONSIDERADOS CONFIABLES

Dado que slo se admitir una escuela suplente por cada escuela titular, es posible que el tamao de muestra
efectivamente alcanzado en el operativo resulte algo inferior al tamao originalmente planeado. Se considerar
que la muestra de un pas es suciente para realizar estimaciones conables si se cumplen a la vez las tres
condiciones siguientes:

a) El tamao de muestra efectivo de escuelas es por lo menos el 80% de las escuelas esperadas en cada
grado y rea.

b) El tamao de muestra efectivo incluye al menos el 70% de escuelas titulares.

c) El tamao de muestra efectivo alcanza por lo menos al 80% de los alumnos que concurren efectivamente
a clases.

Tabla 25
Tasa de respuesta (en %) en la muestra de escuelas

100
DESPUS DE LOS REEMPLAZOS

ACEPTABLE
90
80
70
60
50
40
30
20
10
10 20 30 40 50 60 70 80 90 100
ANTES DE LOS REEMPLAZOS

66 REPORTE TCNICO
Las tablas siguientes (26 a la 34) indican los tamaos efectivos y los porcentajes de cumplimiento
para las muestras de alumnos y escuelas en cada pas, por rea y grado evaluados.

Tabla 26. Comparacin de escuelas esperadas versus escuelas efectivas en la muestra


nal para Lectura 3

Escuelas Escuelas Porcentaje de escuelas esperadas


Pas
esperadas efectivas en la muestra nal
Argentina 165 146 88,5%
Brasil 152 136 89,5%
Colombia 195 181 92,8%
Costa Rica 162 145 89,5%
Cuba 200 186 93,0%
Chile 167 150 89,8%
Ecuador 193 172 89,1%
El Salvador 176 175 99,4%
Nuevo Len 159 157 98,7%
Guatemala 229 212 92,6%
Mxico 172 148 86,0%
Nicaragua 195 178 91,3%
Panam 157 145 92,4%
Paraguay 207 193 93,2%
Per 164 154 93,9%
R. Dominicana 160 139 86,9%
Uruguay 218 207 95,0%

Total general 3071 2824 92,0%

CAPTULO 2 DISEO DE LA MUESTRA 67


Tabla 27. Comparacin de alumnos esperados versus alumnos efectivos en la muestra
nal para Lectura 3

Alumnos Alumnos Porcentaje de alumnos esperados en


Pas
esperados efectivos la muestra nal
Argentina 7444 5781 77,7%
Brasil 6502 5388 82,9%
Colombia 6945 5634 81,1%
Costa Rica 5550 5025 90,5%
Cuba 5332 5291 99,2%
Chile 6826 5791 84,8%
Ecuador 5878 4993 84,9%
El Salvador 7714 7302 94,7%
Nuevo Len 6592 5574 84,6%
Guatemala 7950 6677 84,0%
Mxico 5221 4579 87,7%
Nicaragua 8000 6211 77,6%
Panam 7161 6163 86,1%
Paraguay 6403 5066 79,1%
Per 5879 4640 78,9%
R. Dominicana 5490 3947 71,9%
Uruguay 7974 6558 82,2%

Total general 112861 94620 83,8%

68 REPORTE TCNICO
Tabla 28. Comparacin de escuelas esperadas versus escuelas efectivas en la muestra
nal para Lectura 6

Escuelas Escuelas Porcentaje de escuelas esperadas en


Pas
esperadas efectivas la muestra nal
Argentina 168 150 89,3%
Brasil 84 75 89,3%
Colombia 90 88 97,8%
Costa Rica 167 146 87,4%
Cuba 195 187 95,9%
Chile 169 157 92,9%
Ecuador 192 167 87,0%
El Salvador 175 167 95,4%
Nuevo Len 161 157 97,5%
Guatemala 223 193 86,5%
Mxico 174 150 86,2%
Nicaragua 169 153 90,5%
Panam 156 133 85,3%
Paraguay 205 187 91,2%
Per 147 134 91,2%
R. Dominicana 112 107 95,5%
Uruguay 218 202 92,7%

Total general 2805 2553 91,0%

CAPTULO 2 DISEO DE LA MUESTRA 69


Tabla 29. Comparacin de alumnos esperados versus alumnos efectivos en la muestra
nal para Lectura 6

Alumnos Alumnos Porcentaje de alumnos esperados en


Pas
esperados efectivos la muestra nal
Argentina 7236 6069 83,9%
Brasil 6391 5001 78,3%
Colombia 6823 5851 85,8%
Costa Rica 4982 4539 91,1%
Cuba 5930 5883 99,2%
Chile 7565 6616 87,5%
Ecuador 5697 5096 89,5%
El Salvador 6510 6237 95,8%
Nuevo Len 5627 4998 88,8%
Guatemala 5757 5157 89,6%
Mxico 5143 4723 91,8%
Nicaragua 7385 6128 83,0%
Panam 5935 5003 84,3%
Paraguay 5401 4307 79,7%
Per 5532 4504 81,4%
R. Dominicana 5114 4370 85,5%
Uruguay 6959 5989 86,1%

Total general 103987 90471 87,0%

70 REPORTE TCNICO
Tabla 30. Comparacin de escuelas esperadas versus escuelas efectivas en la muestra
nal para Matemtica 3

Escuelas Escuelas Porcentaje de escuelas esperadas en


Pas
esperadas efectivas la muestra nal
Argentina 165 151 91,5%
Brasil 152 136 89,5%
Colombia 195 183 93,8%
Costa Rica 162 144 88,9%
Cuba 200 186 93,0%
Chile 167 151 90,4%
Ecuador 193 178 92,2%
El Salvador 176 175 99,4%
Nuevo Len 159 157 98,7%
Guatemala 229 213 93,0%
Mxico 172 149 86,6%
Nicaragua 195 175 89,7%
Panam 157 145 92,4%
Paraguay 207 194 93,7%
Per 164 154 93,9%
R. Dominicana 160 145 90,6%
Uruguay 218 207 95,0%

Total general 3071 2843 92,6%

CAPTULO 2 DISEO DE LA MUESTRA 71


Tabla 31. Comparacin de alumnos esperados versus alumnos efectivos en la muestra
nal para Matemtica 3

Alumnos Alumnos Porcentaje de alumnos esperados en


Pas
esperados efectivos la muestra nal
Argentina 7444 6272 84,3%
Brasil 6502 5534 85,1%
Colombia 6945 5784 83,3%
Costa Rica 5550 4714 84,9%
Cuba 5332 5291 99,2%
Chile 6826 5880 86,1%
Ecuador 5878 5212 88,7%
El Salvador 7714 7399 95,9%
Nuevo Len 6592 5411 82,1%
Guatemala 7950 6881 86,6%
Mxico 5221 4621 88,5%
Nicaragua 8000 6384 79,8%
Panam 7161 6196 86,5%
Paraguay 6403 5110 79,8%
Per 5879 4763 81,0%
R. Dominicana 5490 4374 79,7%
Uruguay 7974 6837 85,7%

Total general 112861 96663 85,6%

72 REPORTE TCNICO
Tabla 32. Comparacin de escuelas esperadas versus escuelas efectivas en la muestra
nal para Matemtica 6

Escuelas Escuelas Porcentaje de escuelas esperadas en


Pas
esperadas efectivas la muestra nal
Argentina 168 149 88,7%
Brasil 84 77 91,7%
Colombia 90 87 96,7%
Costa Rica 167 122 73,1%
Cuba 195 187 95,9%
Chile 169 156 92,3%
Ecuador 192 172 89,6%
El Salvador 175 167 95,4%
Nuevo Len 161 154 95,7%
Guatemala 223 193 86,5%
Mxico 174 150 86,2%
Nicaragua 169 155 91,7%
Panam 156 139 89,1%
Paraguay 205 189 92,2%
Per 147 134 91,2%
R. Dominicana 112 108 96,4%
Uruguay 218 203 93,1%

Total general 2805 2542 90,6%

CAPTULO 2 DISEO DE LA MUESTRA 73


Tabla 33. Comparacin de alumnos esperados versus alumnos efectivos en la muestra
nal para Matemtica 6

Alumnos Alumnos Porcentaje de alumnos esperados en


Pas
esperados efectivos la muestra nal
Argentina 7236 6151 85,0%
Brasil 6391 5201 81,4%
Colombia 6823 5870 86,0%
Costa Rica 4982 4008 80,4%
Cuba 5930 5879 99,1%
Chile 7565 6648 87,9%
Ecuador 5697 5210 91,5%
El Salvador 6510 6270 96,3%
Nuevo Len 5627 4695 83,4%
Guatemala 5757 5249 91,2%
Mxico 5143 4711 91,6%
Nicaragua 7385 6468 87,6%
Panam 5935 5364 90,4%
Paraguay 5401 4362 80,8%
Per 5532 4585 82,9%
R. Dominicana 5114 4502 88,0%
Uruguay 6959 6160 88,5%

Total general 103987 91333 87,8%

74 REPORTE TCNICO
Tabla 34. Comparacin de escuelas esperadas versus escuelas efectivas en la muestra
nal para Ciencias 6

Escuelas Escuelas Porcentaje de escuelas esperadas en


Pas
esperadas efectivas la muestra nal
Argentina 168 155 92,3%
Colombia 90 88 97,8%
Cuba 195 193 99,0%
El Salvador 175 174 99,4%
Nuevo Len 161 159 98,8%
Panam 156 153 98,1%
Paraguay 205 190 92,7%
Per 147 140 95,2%
R. Dominicana 112 108 96,4%
Uruguay 218 211 96,8%

Total general 1627 1571 96,6%

CAPTULO 2 DISEO DE LA MUESTRA 75


Tabla 35. Comparacin de alumnos esperados versus alumnos efectivos en la muestra
nal para Ciencias 6

Alumnos Alumnos Porcentaje de alumnos esperados en


Pas
esperados efectivos la muestra nal
Argentina 7236 6039 83,5%
Colombia 6823 5911 86,6%
Cuba 5930 5897 99,4%
El Salvador 6510 6281 96,5%
Nuevo Len 5627 4711 83,7%
Panam 5935 5444 91,7%
Paraguay 5401 4466 82,7%
Per 5532 4604 83,2%
R. Dominicana 5114 4473 87,5%
Uruguay 6959 6153 88,4%

Total general 61067 53979 88,4%

76 REPORTE TCNICO
II.8.3. CRITERIOS Y PROCEDIMIENTOS PARA EL CONTROL DE LAS MUESTRAS
REALMENTE OBTENIDAS UNA VEZ CULMINADA LA APLICACIN

Una vez culminado el operativo se veric:

a) QUEELTAMAODELAMUESTRAENCADAESTRATOFUERADEALMENOSDOSESCUELAS

b) que se dispona del nmero de alumnos que asisten regularmente a clase por seccin de la muestra para
COMPARARCONELNMERODEALUMNOSQUEHICIERONLASPRUEBASCRITERIODEEXCLUSINPARAELANLISIS 

c) CULFUELAPROPORCINDEALUMNOSPARTICIPANTESENCADAESCUELAYSECCIN

d) QUEELTAMAODELAMUESTRAEFECTIVADEESCUELASFUERAALMENOSELDELAMUESTRAPLANEADA

e) que el tamao de la muestra efectiva de escuelas titulares fuera al menos el 70% de la muestra
PLANEADA

f) que las escuelas de la muestra fueron efectivamente las sorteadas como titulares o, en su defecto, las
SUPLENTESRESPECTIVAS

g) que todas las secciones de la escuela en 3 y en 6 fueron incluidas en el operativo o, en su defecto,


QUELASSECCIONESOMITIDASHANSIDOBIENEXCLUIDASENVIRTUDDESUTAMAO

h) que se lograra la participacin en las pruebas del 80% de los alumnos de cada grado que concurren
EFECTIVAMENTEACLASES

i) que todas las pruebas y cuestionarios contenan la identicacin precisa del alumno, la seccin, la
escuela y del estrato al que pertenece la escuela.

CAPTULO 2 DISEO DE LA MUESTRA 77


II.9. MRGENES DE ERROR ESTIMADOS PARA EL DISEO MUESTRAL,
A NIVEL INTERNACIONAL, NACIONAL Y DE ESTRATO

La simulacin realizada con los datos de dos pases del Primer Estudio Internacional Comparativo, con los
tamaos de muestra propuestos, permite armar que para un nivel de conanza del 95% el error de muestreo en
las pruebas de Lengua y Matemtica ser:

- INFERIORALPARAELCONJUNTODETODOSLOSPASES

- DELORDENDEL ANIVELNACIONAL

- del orden del 10% para los dominios de estudio con una participacin del 40% o ms en la muestra total.

El diseo muestral permita reducir los niveles de error, pero ello requera incrementar la cantidad de escuelas
en la muestra. A los efectos de que los Coordinadores Nacionales tengan una idea aproximada, se estim para
un pas (Argentina), a partir de los datos del Primer Estudio (Matemtica), los tamaos de muestra necesarios
para lograr diferentes niveles de error a nivel nacional (ver Tabla 36). Esta informacin se proporcion ante la
eventualidad de alguno o todos los pases consideraran necesario alcanzar menores niveles de error, para que se
puedan estimar los costos involucrados.

Tabla 36

Tamaos mustrales para distintos niveles de error


Error en el estrato Error en el estrato
Cantidad de Escuelas Error a nivel nacional
urbano pblico rural
118 5% 7% 7%
160 4% 6% 6%
230 3,5 % 5% 5%
358 3% 4% 4%
633 2% 3% 3%

Ningn pas increment su tamao de muestra con el propsito de mejorar la precisin de sus estimaciones. En el
caso de Uruguay el tamao de la muestra aument a n de obtener precisiones razonables para grupos de escuelas
de inters particular como las de contexto sociocultural crtico y tiempo completo.

En las tablas siguientes (37 a 41) se especica la media y el error de estimacin relativo a la estimacin
puntual en cada rea y grado evaluados.

78 REPORTE TCNICO
Tabla 37. Media y error de precisin relativo de la estimacin puntual para Lectura de 3er grado por pas

Pas rea Media Error relativo


Argentina L3 510,04 1,56%
Brasil L3 503,57 1,89%
Colombia L3 510,58 2,04%
Costa Rica L3 562,69 1,20%
Cuba L3 626,89 2,28%
Chile L3 562,03 1,44%
Ecuador L3 452,41 1,90%
El Salvador L3 496,23 1,55%
Nuevo Len L3 557,80 1,09%
Guatemala L3 446,95 1,50%
Mxico L3 530,44 1,52%
Nicaragua L3 469,80 0,94%
Panam L3 467,21 1,37%
Paraguay L3 469,09 1,94%
Per L3 473,98 1,75%
R. Dominicana L3 395,44 1,81%
Uruguay L3 522,65 1,34%
Total ALyC L3 505,13 0,85%
Fuente:Bases de datos SERCE

Tabla 38. Media y error de precisin relativo de la estimacin puntual para Lectura de 6to grado por pas

Error
Pas rea Media
relativo
Argentina L6 506,45 1,89%
Brasil L6 520,32 2,19%
Colombia L6 514,94 2,12%
Costa Rica L6 563,19 1,10%
Cuba L6 595,92 2,18%
Chile L6 546,07 1,54%
Ecuador L6 447,44 2,05%
El Salvador L6 484,16 1,61%
Nuevo Len L6 542,35 1,22%
Guatemala L6 451,46 1,45%
Mxico L6 529,92 1,76%
Nicaragua L6 472,92 1,11%
Panam L6 472,05 1,53%
Paraguay L6 455,24 1,91%
Per L6 476,29 1,73%
R. Dominicana L6 421,47 1,52%
Uruguay L6 542,15 1,32%
Total ALyC L6 513,02 1,01%
Fuente:Bases de datos SERCE

CAPTULO 2 DISEO DE LA MUESTRA 79


Tabla 39. Media y error de precisin relativo de la estimacin puntual para Matemtica de 3er grado por
pas
Error
Pas rea Media
relativo
Argentina M3 505,36 1,62%
Brasil M3 505,03 2,19%
Colombia M3 499,35 1,88%
Costa Rica M3 538,32 1,11%
Cuba M3 647,93 2,80%
Chile M3 529,46 1,55%
Ecuador M3 473,07 1,58%
El Salvador M3 482,75 1,38%
Nuevo Len M3 562,80 1,07%
Guatemala M3 457,10 1,43%
Mxico M3 532,10 1,45%
Nicaragua M3 472,78 1,08%
Panam M3 463,04 1,36%
Paraguay M3 485,60 2,15%
Per M3 473,94 1,49%
R. Dominicana M3 395,65 1,80%
Uruguay M3 538,53 1,39%
Total ALyC M3 505,11 0,93%
Fuente:Bases de datos SERCE

Tabla 40. Media y error de precisin relativo de la estimacin puntual para Matemtica de 6to grado por
pas
Error
Pas rea Media
relativo
Argentina M6 513,02 1,50%
Brasil M6 499,42 2,31%
Colombia M6 492,71 1,90%
Costa Rica M6 549,33 1,34%
Cuba M6 637,46 3,40%
Chile M6 517,30 1,56%
Ecuador M6 459,50 2,15%
El Salvador M6 471,93 1,56%
Nuevo Len M6 553,94 1,34%
Guatemala M6 455,80 1,25%
Mxico M6 541,60 1,89%
Nicaragua M6 457,93 1,09%
Panam M6 451,59 1,39%
Paraguay M6 468,31 1,79%
Per M6 489,97 2,17%
R. Dominicana M6 415,63 0,95%
Uruguay M6 578,42 1,37%
Fuente:Bases de datos SERCE Total ALyC M6 506,69 1,05%

80 REPORTE TCNICO
Tabla 41. Media y error de precisin relativo de la estimacin puntual para Ciencias de 6to grado por pas

Error
Pas rea Media
relativo
Argentina C6 488,71 1,41%
Colombia C6 504,31 1,73%
Cuba C6 661,73 3,69%
El Salvador C6 479,10 1,38%
Nuevo Len C6 510,68 1,17%
Panam C6 472,51 1,33%
Paraguay C6 469,26 1,37%
Per C6 464,89 1,41%
R. Dominicana C6 426,31 1,11%
Uruguay C6 533,13 1,29%
Total ALyC C6 491,56 0,80%
Fuente:Bases de datos SERCE

CAPTULO 2 DISEO DE LA MUESTRA 81


II.10. SISTEMA DE PONDERACIONES PARA LA ESTIMACIN
DE RESULTADOS A NIVEL NACIONAL Y DE SUBUNIVERSOS

Dado que la muestra no es autoponderada, es necesario utilizar ponderadores para representar adecuadamente
a la poblacin. La metodologa planteada en el Manual de muestreo para la aplicacin denitiva sobre el clculo
de los estimadores de las medias as como de sus errores estndar es tericamente correcta, pero tiene algunos
inconvenientes importantes que hacen que su uso sea restringido. Entre los ms importantes estn:

s Es muy difcil derivar las frmulas a emplear para una gran cantidad de estadsticos, por ejemplo los cuan-
tiles.

s En la construccin de estimadores se van arrastrando sesgos de forma considerable cuando los estratos mues-
trales tienen menos de 20 elementos.

sSe diculta la repeticin de los anlisis debido a que se requiere programarlos cada vez.

Por lo anterior, se decidi generar los ponderadores al nivel alumno y utilizarlos para estimar todos los estadsti-
cos necesarios. Para llegar a los ponderadores por alumno fue necesario ajustar la concepcin del diseo muestral
utilizado. El diseo original plantea que en cada escuela se iban a evaluar a todos los alumnos. Esto implica que
el ponderador del alumno deba ser igual al de su escuela. Es decir la probabilidad de seleccionar a un alumno en
particular iba a ser la misma de la probabilidad de seleccionar a su escuela. Sin embargo, por diversas razones,
esto no necesariamente ocurri as. En casos donde, por ejemplo, en cada escuela solamente se evalu al 85% de
los alumnos en promedio, no sera correcto asignar a los estudiantes la probabilidad de seleccin de la escuela.

Para superar este obstculo en el clculo de estimadores puntuales y sus correspondientes errores se consider el
tipo de muestreo como uno bitpico en vez de un unietpico. En este muestreo bietpico, la primera etapa cor-
responde a la seleccin de las escuelas mediante un muestreo aleatorio simple y, la segunda etapa, a la seleccin
de alumnos igualmente como un muestreo aleatorio simple. Esto asumiendo que los estudiantes que no fueron
evaluados se distribuyen aleatoriamente.

82 REPORTE TCNICO
Los pesos fueron calculados como factores de expansin, es decir, como el inverso de la probabilidad de selec-
cin, en correspondencia con este diseo muestral. En el caso de los estudiantes, por ejemplo, el peso o factor
de expansin puede interpretarse como el nmero de estudiantes de su estrato que un alumno representa. En
trminos tcnicos se us la siguiente lgica para calcular los ponderadores al nivel del alumno:

whij= Nni Nhi


nhl nni

Nhl = Cantidad de escuelas en el estrato h


Nhi = Cantidad de alumnos en la escuela i del estrato h
nhI = Cantidad de escuelas en muestra del estrato h
nhi = Cantidad de alumnos en muestra de la escuela i en el estrato h
Para que los estimadores describan de mejor manera a las caractersticas de las poblaciones estudiadas, es nec-
esario hacer un ajuste a los ponderadores que considere la cantidad de poblacin de los estratos en los que se
dividi la muestra. A continuacin se presentan las frmulas correspondientes.

w*hij = whij Nh
h


h = sh whij
Nh = Cantidad de alumnos matriculados en el estrato h
h = Estimado de la cantidad de alumnos matriculados en el estrato h

Un procedimiento similar se utiliz para calcular los factores de expansin a nivel de escuela, realizando un
ajuste para asegurarse que los ponderadores representen al total de la poblacin de escuelas.

Los factores de expansin para las variables de docentes se calcularon considerando el nmero de aulas como
el nmero total de docentes en la escuela, dado que se careca de informacin sobre el nmero total real de
docentes en cada estrato y dominio. Por lo tanto, este mtodo debe tomarse con las reservas del caso, ya que en
contextos donde hay ms de un docente por aula pueden sesgarse las caractersticas de los profesores.

Los factores de expansin de las bases de logro son distintos a los factores de las bases de alumnos y familias.
Dado que todos los estudiantes en las bases de resultados de aprendizaje tienen una puntuacin estimada, se
opt por calcular el factor de expansin en funcin al nmero de estudiantes en cada una de las bases, para
salvaguardar que se hiciera una estimacin adecuada del logro de la poblacin en cada pas. Por ello pueden
existir algunas mnimas diferencias entre los pesos de las bases de resultados del mismo grado pero distinta rea.
En cuanto a las bases de alumnos y familias, los factores de expansin se calcularon independientemente para
cada grado. Se tom como base el nmero total de estudiantes que tuvo puntajes vlidos en al menos una de las
pruebas. Los factores de expansin de alumnos y familias de un mismo grado son iguales, dado que se calcularon
sobre el mismo nmero de estudiantes.

CAPTULO 2 DISEO DE LA MUESTRA 83


SINTAXIS
PARA LA GENERACION DE PESOS.

COMPUTE schwgt = Nh/nhesperado .


EXECUTE .
COMPUTE schwadj = nhesperado/nhefectivo .
EXECUTE .
AGGREGATE
/OUTFILE=*
MODE=ADDVARIABLES
/BREAK=LlavePaisCentro
/nstud = SUM(Muestra01).
COMPUTE studadj = M3hj / nstud .
EXECUTE .
COMPUTE totwgt = schwgt * schwadj * studadj .
EXECUTE .
AGGREGATE
/OUTFILE=*
MODE=ADDVARIABLES
/BREAK=PAIS ESTRATOA3ORIGINALR
/ESTRAT = SUM(totwgt).
COMPUTE totwgt_adj = totwgt * M3h/ESTRAT .
EXECUTE .
WEIGHT
BY totwgt .
FREQUENCIES
VARIABLES=PAIS
/ORDER= ANALYSIS .
WEIGHT
BY totwgt_adj .
FREQUENCIES
VARIABLES=PAIS
/ORDER= ANALYSIS .

84 REPORTE TCNICO
Utilizando pesos es fcil estimar las medias y totales de la poblacin. Usando la tcnica de los pesos la esti-
macin de las varianzas es ms compleja pues tanto el numero de etapas, la estraticacin posterior y los ajustes
por no respuesta afectan la varianza. Unido a lo anterior hay que agregar el hecho de que se puede requerir vari-
anzas de estadsticas no lineales como la razn o la proporcin para lo cual no resulta trivial obtener estimaciones
insesgadas. Estos hechos han llevado al desarrollo de tcnicas ms sencillas de estimacin de varianzas, aunque
resulten menos precisas. Estas tcnicas se dividen en dos familias. Por un lado, las tcnicas de replicacin, entre
las que se cuentan el mtodo de grupos aleatorios, el de semimuestras reiteradas, el mtodo de Jacknife o de los
estimadores herramentales y el bootstrap o de autogeneracin. Por otro lado, estn los mtodos de linearizacin
(como el de las series de Taylor).

Las estimaciones de varianza en el SERCE se realizaron utilizando el mtodo de linearizacin de Taylor. El propsi-
to del procedimiento de linearizacin con series de Taylor es la aproximacin a la estimacin de inters por
medio de un estimador lineal. La varianza de esta aproximacin lineal es entonces estimada usando los mtodos
estndar de estimacin de varianza disponibles para estimadores lineales.

CAPTULO 2 DISEO DE LA MUESTRA 85


3
CAPTULO

LEVANTAMIENTO
DE
DATOS
L
a aplicacin de los instrumentos del SERCE, para efectos de levantar los datos requeridos en el estudio,
30
fue realizada directamente por las coordinaciones nacionales de los pases participantes , con la direc-
cin y el apoyo de la coordinacin tcnica del Laboratorio Latinoamericano de Evaluacin de la Calidad de
la Educacin (LLECE-CT), en concordancia con el diseo establecido en el Plan de Trabajo (UNESCO, 2005)
y asegurando el cumplimiento de los Criterios y procedimientos denidos (UNESCO, 2006a).

Los coordinadores nacionales, que participaron activa y permanentemente en todas las etapas del estudio, tu-
vieron un papel esencial en los operativos en campo, donde fue necesario implementar cada uno de los proced-
imientos debidamente probados en la aplicacin piloto y previamente estandarizados en diversos manuales e
instructivos. De esta forma, fueron los responsables de estructurar y organizar la red de aplicacin, convocar y
capacitar a los aplicadores, reproducir y organizar el material, contactar a las escuelas participantes y asegurar
que las condiciones de aplicacin estuvieran de acuerdo con los procedimientos establecidos. Despus de admin-
istrados los instrumentos, fue necesario recuperar todo el material, organizarlo, codicar las respuestas de los
estudiantes a las preguntas abiertas, evaluar las pruebas de escritura y capturar toda la informacin mediante
interfases que permitieron la consolidacin de bases de datos que luego fueron remitidas al LLECE-CT.

30 Cada coordinacin nacional cont con un equipo de trabajo y un responsable, denominado coordinador nacional y designado por el respectivo
pas.

CAPTULO 3 LEVANTAMIENTO DE DATOS 87


III.1. RESPONSABILIDADES
Y ROLES

En seguida se describe el papel que desempearon tanto los coordinadores nacionales como los aplicadores
encargados del operativo de campo directamente en cada aula de clase.

III.1.1. COORDINADOR
NACIONAL

Los coordinadores nacionales fueron los principales responsables de la implementacin del proyecto en sus
respectivos pases. Para ello debieron leer y estudiar todos los manuales e instructivos elaborados, principalmente
el manual del coordinador nacional (UNESCO, 2006b), asistir a las reuniones y jornadas de capacitacin que se
efectuaron para asegurar la correcta ejecucin de cada tarea, organizar e implementar cada aspecto previsto y
delegar en representantes de sus equipos algunas de sus funciones. Otra responsabilidad importante consisti en
mantener interlocucin permanente con el LLECE-CT, indicando los requerimientos nacionales de adaptacin de
los procesos establecidos en los manuales y de los propios instrumentos.

Las actividades ejecutadas por los coordinadores nacionales, antes, durante y despus de la aplicacin, fueron
las siguientes (UNESCO, 2006b):

a) Antes de la aplicacin

s Constituir un equipo tcnico y administrativo con el cual pudieron conducir los diferentes procesos
requeridos;

s establecer un sistema que permiti velar por la seguridad del estudio y la condencialidad de los
instrumentos;

s aprobar las versiones de los manuales e instrumentos adaptados a su pas;

s denir fechas de aplicacin de los instrumentos en las escuelas, dentro del perodo de las ocho semanas
anteriores a la terminacin del ao escolar;

88 REPORTE TCNICO
s conformar el marco muestral del pas;

s recibir la muestra nacional y vericar que las cantidades de estudiantes matriculados y asistentes a la
escuelas en los grados tercero y sexto correspondieron con la informacin proporcionada en el marco
muestral;

s interactuar con el LLECE-CT para efectuar los ajustes pertinentes en la muestra;

s establecer contacto con los centros educativos de la muestra, informarlos de la evaluacin y solicitar su
cooperacin;

s reproducir los instrumentos y materiales para la aplicacin;

s convocar, seleccionar y capacitar a los aplicadores;

s organizar la revisin y entrega de los materiales a los aplicadores.

b) Durante la aplicacin

s Implementar un sistema interno de apoyo a la aplicacin;

s informar al LLECE-CT las contingencias que tuvieron lugar en el periodo de aplicacin;

s colaborar con el Observador Internacional en su labor de implementar un sistema de supervisin de


calidad del estudio.

c) Despus de la aplicacin

s Organizar la vericacin y recepcin de los materiales de la aplicacin;

s dirigir los procesos de correccin y codicacin de las respuestas a las preguntas abiertas y de evaluacin
de la prueba de escritura;

s organizar la captura de las respuestas a los instrumentos a travs de interfases personalizadas para cada
pas;
s remitir al LLECE-CT un informe de aplicacin junto con la documentacin de soporte requerida, las bases
consolidadas de datos y una submuestra de cuadernillos para el control de calidad de la codicacin de
las respuestas de los estudiantes a las preguntas abiertas.

CAPTULO 3 LEVANTAMIENTO DE DATOS 89


III.1.2. DIRECTOR
DE ESCUELA

Los directores tuvieron una funcin de enlace y de canal de comunicacin dentro de las escuelas, para efectos
de sensibilizar a la comunidad educativa acerca del estudio, transmitir el principio de condencialidad de la
informacin recabada, coordinar las actividades requeridas y disponer los elementos de logstica necesarios para
el operativo de aplicacin, siguiendo las instrucciones del Documento Informativo para el Director (UNESCO,
2006c). En especial llevaron a cabo las siguientes tareas:

s Informar a docentes, estudiantes y padres de familia sobre la participacin de la escuela en el SERCE;

s prever los aspectos organizativos necesarios para aplicar los instrumentos: disponibilidad de salones,
presencia de docentes y estudiantes en las fechas de aplicacin y forma de administrar el cuestionario
para las familias;

s familiarizacin de los estudiantes con el tipo de prueba, empleando el cuadernillo de ejemplo del anexo
del Documento Informativo (UNESCO, 2006d);

s apoyar a los aplicadores durante los das del operativo facilitando los medios que fueron necesarios;

s resguardar el contenido de las pruebas con absoluta condencialidad.

90 REPORTE TCNICO
III.1.3. APLICADOR
DE INSTRUMENTOS

Los aplicadores fueron los responsables nales de administrar los instrumentos en cada escuela seleccionada
en la muestra. Para ello debieron observar rigurosamente todos los procedimientos establecidos en el manual
del aplicador y en el documento sobre pautas para la aplicacin de los cuestionarios (UNESCO, 2006d, 2006e), y
seguir las indicaciones recibidas en el proceso de capacitacin. Sus tareas fueron:

s establecer contacto con la escuela y coordinar con sus autoridades todos los aspectos que garantizaron
que la evaluacin se realiz con las mejores condiciones posibles;

s asegurase de recibir el material de evaluacin y cuidar su condencialidad e integridad;

s llenar los datos en las cartulas de los instrumentos de acuerdo con los cdigos asignados a cada
estudiante31, aula y escuela;

s aplicar los instrumentos a los estudiantes siguiendo estrictamente las pautas de aplicacin previstas;

s administrar los cuestionarios de familia, del director y de los docentes;

s llevar registro de la asistencia de los estudiantes a las sesiones de evaluacin, de los incidentes
presentados y de las condiciones de evaluacin, completando los formularios respectivos;

s consolidar todo el material y devolverlo ordenadamente a la dependencia que estableci la coordinacin


nacional.

31 Cada estudiante fue identicado con un cdigo de diez dgitos: los dos primeros para denotar el pas; el tercero, cuarto y quinto dgitos para la
escuela, el sexto dgito para el grado; el sptimo y octavo dgitos para el aula; y el noveno y dcimo dgitos para el consecutivo del estudiante dentro del aula.

CAPTULO 3 LEVANTAMIENTO DE DATOS 91


III.2. OPERACIONES
EN CAMPO

A continuacin se describen las principales operaciones en campo que fueron realizadas en la fase de
implementacin del proyecto, desde la adaptacin de las versiones de instrumentos y manuales estandarizados
para su aplicacin en cada pas, hasta el envo de las bases de datos y del informe de aplicacin.

III.2.1. REPRODUCCIN, EMBALAJE


Y DISTRIBUCIN DEL MATERIAL

Aprobada la versin nacional de las pruebas de cada pas, se procedi a su diagramacin y envo en archivo
digital en formato .pdf al respectivo coordinador nacional, quien efectu una ltima revisin y aprobacin de esta
versin. Luego, cada pas reprodujo la cantidad exacta necesaria de cuadernillos para evaluar a los estudiantes de
su muestra, evitando, por razones de seguridad, la reproduccin de ejemplares adicionales, y manteniendo intacto
(sin nuevas modicaciones) el contenido del archivo con la versin nacional. En el caso de los cuestionarios, las
coordinaciones nacionales recibieron los archivos en versin digital en formato .doc; luego, tras la aprobacin de
sus pedidos de adaptacin, fueron facultadas para introducir los cambios respectivos.

Para la impresin de las pruebas y los cuestionarios, los pases siguieron las pautas proporcionadas: papel de 80
gramos/m2 o superior, color blanco (con 90% de blancura como mnimo), formato cuadernillo deseablemente
abrochado con dos ganchos o grapas e impresin en blanco y negro.

Las pruebas de lectura, matemtica y ciencias tuvieron seis tipos distintos de cuadernillos cada una, mientras
que la de escritura tuvo dos. La forma de distribucin de los cuadernillos entre los estudiantes fue en espiral,
para asegurar una cantidad similar de cuadernillos aplicados de cada tipo al nivel de aula, escuela y pas. La
distribucin de cuadernillos y cuestionarios, indicando los instrumentos asignados a cada estudiante, de acuerdo
32
con la muestra a evaluar, fue colocada en el formulario de registro de asistencia F2 .

Los sistemas de embalaje y distribucin de materiales variaron segn los pases, pero aseguraron en todos
los casos que los aplicadores llevaron consigo la cantidad de cuadernillos y cuestionarios establecida en el
mencionado formulario F2.

32 Para cada aula se dise un formulario F2 cuyo formato se dispuso en el anexo 2 del manual del aplicador.

92 REPORTE TCNICO
III.2.2. CONVOCATORIA
Y CAPACITACIN DE APLICADORES

Los coordinadores nacionales convocaron personas con el perl apropiado y luego los capacitaron para
realizar la aplicacin de forma apropiada. En especial se tuvo en consideracin que los candidatos cumplieran las
siguientes condiciones:

s profesional con experiencia docente en educacin bsica o estudiante de educacin prximo a egresar
con experiencia de prcticas profesionales en aula. Tambin se admitieron estudiantes de los ltimos
dos aos de psicologa o profesionales con experiencia en reas anes a evaluacin de grupos o
enseanza;

s con habilidades para la conduccin de grupos de nios, manejo uido de la lengua materna del lugar
donde se encuentran las escuelas y buen nivel de diccin, para la lectura apropiada de instrucciones;

s con buen nivel de comprensin lectora, para el seguimiento de instrucciones y pautas dadas en los
manuales;

s digno de conanza y sin vnculo laboral con las escuelas que formaron parte de la muestra;

s asertivo y seguro de s mismo a la vez que exible para adaptarse rpidamente y dar respuesta eciente
a situaciones imprevistas.

Luego de la convocatoria y seleccin del grupo de aplicadores, se organiz la capacitacin respectiva con el
apoyo de la pauta ofrecida en el anexo 2 del manual del coordinador nacional (UNESCO, 2006b). Fue necesario
capacitar cerca de un 10% ms de candidatos a aplicadores que los requeridos para el operativo, con el n de
poder efectuar reemplazos en los casos de ausencia de los aplicadores seleccionados.

Cada aplicador recibi el manual del aplicador (UNESCO, 2006d) con una semana de anticipacin a la capacitacin,
para su estudio y apropiacin de las estrictas medidas de condencialidad en la administracin del material.
Igualmente, los aplicadores recibieron ejemplares de los cuestionarios para conocer su contenido y poder
responder preguntas alusivas a la forma como debieron llenarse. La capacitacin de los aplicadores tuvo una
duracin mnima de seis horas, adems del tiempo destinado a asuntos administrativos como asignacin de aulas,
entrega de materiales y explicacin de rutas de acceso. Los aplicadores ya capacitados fueron certicados por
el coordinador nacional, quien les expidi la identicacin requerida para establecer contacto con las escuelas,
antes de la fecha prevista para la aplicacin, con el propsito de conrmar los planes del operativo y la asistencia
de los estudiantes y docentes en los das previstos para llevar a cabo esta aplicacin.
33
Por otra parte, los aplicadores, cuando recibieron el respectivo material, llenaron y rmaron el formulario F1 y
un Acuerdo donde asumieron el compromiso de:

33 Para cada aplicador se dise un formulario F1 cuyo formato se dispuso en el anexo 1 del manual del aplicador.

CAPTULO 3 LEVANTAMIENTO DE DATOS 93


s guardar condencialidad de todos los materiales relacionados con la evaluacin;

s no conservar ni dejar en las escuelas ningn ejemplar o copia de de ninguna prueba o temes de pruebas
o borradores de dichos materiales, ni permitir copia de los mismos;

s no divulgar por ningn medio a personas no autorizadas el contenido de los materiales antes
mencionados.

III.2.3. APLICACIN
DE LOS INSTRUMENTOS

En la fecha prevista de aplicacin (cuadro III.2.3.1), los aplicadores se hicieron presentes en la escuela
respectiva, presentaron su identicacin y localizaron el aula asignada, tomaron registro de asistencia de los
estudiantes y llenaron las cartulas de los instrumentos segn los cdigos indicados para cada estudiante en el
formulario F2. Luego, los aplicadores cumplieron con los siguientes estndares de aplicacin:

s respetar el cronograma, es decir, la secuencia de las evaluaciones y los tiempos de pausa entre ellas;

s respetar el tiempo de evaluacin dentro de cada sesin e informar oportunamente a los estudiantes
sobre la duracin, inicio, prrroga y trmino del mismo;

s cuidar que no ingresaran docentes u otras personas ajenas al proceso de evaluacin a las sesiones de
aplicacin de las pruebas a estudiantes;

s asegurar que los estudiantes contaran con los materiales necesarios para responder la prueba y que no
emplearan materiales no permitidos como calculadoras, telfonos celulares u otros;

s leer en voz alta y junto con el grupo las cartulas e instrucciones de cada prueba, asegurando que los
estudiantes comprendieron cmo marcar o escribir sus respuestas;

s mantener una actitud de apoyo durante la evaluacin para sostener un clima apropiado de trabajo,
supervisando que los estudiantes comprendieron las instrucciones;

s evitar ofrecer cualquier tipo de informacin no prevista en el manual que pudiera traducirse en ayuda
para responder, como por ejemplo explicar el signicado de palabras o dar cualquier tipo de orientacin
sobre el contenido de la prueba;

s recoger los cuadernillos y contarlos para asegurarse de tener el material completo, una vez que la sesin
concluy.

94 REPORTE TCNICO
Adems de la aplicacin de pruebas, los aplicadores administraron los cuestionarios a los propios estudiantes,
a sus padres, a docentes y a directores, brindando apoyo a los actores encuestados para que entendieran los
diferentes formatos de los cuestionarios, dando orientaciones para favorecer una mejor comprensin de los
contenidos de algunas preguntas.
34
Finalmente, los aplicadores llenaron el formulario F3 , organizaron todo el material y luego lo retornaron a la
coordinacin nacional. El formulario F3 permiti registrar los incidentes presentados, al momento de responder
los instrumentos, as como la solucin ofrecida por el aplicador.

Cuadro III.2.3.1. Fechas de aplicacin de los instrumentos

Pas Fechas de Aplicacin

Argentina 30 octubre 10 de noviembre 2006


Brasil 20 24 noviembre 2006
Chile 16 20 octubre 2006
Colombia Calendario norte 01 02 junio 2006
Colombia Calendario sur 25 28 septiembre 2006
Costa Rica 15 16 noviembre 2006
Cuba 01 02 junio 2006
Dominicana 29 mayo 9 junio 2006
Ecuador Calendario norte 21 22 junio 2006
Ecuador Calendario sur 14 22 noviembre 2006
El Salvador 18 25 septiembre 2006
Guatemala 15 22 septiembre 2006
Mxico 24 25 mayo 2006
Nicaragua 16 31 octubre 2006
Nuevo Len 20 23 junio 2006
Panam 04 05 octubre 2006
Paraguay 30 octubre 11 noviembre 2006
Per 28 noviembre 8 diciembre 2006
Uruguay 24 octubre 10 noviembre 2006

34 Para cada aplicador se dise un formulario F3 cuyo formato se dispuso en el anexo 4 del manual del aplicador.

CAPTULO 3 LEVANTAMIENTO DE DATOS 95


III.2.4. RETORNO
DEL MATERIAL

El retorno del material se organiz de diferente manera segn los mecanismos solicitados y aprobados para
cada pas. En todos los casos, se requiri a los aplicadores un conteo nal de los instrumentos y su registro en
el formulario F1, para vericar la devolucin de todo el material. El registro incluy una columna con el conteo
inicial del material entregado al aplicador y otra con el conteo nal del material devuelto, tanto respondido por
estudiantes, padres de familia, docentes o directores, como en blanco, en caso de no haber sido utilizado.

Las coordinaciones nacionales aprovecharon esta instancia de conteo para corregir los errores detectados en la
informacin registrada en las cartulas. Luego, organizaron los cuadernillos de las pruebas y los cuestionarios,
para adelantar los procesos de codicacin de respuestas abiertas de matemtica y ciencias y de evaluacin de la
prueba de escritura, as como el de captura de datos. Despus, debieron almacenar el material en un lugar seguro
por un plazo no menor de seis meses y en seguida procedieron a destruir todo este material.

III.2.5. CODIFICACIN
DE RESPUESTAS ABIERTAS

Para asegurar la misma metodologa en la codicacin de las respuestas abiertas de las pruebas de matemtica
y ciencias, se establecieron manuales e instructivos que debieron seguirse cabalmente, se brindaron talleres de
capacitacin y se mantuvo un apoyo permanente en lnea a los equipos nacionales responsables de esta tarea.

La prueba de ciencias se dise con seis tems abiertos, mientras que la de matemtica con seis tems abiertos
en tercer grado y con nueve tems abiertos en sexto grado. Para codicar las respuestas se siguieron las pautas
indicadas en los instructivos para organizar los procesos de codicacin (UNESCO, 2006j, 2006k) y los criterios
sealados en los manuales para la codicacin (UNESCO, 2006m, 2006n). Para la codicacin se emple el
modelo de crdito parcial con un cdigo de dos dgitos, donde el primero indica el crdito otorgado (nulo, parcial
o total) y el segundo permite identicar el tipo de proceso seguido por el estudiante.

El primer dgito correspondi a crdito total, cuando la respuesta fue correcta; crdito parcial, si la respuesta mostr
que el estudiante maneja parte de los procesos que evala el tem pero con algunos errores en el procedimiento,
es decir si la respuesta fue parcialmente correcta; y crdito nulo cuando la respuesta fue incorrecta. El segundo
dgito recogi el proceso empleado por el estudiante para responder el tem, en el caso de crdito total o parcial,
o el tipo de error cometido en el caso de crdito nulo. Adicionalmente se consideraron cdigos especiales para
situaciones de ausencia de respuesta o para tem no administrado (por ejemplo por problema de impresin en el
cuadernillo o falta de pgina con el tem).

96 REPORTE TCNICO
Para llevar a cabo adecuadamente el proceso de codicacin, los coordinadores nacionales realizaron las siguientes
actividades:

s revisar los manuales y los instructivos, proponer los ajustes respectivos y luego aprobarlos;

s enviar un representante con conocimiento en cada rea al taller de capacitacin en el uso del manual y
en la implementacin del proceso;

s convocar entre tres y cinco codicadores por prueba y grado que cumplieran con el perl adecuado para
hacer el trabajo;

s ubicar un espacio adecuado para realizar el trabajo que, adems, debi cumplir con las condiciones
necesarias para el resguardo seguro de los cuadernillos;

s proporcionar el material necesario para la codicacin y asegurar la adecuada distribucin de los


cuadernillos entre los codicadores;

s enviar al LLECE-CT la submuestra de 30 cuadernillos por cada codicador (por rea y grado), una vez que
las bases de datos del pas remitidas fueron aprobadas.

a) Taller de capacitacin

Para garantizar la unicidad en la implementacin de los procedimientos de codicacin, se ofreci un taller


internacional de capacitacin en la sede de OREALC/UNESCO en Santiago del Chile, con la participacin de los
representantes de los pases, quienes tenan experiencia en la enseanza de ciencias y matemtica, buen manejo
de la disciplina, experiencia en la conduccin de procesos de correccin similares y adems haban recibido
oportunamente las versiones piloto de los manuales e instructivos del proceso.

Cada representante fue responsable de replicar la capacitacin con los codicadores de su pas, de supervisar la
adecuada implementacin de todas las etapas del proceso, de codicar el grupo de respuestas que le correspondi
y adems actu como punto de enlace para consultar y resolver las dudas que surgieron durante la codicacin.

Durante el taller, que fue dirigido por los coordinadores de los paneles de expertos de cada rea, los participantes
codicaron decenas de ejemplos reales, seleccionados de las aplicaciones realizadas hasta entonces en los pases
de calendario norte. Estos ejemplos fueron ilustrativos del uso de los diferentes cdigos y representativos de
respuestas inesperadas o difciles de calicar. Concluido el taller, se recogieron por consenso las sugerencias
de mejoras en cada descripcin para luego precisar la redaccin de los criterios que conformaron el respectivo
manual en la versin denitiva. Dos semanas despus del taller, cada pas recibi todo el material necesario para
iniciar la codicacin de manera descentralizada.

CAPTULO 3 LEVANTAMIENTO DE DATOS 97


b) Implementacin de la codicacin

De acuerdo con lo dispuesto en los manuales e instructivos, el pas trabaj con un mximo de cinco codicadores
35
por rea y grado , incluyendo al representante que asisti al taller de capacitacin. Antes de iniciar el trabajo, el
material fue organizado para distribuir las respuestas de los estudiantes de una misma aula entre los diferentes
codicadores, minimizando as el sesgo al interior de un aula, se veric la informacin de las cartulas de los
cuadernillos seleccionados y se separaron en un grupo los correspondientes a los estudiantes presentes y en otro
grupo los que quedaron en blanco.

Con los cuadernillos respondidos se formaron tres pilas, cada una con los mismos tems abiertos: la primera pila,
con los cuadernillos uno y cuatro; la segunda, con los cuadernillos dos y cinco; y la tercera, con los cuadernillos
tres y seis. Luego se orden cada pila en forma ascendente, segn el cdigo del cuadernillo, y nalmente se
distribuyeron alternadamente los cuadernillos entre los codicadores responsables del grado y rea, de forma que
cada grupo de aula qued repartido en partes iguales entre todos ellos.

Los codicadores debieron sujetar estrictamente sus valoraciones a los criterios indicados en el manual, para cuyo
empleo fueron capacitados y evaluados por el representante que asisti al taller internacional. La capacitacin
fue una rplica del taller realizado en Santiago de Chile, pero los pases pudieron incluir mayor nmero de
ejemplos locales a n de facilitar la comprensin de los criterios. Durante la codicacin, en jornadas de menos
de cinco horas, para evitar el efecto del cansancio, el representante actu como supervisor de todo el proceso y
debi resolver las dudas presentadas o tramitarlas con el coordinador del panel de expertos.

35 Si bien originalmente el nmero de codicadores establecido por rea y grado fue tres, ste se ampli hasta cinco en respuesta al pedido de varios
pases participantes.

98 REPORTE TCNICO
III.2.6. EVALUACIN
DE LA PRUEBA DE ESCRITURA

De manera anloga a la codicacin de las respuestas abiertas de matemtica y ciencias, los pases evaluaron
en forma descentralizada las pruebas de escritura, teniendo en cuenta que el proceso fue ms complejo y requiri
mayores controles, debido a la naturaleza y objetivos de esta prueba, que comprendieron la valoracin de 19
aspectos en tercero y 22 aspectos en sexto grado. Adems, aunque el estudiante debi sujetarse a una consigna,
previamente probada y ajustada de acuerdo con los resultados de la aplicacin piloto, la naturaleza del estmulo
gener diversos tipos de respuestas.

a) Talleres de capacitacin

Se organizaron dos talleres dirigidos a capacitar a los representantes de los pases, quienes luego tuvieron
a su cargo la capacitacin del grupo de correctores de su pas y la supervisin del proceso. El primer taller fue
atendido por todos los pases de manera obligatoria, mientras que el segundo fue optativo y busc reforzar a
aquellos con menos experiencia en el tema. Debido al carcter pionero de esta evaluacin, el manual para la
evaluacin de las pruebas de escritura (UNESCO, 2006o), utilizado cono referente conceptual y metodolgico
para llevar a cabo el proceso, present el marco terico adoptado de manera extensa, incluyendo un glosario
terminolgico y los criterios para valorar cada aspecto considerado.

Los participantes recibieron con dos semanas de anticipacin a la fecha de realizacin de cada taller toda la
documentacin requerida, de manera que pudieron estudiarla y llegar al taller con sus consultas y dudas por
escrito. Los talleres fueron adems el espacio de discusin y de construccin de consensos, acerca de la forma
de organizar el proceso con varios correctores, emplear los criterios acordados para interpretar distintos tipos
de textos, utilizar las planillas diseadas para valorar cada aspecto de la escritura, anar el respectivo manual
y constituir una red de correctores en la regin, para intercambiar distintas inquietudes y lograr los acuerdos
respectivos.

b) Implementacin de la correccin

Siguiendo las indicaciones del instructivo para organizar los procesos de evaluacin (UNESCO, 2006l), se
utiliz solo una muestra de los instrumentos aplicados, debido a que el nmero de cuadernillos fue solo dos y
no seis como en las dems reas. Este diseo redujo signicativamente el tamao requerido de muestra, para
inferir los resultados con un nivel de precisin estadstica de 95% de conanza al interior de los pases. Pese
a ello, la decisin de aplicar la prueba de escritura a todos los estudiantes del grupo presentes en el da de la
evaluacin, respondi a facilitar la logstica, pues de lo contrario hubiera sido necesario retirar estudiantes de
las aulas, lo que podra generar desorden en la escuela y eventualmente sesgo por una escogencia no aleatoria
de los estudiantes.

CAPTULO 3 LEVANTAMIENTO DE DATOS 99


Sobre la base de los registros de asistencia a la prueba de escritura, se seleccion en forma aleatoria una muestra
con al menos cuatro cuadernillos por cada aula (dos de cada tipo), buscando un nmero total de cuadernillos
mayor o igual que 600, para cada grado. Enseguida, a partir de esta muestra, se seleccion una submuestra de
70 cuadernillos por grado (35 de cada tipo) que se denomin grupo A o submuestra de recorreccin. Luego se
organizaron los cuadernillos en siete grupos ordenados segn el cdigo asignado a cada estudiante (grupos A,
B, C, D, E, F y G) y se estableci el siguiente sistema de doble codicacin para la muestra completa, empleando
cuatro correctores (con cdigos 01, 02, 03 y 04):

s Los cuatro correctores corrigen el Grupo A, sin apoyo del supervisor;

s correctores 01 y 02 corrigen el Grupo B;

s correctores 03 y 04 corrigen el Grupo C;

s correctores 01 y 03 corrigen el Grupo D;

s correctores 02 y 04 corrigen el Grupo E;

s correctores 01 y 04 corrigen el Grupo F;

s correctores 02 y 03 corrigen el Grupo G.

As se logr que cada cuadernillo fuera corregido por dos personas distintas y pudieron enlazarse las correcciones
de todos los correctores con un nmero similar de cuadernillos en comn en cada pareja posible.

100 REPORTE TCNICO


III.2.7. CAPTURA
DE DATOS

Previo al proceso de captura, se ofreci un taller de capacitacin en el manejo de la interfase diseada para
la captura de los datos, dirigido a los representantes de los pases que estuvieron a cargo de este proceso. Los
participantes, quienes debieron en lo posible dominar el manejo de bases de datos, recibieron antes del taller
los documentos de referencia, conformados por la versin piloto del software desarrollado, el manual de captura
de datos y el manual de usuario. Durante el taller, donde cada participante llev una muestra de cuadernillos de
su pas, para efectos de probar el uso de cada una de las utilidades del software, se revisaron y precisaron por
consenso todos los procedimientos previstos.

Tras el taller y luego de los ajustes pertinentes, los pases recibieron la versin denitiva del manual de captura
de datos (UNESCO, 2006p) y el manual del usuario Software de captura de datos (UNESCO, 2006q). Ms adelante,
se dispuso la versin estndar 3.2 del software desarrollado, con todas las utilidades implementadas, para iniciar
el proceso de captura en los pases con calendario norte. Despus, se hicieron actualizaciones y anamientos
al software, corrigiendo algunas novedades detectadas, y nalmente se liber la versin 3.4, con una interfase
(esquema III.2.7.1) que incorpor nuevos requerimientos.

36
As, el software comprendi las siguientes utilidades :

s importacin y actualizacin de datos relacionados con escuelas, estudiantes, profesores, codicadores


de respuestas abiertas y correctores de la prueba de escritura;

s captura de respuestas de cuadernillos y de cuestionarios;

s generacin de listados de escuelas, aulas por escuela y estudiantes por aula y escuela;

s generacin de reportes de estado de la digitacin y listados de instrumentos pendientes de digitar;

s validacin de la asignacin de cuadernillos, cuadernillos digitados de estudiantes ausentes, longitud de


registro de cuadernillos y doble captura.

36 El software fue desarrollado por un equipo tcnico de tres ingenieros de sistemas del Instituto Colombiano para el Fomento de la Educacin Superior
(ICFES), con base en los lineamientos de diseo del LLECE-CT.

CAPTULO 3 LEVANTAMIENTO DE DATOS 101


Esquema III.2.7.1. Interfase del software de captura de datos versin 3.4.

Microsoft Access - (Panel Principal V Def. 3.4)

SERCE 2006 - Menu de Opciones


Captura de Datos Reportes
Cuestionarios de familia
Importar Datos (Formulario 2)
ingresados:
Listado de Centros Listado aulas por
Educativos Centro Educativo Total General de registros
Actualizar Centros Educativos
19 Per Cuadernillos ingresados:
ingresados por grado

Generar estudiantes y asignar Total General de registros ingresados Cantidad de registros


cuadernillos capturados por cuestionario
Cantidad de registros ingresados por
Actualizar Estudiantes area y grado Cuestionarios por digitar

Cantidad de registros capturados por


Actualizar Profesores Area, Centro, Grado y aula Validaciones
Cuadernillos por digitar
Asignacin de Cuadernillos
Actualizar Codicadores
Cuestionarios de Estudiante
ingresados: Cuadernillos digitados de
ausentes
Capturar respuestas de Total General de registros
cuadernillos ingresados por grado Asignacin de Cuadernillos
vs. capturados
Cantidad de registros
capturados por cuestionario Longitud de registro de
Capturar respuestas de cuadernillos
cuestionarios
Cuestionarios por digitar Doble Captura

Salir de Microsoft Access

Soportado por: ICFES - Grupo de Informatica Bogot D.C. , Colombia. V Def. 3,4, Octubre 24 de 2006
e- mail: sercesoporte@hotmail.com jquiroga@icfes.gov.co
Telfono: (057) 13346269 , (057) 1 3387338) ext. 310

Durante las doce semanas siguientes a la fecha de aplicacin, los pases organizaron sus equipos de digitacin,
realizaron la captura de los datos y consolidaron y remitieron las bases al LLECE-CT, donde se inici un proceso de
depuracin interactivo con los mismos pases, hasta aprobar dichas bases cuando se cumpli con las condiciones
requeridas.

Para acompaar el trabajo de los pases, se dispuso un sistema de consultas sobre el uso del software y de
solucin de dudas que oper de manera permanente, apoyando distintas tareas, desde la personalizacin del
software y la importacin de datos hasta la generacin de tablas especcas con la identicacin de los registros
duplicados, registros incompletos o campos con valores fuera del rango vlido. Es importante sealar que por
regla general, los mismos pases fueron los responsables de corregir todas las novedades encontradas hasta lograr
una base depurada.

102 REPORTE TCNICO


III.2.8. INFORME FINAL
DE APLICACIN

Los coordinadores nacionales elaboraron y remitieron al LLECE-CT un informe de aplicacin nacional, de acuerdo
con un formato diseado para el efecto y entregado dentro de las dos semanas posteriores al envo de las bases de
datos, con el n de recabar datos ciertos acerca de la calidad del operativo. El informe incorpor una relacin de
las dicultades encontradas y valor las principales operaciones: adecuacin de los instrumentos, seleccin de la
muestra, constitucin de la red de aplicacin (convocatoria, seleccin y capacitacin de aplicadores), supervisin
del trabajo de los aplicadores, codicacin y captura de datos. Adems, reri aspectos sobre los mecanismos de
condencialidad empleados, la calidad y uidez de las comunicaciones con el LLECE-CT y los posibles errores o
sesgos detectados en las pruebas a partir de su aplicacin en campo (UNESCO, 2006r).

En todo caso, se emple como referente de aplicacin de calidad aquella que se realiza organizadamente, con
procedimientos estandarizados en todas las escuelas participantes, con personal formalmente capacitado, con
respeto a los estudiantes evaluados y a la organizacin escolar, con informacin oportuna a todos los actores
involucrados, con medidas de seguridad para resguardar la integridad y condencialidad del material, con una
mnima proporcin de instrumentos no contestados y con bajos ndices de incidencias durante la aplicacin.

El coordinador nacional, adjunto al envo fsico de un ejemplar del informe aplicacin nacional rmado por l,
remiti los siguientes documentos de respaldo:

s un ejemplar impreso de cada una de las pruebas y de los cuestionarios;

s fotocopia de todos los formularios F2, con el registro de asistencia de los estudiantes;

s fotocopia de todos los formularios F3, con el registro de los incidentes de las sesiones de evaluacin.

CAPTULO 3 LEVANTAMIENTO DE DATOS 103


III.2.9. MUESTRAS
DE RECORRECCIN

Una vez aprobada la primera versin de la base de datos, se seleccionaron 30 cuadernillos por cada persona
responsable de codicar las respuestas a los tems abiertos de matemtica y de ciencias, tanto para tercero
como para sexto grado. La seleccin se realiz ordenando todos los cuadernillos segn el cdigo de codicador,
manteniendo el orden original de los registros en la base recibida, y tomando luego los primeros 30 cuadernillos
de cada grupo con cdigo consecutivo de aula igual a 09. Cuando el nmero de cuadernillos no lleg a 30, para
un determinado codicador, se utilizaron cuadernillos de los estudiantes 08, 07, y as sucesivamente, hasta
completar la cantidad requerida. El criterio del cdigo consecutivo igual a 09 fue emprico, pues con un menor
valor se concentraba la muestra en las escuelas ms pequeas y con un mayor valor la concentracin se localizaba
en las escuelas ms grandes.

Los coordinadores nacionales ubicaron y remitieron al LLECE-CT estos cuadernillos fsicos y luego se procedi a su
recorreccin centralizada, por parte de los coordinadores de los paneles de expertos. Adicionalmente, adjuntaron
los cuadernillos de escritura del Grupo A mencionado en el apartado III.2.6, que tambin fueron luego corregidos
por parte de la coordinadora y un experto del panel respectivo.

III.3. SISTEMA
DE SUPERVISIN EXTERNA

Con el propsito de asegurar de calidad del estudio, se implement un mecanismo de supervisin externa
que permiti, de una parte, incentivar a todos los actores involucrados en la fase de aplicacin a ajustarse a
los procedimientos establecidos, en la medida en que cualquiera poda ser objeto de observacin, y de otra
parte, valorar la medida en que estos procedimientos fueron observados y atendidos por los pases. Para ello, se
conformaron equipos de monitores externos en cada pas que fueron liderados por un observador internacional,
nominado por otro pas y seleccionado por el LLECE-CT, teniendo en cuenta su perl y disponibilidad de tiempo
para ejercer las funciones previstas en el respectivo instructivo (UNESCO, 2006f).

104 REPORTE TCNICO


III.3.1. SELECCIN
DE LOS OBSERVADORES INTERNACIONALES

La funcin del observador internacional fue garantizar que en cada pas existiera un registro externo de las
condiciones de aplicacin, que sirvi posteriormente para analizar si el modo en que se organiz e implement
la aplicacin de las pruebas y dems instrumentos se ajust sucientemente a lo estipulado.

Para la seleccin de los observadores internacionales se solicit a los coordinadores nacionales la nominacin
de dos a tres personas con disposicin a realizar esta funcin. Los nominados deban pertenecer al equipo de la
coordinacin nacional y tener experiencia en la supervisin o conduccin de grandes operativos de evaluacin,
nacionales o internacionales. Los propios coordinadores nacionales pudieron nominarse como candidatos a
observadores. Junto con los nombres propuestos por cada pas, se solicit indicara las fechas en que cada persona
dispona de cinco das tiles corridos para viajar a otro pas a realizar este trabajo.

Luego, se seleccionaron las personas que cumplieron con el perl mencionado y que tuvieron disposicin para
viajar al pas asignado, en las fechas de aplicacin denidas, desde los dos das tiles anteriores al primer da de
aplicacin hasta por lo menos dos das despus de iniciada esta aplicacin, procurando involucrar representantes
de la mayor cantidad posible de pases. Para el caso del observador internacional que supervis la aplicacin en
Brasil, fue necesario, adems, considerar el manejo uido de la lengua portuguesa.

En los pases donde no fue posible conseguir un observador nominado por otro pas, se contrat a una consultora
externa para cumplir con esta funcin. Es importante sealar que integrantes del LLECE-CT visitaron algunos
pases para valorar el funcionamiento de los instrumentos y procesos en campo e incluso visitaron escuelas en
calidad de monitores externos, pero en ningn caso fungieron como observadores internacionales.

Las principales tareas encargadas al observador internacional, debidamente detalladas en el respectivo instructivo
fueron (UNESCO, 2006f):

s ESTUDIARDETENIDAMENTELOSMANUALESDELCOORDINADORNACIONAL DELAPLICADORYDELMONITOREXTERNO AS


como los documentos sobre criterios y procedimientos para el aseguramiento de la calidad en el SERCE
y pautas para la aplicacin de los cuestionarios sobre factores asociados;

s LLEGARALPASASIGNADOCONANTELACINALINICIODELAAPLICACIN VISITARELCENTRONACIONALYENTREVISTARSE
con el coordinador nacional y otros integrantes del equipo, siguiendo una pauta de trabajo;

s REALIZARELENTRENAMIENTODELOSMONITORESEXTERNOSYHACERLOSARREGLOSADMINISTRATIVOSREQUERIDOSPARA
su labor y la distribucin de recursos necesarios para su trabajo;

s SELECCIONAR LAS ESCUELAS QUE FUERON VISITADAS Y ASIGNARLAS A LOS MONITORES EXTERNOS CUIDANDO QUE LA
coordinacin nacional no conociera el resultado de la asignacin;

CAPTULO 3 LEVANTAMIENTO DE DATOS 105


s VISITARALMENOSTRESESCUELASENLACAPITALDELPAS DURANTELOSDOSPRIMEROSDASDEAPLICACIN

s RECIBIRLOSINFORMESDELOSMONITORESEXTERNOSYELABORAREL2EPORTEDE!PLICACIN DEACUERDOCONEL
formato establecido para el efecto.

III.3.2. SELECCIN
DE LOS MONITORES EXTERNOS

El principal papel del monitor externo fue observar sesiones de evaluacin en las escuelas participantes
y registrar, utilizando un formulario especco, todo aquello que en mayor o menor grado se apart de los
procedimientos estipulados en el manual del aplicador. Para su seleccin se solicit previamente a las
coordinaciones nacionales la nominacin de diez candidatos a monitores externos, que debieron cumplir con los
siguientes requisitos (UNESCO, 2006g):

s TENEREXPERIENCIAENEDUCACIN CONOCIMIENTODELSISTEMAEDUCATIVOYDELFUNCIONAMIENTODELASESCUELAS
primarias y ser capaz de relacionarse positivamente con docentes y estudiantes;

s NOTENERRELACINFUNCIONALNIFAMILIARCONLOSINTEGRANTESDELACOORDINACINNACIONALNICONLASREAS
centrales del Ministerio de Educacin (condicin excluyente) y tener preferiblemente experiencia previa
en operativos nacionales de evaluacin;

s SER CAPAZ DE REPRESENTAR POSITIVAMENTE A LA 5.%3#/ ANTE LAS ESCUELAS DE CONDUCIR SU TRABAJO CON
autonoma e independencia de la coordinacin nacional y de comunicarse efectivamente con el LLECE-CT
a travs de correo electrnico;

s lRMARUNCOMPROMISODECONlDENCIALIDADRESPECTOATODOSLOSMATERIALESCONLOSQUETUVOCONTACTO
especialmente los cuadernillos de las pruebas (UNESCO, 2006h).

Entre los candidatos nominados por los propios pases, se seleccionaron tantos monitores externos como fue
necesario, para asegurar la visita a un nmero mnimo de 20 escuelas en cada pas y con registro de al menos
dos sesiones en cada escuela, considerando aspectos como fechas de la aplicacin y localizacin geogrca de
las escuelas.

106 REPORTE TCNICO


III.3.3. CAPACITACIN
DE LOS MONITORES EXTERNOS

Para garantizar unicidad en la supervisin de las aplicaciones, los observadores internacionales capacitaron
a los monitores externos, siguiendo las indicaciones del instructivo (UNESCO, 2006f). Para ello, se concert una
sesin de trabajo de al menos cuatro horas de duracin con los monitores ya seleccionados, quienes previamente
recibieron y estudiaron la documentacin requerida, en especial el manual del monitor externo (UNESCO,
2006g).

En esta sesin, el observador internacional explic los objetivos de la supervisin externa y la forma de realizar
cada actividad, despej las dudas que surgieron, resolvi los temas administrativos asociados con los traslados
de los monitores, deni las escuelas que cada monitor debi visitar y pidi completar los formularios de
observacin por escrito, en el momento de las visitas a las escuelas. Los formularios de observacin se realizaron
a razn de uno por cada escuela visitada y se remitieron al observador internacional en un plazo no mayor de diez
das luego de la fecha de realizacin de las visitas.

III.3.4. ESCUELAS VISITADAS


POR LOS MONITORES EXTERNOS

Cada observador internacional recibi un listado con cerca de 60 escuelas del pas asignado, que fueron
preseleccionadas como candidatas a ser visitadas, teniendo en cuenta el criterio de diversidad, en trminos de
localizacin geogrca, tamao y cantidad de aulas y estratos de ruralidad (urbano y rural) y de sector (pblico,
privado y privado subsidiado). A partir del listado, el observador internacional seleccion las escuelas que fueron
visitadas, de acuerdo con los siguientes criterios:

s CUMPLIRCONLACUOTAMNIMADEESCUELASOBSERVADASENCADAPAS37;

s ABARCAR DISTINTAS REGIONES DEL PAS ENTRE DOS Y CUATRO SIEMPRE Y CUANDO FUERAN ACCESIBLES A LOS
monitores;

37 En Ecuador y Colombia, que tuvieron dos perodos de aplicacin diferentes, uno para cada uno de los dos calendarios ociales, debieron observarse
al menos ocho escuelas en el calendario norte (mayo-junio) y 12 en el calendario sur (segundo semestre de 2006).

CAPTULO 3 LEVANTAMIENTO DE DATOS 107


s TIEMPOSDEDESPLAZAMIENTOAPROPIADOS QUEPERMITIERONALMONITORESTARENLAESCUELADESDELAPRIMERA
hora de aplicacin;

s ECONOMADEDESPLAZAMIENTOS ASIGNANDOAUNMONITORESCUELASLOCALIZADASENLAMISMAREGIN

s VARIEDADDETIPOSDEESCUELA ASEGURANDOOBSERVARUNMNIMODECUATROESCUELASDECADAUNADETRES
categoras propuestas: urbana grande, urbana mediana o pequea, y rural. Adems, debieron incluirse
escuelas ubicadas en estratos socioeconmicos diferentes y en sectores distintos (pblico, privado y
privado subvencionado).

III.3.5. VISITA
AL CENTRO NACIONAL

El observador internacional, adems de organizar al equipo de monitores y visitar personalmente al menos tres
escuelas, realiz una visita al centro nacional con el propsito principal de revisar el modo como fueron desarrollados
cada uno de los procesos previstos. El observador internacional se entrevist con el coordinador nacional para
apreciar directamente la estructura disponible y recoger informacin sobre los siguientes aspectos:

s CONSTITUCINEINTEGRANTESDELEQUIPONACIONALRESPONSABLEDELAIMPLEMENTACIN TAREASQUESEREALIZARON
directamente y aquellas que fueron contratadas con terceros;

s COMUNICACINCONLASESCUELASYADECUACINDELMODODEIMPLEMENTACINDELESTUDIOALOSPROCEDIMIENTOS
estndar estipulados en los manuales e instructivos;

s PROCESOSSEGUIDOSPARALASELECCIN CAPACITACINYSUPERVISINDELOSAPLICADORES PARALAIMPRESINDE


los instrumentos y su asignacin a estudiantes y docentes, armado de cajas y distribucin a las escuelas,
incluyendo medidas de seguridad, condencialidad y control de la salida y retorno de los materiales;

s ORGANIZACINPREVISTAPARALACODIlCACINDEPREGUNTASABIERTAS LACORRECCINDELAPRUEBADEESCRITURA
y la captura de datos;

s PRINCIPALESDIlCULTADESYPROBLEMASENCONTRADOS GRADODESATISFACCINCONLAORGANIZACINDEL3%2#%Y
el apoyo recibido desde el LLECE-CT.

108 REPORTE TCNICO


III.3.6. VISITAS DE MONITOREO
EXTERNO A LAS ESCUELAS

Los monitores externos y el propio observador internacional debieron llegar a las escuelas, con al menos 45
minutos de anticipacin al inicio de la aplicacin, y presentarse ante el director en nombre de la UNESCO, con
una carta acreditacin. En seguida, llevaron a cabo las siguientes tareas:

s INFORMARBREVEMENTEALDIRECTORYALAPLICADORACERCADELSENTIDODESUPRESENCIAENLAESCUELA PARA
monitorear el desarrollo de la aplicacin, con el n de identicar si las pruebas fueron aplicadas de
manera similar en todos los pases participantes;

s OBSERVARYREGISTRARLASACTIVIDADESSEGNLOPAUTADOENELFORMULARIORESPECTIVO INCLUYENDOELMODO
como los materiales llegaron a la escuela, condiciones del lugar donde se desarroll la prueba, horarios
de llegada del aplicador, inicio y n de cada parte de las sesiones, asistencia de los estudiantes y
distribucin de las pruebas, presencia de otras personas dentro del aula, instrucciones dadas por el
aplicador y el modo como sigui el guin, comportamiento de los estudiantes durante la prueba e
incidentes importantes, modo como el aplicador recogi y contabiliz los cuadernillos de prueba y
los cuestionarios, modo como se empacaron los materiales y como se hizo el protocolo de cierre de
aplicacin con el director de la escuela;

s COMPLETARUNFORMULARIODEOBSERVACINEXTERNAPORCADAESCUELAVISITADA

CAPTULO 3 LEVANTAMIENTO DE DATOS 109


III.3.7. INFORME
DE SUPERVISIN

A partir de los datos colectados durante la visita al centro nacional y de la informacin recabada en los
formularios de observacin externa, cada observador internacional elabor un reporte nal, siguiendo el formato
denido para este efecto (UNESCO, 2006i). El reporte nal, que tuvo como insumos los formularios de observacin
externa, la pauta completada durante la entrevista con el equipo de la coordinacin nacional y un resumen de las
impresiones logradas sobre las aplicaciones supervisadas, se estructur con los siguientes elementos:

s DESCRIPCINDEACTIVIDADESREALIZADASDURANTELAVISITAALPASYRESUMENDEESTADSTICASGENERALESDELAS
sesiones observadas;

s DESCRIPCINDEHECHOSRELEVANTESYRELACINDESESIONESQUENOPUDIERONINICIARSEENFORMAPUNTUAL
formularios F2 que no fueron llenados previamente a la aplicacin, cartulas de instrumentos que no
fueron llenadas de acuerdo con el formulario F2, sesiones donde el espacio de aplicacin no fue apropiado
o estudiantes que emplearon materiales no autorizados;

s RELACINDESESIONESENLASQUESEMODIlCELORDENDEAPLICACINESTABLECIDO SEDETECTARONERRORESDE
impresin en los instrumentos, se produjeron desvos relevantes respecto del guin indicado, estudiantes
salieron y entraron al aula durante la aplicacin, adultos ajenos al operativo estuvieron presentes,
aplicadores ayudaron a los estudiantes a responder o estudiantes copiaron de sus compaeros;

s ACTITUD DE LOS ESTUDIANTES PARA MANTENERSE EN ORDEN COOPERAR CON LA APLICACIN MOSTRAR INTERS Y
motivacin, procurar su mayor esfuerzo por responder lo mejor posible cada instrumento o mostrar
seales de cansancio.

Las caractersticas del operativo de levantamiento de los datos qued reejado en distintos ndices que aparecen
en las secciones 2, 3 y 4, y en los apndices B y C, del reporte sobre control de calidad (UNESCO, 2007).

110 REPORTE TCNICO


4
CAPTULO

ASEGURAMIENTO
DE
LA CALIDAD
E
ste informe presenta los resultados de los procedimientos de aseguramiento de calidad aplicados durante
el Segundo Estudio Regional Comparativo y Explicativo (SERCE). Estos procedimientos han sido compo-
nentes integrales de las etapas de diseo e implementacin del estudio. Las conclusiones presentadas en
este informe tienen por nalidad aportar a la aceptabilidad y validez de dichos resultados.
El estudio cont con la participacin de 16 pases (Argentina, Brasil, Chile, Colombia, Costa Rica, Cuba, Ecuador,
El Salvador, Guatemala, Mxico, Nicaragua, Panam, Paraguay, Per, Repblica Dominicana y Uruguay) y una enti-
dad nacional (Nuevo Len, Mxico). La evidencia presentada en este trabajo se deriva de una serie de documentos
preparados por la Coordinacin Tcnica del Laboratorio Latinoamericano de Evaluacin de la Calidad de la Educa-
cin (CT-LLECE), las Coordinaciones Nacionales y el aporte de especialistas. El propsito de este documento es el
de resumir y combinar los resultados obtenidos, y dentro de lo posible, relacionarlos con criterios especicados
en el documento Criterios y Procedimientos para el Aseguramiento de la Calidad en el SERCE (ver anexo D).

Este informe abarca las cuatro principales reas de monitoreo de la calidad: muestreo, procedimientos de imple-
mentacin, acopio de datos, y calicacin de los items de respuesta abierta. En conclusin, el documento ofrece
una visin general sobre la calidad de los resultados obtenidos.

IV.1 MUESTREO

Esta seccin del informe cubre la calidad global del muestreo (Criterio II.6) y las tasas de respuesta (Cri-
terio II.7). La poblacin objetivo del SERCE se ha denido de la siguiente manera:

SERCE fue diseado para estudiar el rendimiento escolar de estudiantes de tercer


grado en lenguaje y matemticas y de estudiantes de sexto grado en lengua-
je, matemticas y ciencia. El universo de este estudio incluye a estudiantes de tercer y sexto gra-
do que cursaban el nivel primario de educacin a nes del perodo escolar 2005-2006 (calendario
del hemisferio norte) 2006 (calendario del hemisferio sur). En el caso de establecimientos
educacionales ocialmente reconocidos y que otorgan certicados que habiliten a los nios para
avanzar al siguiente nivel educativo, estos estudiantes tambin deben asistir a clases durante las
fechas de evaluacin. Por su parte, los estudiantes matriculados en instituciones de educacin de
adultos o educacin especial, o en programas de educacin no formales o educacin especial no
forman parte de este universo. En el caso de los estudiantes de tercer grado, no se incluirn las
escuelas que atienden a nios cuya lengua maternal es indgena, ya que se considera que estos
estudiantes an no han adquirido las destrezas lingsticas requeridas para participar en una
evaluacin escrita. Sin embargo, se estima que al concluir la educacin primaria (sexto grado)
la totalidad de los nios debera haber alcanzado el nivel de competencias lingsticas necesario
para completar la evaluacin. Los estudiantes con necesidades especiales que han sido integra-
dos a escuelas regulares tambin forman parte de este universo.

112 REPORTE TCNICO


caso de Mxico no participaron 16 escuelas. De ellas,
TASA DE PARTICIPACIN 15 fueron escuelas perdidas en el estado de Oaxaca,
DE LAS ESCUELAS que viva conictos polticos durante el perodo de ad-
ministracin de la evaluacin.

El Criterio II.7 establece que los pases deben al-


canzar una tasa nal de participacin no menor al 80% TASA DE PARTICIPACIN
de sus escuelas, incluyendo las escuelas de reempla- DE LOS ESTUDIANTES
zo. La Tabla 1.1 del Anexo A muestra la tasa global y
nacional de participacin. Un total de 3.133 escuelas
Adems de cumplir con tasas mnimas de participa-
participaron en el estudio cifra que representa una tasa
cin de sus escuelas, los pases tambin debieron lo-
global de participacin del 97,7%. La totalidad de los
grar una tasa de participacin de estudiantes no menor
pases cumpli la requerida tasa de participacin del
al 80%. Las Tablas 1.2 y 1.3 en el Anexo A muestran las
80%, obteniendo porcentajes que oscilaron entre el
89,7% (Brasil) y el 100% (Costa Rica, Cuba, El Salva- tasa de participacin de estudiantes de tercero y sexto
dor y Guatemala). En particular, el tercer grado estuvo grado, por asignatura.
representado por 3.021 escuelas (tasa de participacin
del 98,4%) y el sexto grado por 2.763 escuelas (tasa de
participacin del 98,5%). La tasa de participacin de los estudiantes de
3 de Primaria fue la siguiente en cada rea:
Un estndar adicional, incluido en el Criterio II.7, es
que el 70% de la tasa de participacin corresponda a
las escuelas originalmente muestreadas. Esta tasa de - Lenguaje: 94.620 estudiantes de tercer gra-
participacin tambin fue alcanzada por todos los pa- do participaron en la evaluacin de lenguaje,
ses. Entre los pases que mostraron las tasas ms bajas cifra que representa una tasa general de par-
de participacin de escuelas originalmente muestrea- ticipacin del 83,8%. Los siguientes pases no
das (es decir, previo al reemplazo) se encuentran: Bra- alcanzaron el requerido porcentaje mnimo de
sil (tasa de participacin del 78,9% con 19 escuelas de participacin: Argentina (77,7%), la Repbli-
reemplazo), Colombia (tasa de participacin del 86,3% ca Dominicana (71,9%), Nicaragua (77,6%),
con 26 escuelas de reemplazo) y Ecuador (tasa de par- Paraguay (79,1%) y Per (78,9%).
ticipacin del 87,11% con 23 escuelas de reemplazo).
- Matemticas: 96.663 estudiantes de tercer
Si bien la tasa de participacin de escuelas fue acep- grado participaron en la evaluacin de mate-
table en todos los pases, 74 de las escuelas original- mticas, cifra que representa una tasa gene-
mente muestreadas no participaron en la evaluacin. ral de participacin del 85,7%. Los siguientes
Este nmero vari signicativamente entre los pases pases no alcanzaron el requerido porcentaje
participantes siendo particularmente alto en tres de mnimo de participacin: la Repblica Domi-
ellos: Brasil, Chile y Mxico. Brasil, no cont con la nicana (79,7%), Nicaragua (79,8%) y Para-
participacin de 18 de estas escuelas (denominadas guay (79,8%).
escuelas perdidas), principalmente debido a su remota
ubicacin o a su bajo nmero de estudiantes. En Chile
esta cifra fue de 15 escuelas. Se reportaron 7 escuelas
con menos de 4 estudiantes y 8 escuelas que no conta-
ban con los cuadernillos requeridos. Finalmente en el

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 113


En 6 de Primaria la tasa de participacin por rea alcanz
las cifras mostradas
a continuacin:

- Lenguaje: 90.471 estudiantes de sexto grado participaron en


la evaluacin de lenguaje, cifra que representa una tasa ge-
neral de participacin del 87,0%. Brasil y Paraguay no alcan-
zaron el requerido porcentaje mnimo de participacin con
78,3% y 79,7%, respectivamente.

- Matemticas: 91.333 estudiantes de sexto grado participaron


en la evaluacin de matemticas, cifra que representa una
tasa general de participacin del 87,8%. La totalidad de los
pases cumpli el porcentaje mnimo (80%) de participacin
de estudiantes.

- Ciencia: Diez pases y 53.979 estudiantes de sexto grado par-


ticiparon en la evaluacin de ciencia, cifra que representa una
tasa general de participacin del 88,4%. La totalidad de los
pases cumpli el porcentaje mnimo (80%) de participacin
de estudiantes.

114 REPORTE TCNICO


IV.2. PROCEDIMIENTOS DE IMPLEMENTACIN
DEL ESTUDIO PRINCIPAL

Esta seccin del informe cubre los procedimientos La siguiente informacin se deriva de dos fuentes
de implementacin asociados con el acopio de datos principales:
38
para la aplicacin denitiva. El monitoreo de calidad
durante la aplicacin denitiva resulta esencial para
garantizar la validez de los resultados (Criterio II.3).
Los procedimientos de implementacin se detallan en
manuales y la informacin proporcionada se ha refor-
zado a travs de reuniones tcnicas y talleres de capa-
citacin.

Esta seccin trata los aspectos externos del monitoreo


de calidad (Criterio II.4) que se realizara en dos nive-
les durante la administracin de la prueba: i) a nivel
internacional a travs de observadores internacionales
responsables de capacitar a los monitores externos y
visitar entre el 5 y el 10% de las administraciones; y
ii) a nivel nacional a travs de monitores externos que
fueran nombrados por los respectivos centros naciona-
les, contratados por la CT-LLECE y capacitados por los
observadores internacionales.

38 El Criterio II.2 establece que la participacin en la prueba piloto


constituye un prerrequisito para participacin en la aplicacin denitiva. La
prueba piloto persigue un doble objetivo. Primero, tiene como nalidad pro-
bar en terreno las caractersticas del instrumento permitiendo de esa forma
incorporar las modicaciones necesarias antes de la aplicacin denitiva y,
segundo, probar la capacidad operacional de los pases participantes en trmi-
nos de seguir pautas especicadas. Los pases que no administren una prueba
piloto no podrn participar en la aplicacin denitiva como se estipula en el
documento Criterios y procedimientos para el aseguramiento de la calidad en
el SERCE. Sin embargo, se dieron algunas excepciones: a) Costa Rica, si bien
implement la prueba piloto, no examin los resultados obtenidos en tanto
que el personal que efectivamente implement la aplicacin denitiva no
fue el mismo que implementara la prueba piloto; b) Brasil no administr una
prueba piloto como pas, basndose en la prueba piloto realizada en el estado
de Gois para este n (es decir, Gois habra participado como una entidad
separada, pero decidi retirarse del estudio antes de la aplicacin denitiva);
y c) Ecuador no implement la prueba piloto.

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 115


como muy bueno o bueno en todos los pases, con
APLICADORES
la excepcin de Costa Rica que fue catalogada como
A objeto de garantizar la estandardizacin de la regular. Sin embargo, en aproximadamente el 16% de
aplicacin en las diferentes aulas y pases, los adminis- las sesiones observadas se identicaron divergencias
tradores de las pruebas se responsabilizaron de adhe- respecto de las directrices. stas incluyeron: i) altera-
rirse estrictamente a procedimientos internacionales. cin del texto introductorio, en ocasiones modicado a
Como forma de garantizar que los administradores de travs de parafraseo, la omisin de pasajes o interpre-
las pruebas fueran conscientes de sus tareas y respon- taciones personales (problema en la mayora de los pa-
sabilidades, se elabor un Manual del Aplicador y se ses); ii) deciente manejo de los tiempos, incluyendo
organizaron varios talleres de capacitacin. El informe casos de estudiantes que no fueron informados sobre la
evacuado por observadores internacionales y monitores cantidad de tiempo disponible para realizar la prueba o
externos revela que en ms del 90% de las sesiones el tiempo restante para concluirla (Brasil, Chile, Ecua-
observadas los administradores de las pruebas demos- dor y Uruguay); iii) el aporte de ejemplos que no apa-
traron poseer un nivel bueno o aceptable de conoci- recan descritos en el manual (Repblica Dominicana)
miento de los procedimientos, y en cerca del 95% de y v) dicultad para entender los procedimientos (Bra-
las sesiones, un nivel bueno o aceptable de manejo de sil). Adicionalmente, la falta de instrucciones claras al
los formularios y materiales de la prueba. inicio de la evaluacin motiv que muchos estudiantes
formularan preguntas, provocando interrupciones du-
En unos pocos casos se detectaron problemas durante rante la prueba. Con relacin al manejo de otros ma-
la aplicacin de la prueba, principalmente relacionados teriales de la prueba, los observadores informaron que,
con la falta de capacitacin a los capacitadores para en lneas generales, los aplicadores realizaron un buen
desarrollar los procedimientos. Lo anterior se detect control de todos los materiales, reportndose excepcio-
especcamente en Ecuador, aunque tambin se obser- nes en slo el 5% de las sesiones. Por ejemplo, en el
v en menor grado en Mxico y Per. En acuerdo con los informe nal elaborado por Costa Rica se destaca que
coordinadores nacionales, la capacitacin de adminis- algunos aplicadores parecan no comprender los proce-
tradores de pruebas se ci a directrices proporciona- dimientos, hecho que provoc que se alejaran de los
das en el Manual del Coordinador Nacional, documento procedimientos establecidos. En algunos casos, incluso
que recomendaba un mnimo de seis horas de capaci- la distribucin de cuadernillos de prueba se realiz en
tacin, excluyendo el tiempo destinado a organizar y forma distinta a la descrita en los manuales.
distribuir el material. No obstante, algunos pases ma-
nifestaron que el tiempo asignado era insuciente para La frecuencia con que se dieron estas irregularidades
capacitar a los administradores en todos los aspectos constituye otro componente de importancia. Tanto los
del estudio. Esto se mencion especcamente en los observadores como los monitores informaron que di-
informes nales (aplicacin denitiva) elaborados por chas irregularidades ocurrieron ocasionalmente en 13
Chile, Ecuador y Panam. Algunos pases tomaron la pases pero frecuentemente en Colombia, Costa Rica
decisin de extender la capacitacin algunas horas o y Repblica Dominicana. Algunos ejemplos de estas
bien dividirla en dos secciones. irregularidades detectadas en el recinto de la prueba
incluyen la constante entrada y salida de estudiantes,
Los monitores externos y observadores internacionales la presencia de otros adultos y ayuda adicional pres-
tambin evaluaron el grado de precisin con que, en su tada a algunos estudiantes. El Manual del Aplicador
criterio, los aplicadores se cieron a los procedimien- especica claramente que durante la evaluacin los es-
tos contenidos en el manual. En trminos generales, tudiantes podrn entrar o salir del recinto de la prueba
los monitores y observadores juzgaron este aspecto slo en casos de emergencia. A pesar de esta recomen-

116 REPORTE TCNICO


dacin los observadores y monitores informaron que en Asimismo, los monitores observaron que el tiempo asig-
el 17% de las sesiones se detect la entrada y salida de nado a completar la prueba exceda el tiempo efectiva-
estudiantes motivada principalmente por la necesidad mente utilizado por la mayora de los estudiantes. Por
de utilizar los servicios higinicos (motivo comn en consiguiente, la mayora de los problemas de compor-
prcticamente todos los pases), enfermedad, (Argen- tamiento solan presentarse al nal de la sesin cuando
tina, Colombia, Cuba, Ecuador, Nuevo Len, Paraguay se solicitaba a todos los estudiantes permanecer en el
y Repblica Dominicana) o atraso por parte de los aula hasta el nal de la evaluacin. Otros problemas
estudiantes (Argentina, Chile, Colombia, Costa Rica, relacionados con el comportamiento tuvieron su origen
Cuba, Nuevo Len, Paraguay y Uruguay). Asimismo, los en la falta de experiencia demostrada por los aplica-
aplicadores recibieron instrucciones de no permitir la
dores en el manejo de grandes grupos de estudiantes.
presencia de otros adultos durante la sesin de prueba
Los monitores informaron que en el 7% de las sesiones
hecho que, en trminos generales, ocurri en el 10%
observadas los aplicadores mostraron escaso control
de las sesiones observadas, aunque en porcentajes bas-
de grupo, adems de detectar un problema puntual en
tante ms altos en Argentina (27%), Colombia (31%),
Brasil, Chile, Colombia y Ecuador. Sin embargo, cuando
Costa Rica (21%), Repblica Dominicana (25%), Mxi-
se pregunt a las Coordinaciones Nacionales en qu
co (27%) y Panam (23%). Finalmente, las directrices
medida estaban los aplicadores capacitados para cum-
tambin instruan a los aplicadores en el sentido de
plir con el criterio habilidad para manejar un gran
no prestar asistencia a los estudiantes, a pesar de lo
cual este hecho fue detectado en el 12% de las se- nmero de estudiantes, 10 pases reportaron que al
siones observadas. En algunos pases, sin embargo, se menos un 80% de sus aplicadores estaban en condicio-
constataron porcentajes bastante ms altos: Colombia nes de hacerlo. Argentina, Ecuador, Guatemala, Mxico
(38%); Costa Rica (25%); Guatemala (33%); y Panam y Nicaragua, por su parte, reportaron que entre el 30
(26%). Especcamente, los monitores destacan que, y 80% de sus aplicadores cumplan este criterio. Adi-
por lo general, la asistencia prestada por los aplicado- cionalmente, los monitores informaron haber detecta-
res consista en aclarar instrucciones ambiguas o el sig- do alguna evidencia de comunicacin/intercambio de
nicado de ciertas palabras. En Colombia se observaron informacin entre estudiantes en aproximadamente el
algunos casos de asistencia considerados de mayor gra- 12% de las sesiones.
39
vedad motivando una rigurosa investigacin .

Durante la evaluacin tambin se monitore el compor-


tamiento de los estudiantes. En general, se concluy
que los estudiantes se mostraron dispuestos a coope-
rar. En el 75% de las sesiones observadas, los monito-
res destacaron que los estudiantes se comportaban en
forma ordenada y cooperaban con la evaluacin.

39 Estos tres casos fueron los siguientes: i) La Escuela 044 donde


un administrador le explic a un estudiante cmo realizar ciertas operaciones
de matemticas y en una segunda ocasin, cuando un administrador propor-
cionara a los estudiantes un sinnimo y parafraseara la pregunta con el n de
asegurar que fuera comprendida; ii) La Escuela 045 donde un administrador
proporcion asistencia para responder una pregunta que los estudiantes no
entendan y al nalizar la evaluacin, el coordinador del grupo se sent junto
a cada estudiante que no haba nalizado la prueba con el n de ayudar a
responder las preguntas no completadas; y iii) La Escuela 037 donde un ad-
ministrador respondi las preguntas de los estudiantes mediante el uso de un
sinnimo.

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 117


sesiones observadas no comenzaron a la hora indicada,
ADHESIN
en tanto que este porcentaje ascendi a ms del 40%
A LOS PROCEDIMIENTOS en Colombia, Repblica Dominicana, Costa Rica y Pa-
raguay. Las causas de atraso ms comunes informadas
fueron las siguientes: problemas organizativos (Argen-
En general, todos los pases participantes se rigie-
tina, Chile, Costa Rica, Mxico, Nuevo Len, Paraguay,
ron por el calendario de actividades preestablecido. De
Per, Repblica Dominicana y Uruguay); ubicacin geo-
768 sesiones observadas, los monitores destacaron que
grca de las escuelas (Brasil y Ecuador); atraso por
en menos del 3% los instrumentos no estaban siendo
parte de los estudiantes y/o aplicadores (Argentina,
administrados en el orden preestablecido y en el 16%
Chile, Colombia, Costa Rica, Cuba, Mxico, Paraguay,
se detectaron divergencias respecto de las directrices.
Per, Repblica Dominicana y Uruguay); temas relacio-
En general, los estudiantes no portaban material no
nados con el comportamiento de estudiantes (Chile,
aprobado y en las pocas oportunidades que ello ocu-
Colombia y Mxico).
rri, ste consista en tablas de multiplicacin (una
sesin en Argentina) y un telfono celular (Brasil).
El Manual del Aplicador establece que los estudiantes
deben permanecer en el aula hasta el nal de la sesin.
Otra fuente de aseguramiento de la calidad de vital
Las observaciones realizadas revelan que, en la mayora
importancia es el Formulario de Asistencia de Estudian-
de las sesiones, el tiempo asignado para completar la
tes (F2), un formulario relacionado con actividades de
prueba fue muy adecuado y en slo el 4% de ellas,
muestreo que garantiza que cada estudiante muestrea-
algunos estudiantes no tuvieron el tiempo necesario
do reciba el instrumento asignado. Adicionalmente se
para nalizar la prueba. En general, no se observaron
utiliza para registrar exclusiones, necesidades especia-
estudiantes afectados por fatiga.
les, y sucesos imprevistos que han tenido lugar durante
la sesin de evaluacin. Parte de su contenido se re-
produce en la cubierta de los instrumentos y es particu-
larmente importante para asegurar que el muestreo se ASPECTOS
implemente adecuadamente en el terreno. Este formu- ESCOLARES
lario debe ser completado por la Coordinacin Nacional
o por el aplicador antes del inicio de la sesin. Segn La organizacin, preparacin y entorno de las es-
los informes, en la mayora de las sesiones estos for- cuelas son esenciales para administrar una prueba en
mularios fueron llenados de acuerdo a esta instruccin. forma exitosa. El observador internacional y los mo-
En solamente el 12% de las sesiones observadas, el nitores externos informaron que las escuelas se en-
Formulario F2 no haba sido completado al momento contraban bastante bien preparadas para la tarea de
de iniciar la evaluacin (si bien en Costa Rica el por- implementar la evaluacin. En menos del 3% de las
centaje asciende al 61% y en Colombia al 26%) aunque escuelas se detect alguna indicacin de insatisfaccin
la cubierta haba sido correctamente completada en el asociada con el estudio o con las tareas involucradas
76% de las sesiones observadas. que pudiesen amenazar el carcter condencial de los
materiales. Por otra parte, las observaciones tambin
Otro aspecto integral de la estandardizacin es la pun- dan cuenta que el 7% de las escuelas no fueron infor-
tualidad con que se llevan acabo las actividades pla- madas de la evaluacin y que el 4% de ellas estaban
nicadas, ya que sta incide importantemente en lo conscientes que seran monitoreadas.
que el estudiante es capaz de hacer y tiene, a su vez,
el potencial de alterar la organizacin de la sesin de
evaluacin dentro del horario escolar. El 26% de las

118 REPORTE TCNICO


las entidades nacionales, movilizar la cooperacin na-
INSTRUMENTOS
cional y coordinar la implementacin del estudio. Adi-
El hecho de contar con instrumentos de alta cali- cionalmente, el personal nacional deber contar con
dad, libres de error y bien impresos es una condicin experiencia en este campo y tener la autonoma nece-
esencial para una prueba exitosa. Sin embargo, esto saria para subcontratar de ser ello necesario. Espec-
requiere la continua cooperacin de todas las personas camente, la Coordinacin Nacional es responsable de
involucradas. A pesar de todos los esfuerzos realizados, proporcionar informacin sobre cobertura de la mues-
los instrumentos suelen presentar errores de traduc- tra, dirigir el procesamiento de datos, el desarrollo y
cin, diseo, calidad de los grcos o impresin. En el anlisis de datos, organizar la implementacin, la ela-
SERCE, se documentaron errores tanto en los informes boracin de informes nacionales y la organizacin de
nales (aplicacin denitiva) como en los informes de actividades de difusin. En general, los monitores con-
observacin. La identicacin de estos errores asegura sideraron la estructura de las Coordinaciones Naciona-
que los resultados tendrn el manejo adecuado. Segn les de todos los pases como buena o muy buena.
informes de observadores nacionales y monitores ex-
ternos, se detectaron errores en los instrumentos en Los factores asociados con el entorno tambin pueden
menos del 3% de las sesiones. En aproximadamente tener un impacto positivo en el desempeo afectando
la mitad de los pases, estos errores fueron descritos el nivel de concentracin y esfuerzo que el estudiante
como aislados. Tambin se detectaron problemas con debe destinar a la prueba. Durante la implementacin
etiquetado y empaque de los instrumentos en Colombia del SERCE, los monitores y observadores concluyeron
(un nmero bastante alto de problemas que afectaron que, en general, el espacio, la iluminacin, el entorno
sesiones completas). Otros ejemplos incluyen instru- y la temperatura eran apropiados para administrar el
mentos en blanco (Argentina y Ecuador), una cubierta examen.
que contena el instrumento equivocado (Chile), pgi-
nas duplicadas (Costa Rica y Nuevo Len), erratas dis-
tribuidas junto con los instrumentos (Cuba) y errores s%SPACIO EN UN  DE LAS SESIONES OBSERVADAS
en la documentacin de un estudiante (Panam). (27% en el caso de la Repblica Dominicana)
se constataron situaciones respecto del espa-
A pesar de haber proporcionado directrices para la im- cio disponible para el nmero de estudiantes
presin y organizacin de los cuadernillos, los obser- participantes, algo distantes de lo ideal.
vadores internacionales informaron que en Ecuador y
Paraguay los cuadernillos, por el hecho de estar impre- s)LUMINACINENUNDELASSESIONESOBSERVADAS
sos en papel demasiado delgado y dbilmente engram- (30% en el caso de Repblica Dominicana y
pados, no cumplan con dichos estndares. 26% en el caso de Guatemala) los monitores
y observadores informaron problemas de ilu-
minacin.
OTROS
ASPECTOS s%NTORNOENUNDELASSESIONESOBSERVADASMS
del 30% en los casos de Colombia, Mxico, Re-
La estructura y capacidad de las Coordinaciones pblica Dominicana y Uruguay), los observa-
Nacionales (Criterio II.1) desempean una importante dores informaron que el entorno de la prueba
funcin en el xito del estudio. El personal nacional es no reuna las condiciones de calma y silencio
responsable de seguir procedimientos estandardizados, necesarias. El problema ms comn reportado
mantener vnculos de comunicacin con la CT-LLECE y por los pases era el ruido procedente de los

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 119


patios durante los perodos de recreo.
s4EMPERATURAENUNDELASSESIONESOBSERVADAS En trminos generales, la evidencia proporcionada por
(ms del 40% en los casos de Panam y Rep- las Coordinaciones Nacionales, los observadores inter-
blica Dominicana) se constataron temperatu- nacionales y los monitores externos, seala que en la
ras algo distantes de lo ideal, principalmente mayora de los pases la implementacin del estudio
por el hecho de ser muy altas. fue exitosa. La labor de los monitores externos mues-
tra que los problemas se concentraron en unos pocos
Entre otros sucesos inesperados que podran haber in- pases, en particular, Colombia, Costa Rica y Repblica
terferido con la implementacin de la aplicacin de- Dominicana. Si bien en este captulo se sealan diver-
nitiva se pueden mencionar los siguientes: i) elec- gencias o problemas que posteriormente se sintetizan
ciones en Nuevo Len, que segn los coordinadores en la Seccin II de los resmenes internacionales y
nacionales interrieron con el proceso de seleccin de nacionales presentados en los Anexos B y C, respec-
aplicadores ya que a la mayora de ellos se les solicit tivamente, es muy difcil estimar en qu medida estas
trabajar en actividades relacionadas con dichas eleccio- observaciones pueden afectar la calidad de los resulta-
nes; ii) las lluvias en El Salvador provocaron problemas dos del estudio. En general, la mayora de los proble-
en el desplazamiento de vehculos hecho que afect la mas reportados en esta seccin guardan relacin con
distribucin de documentos; iii) huelgas en Argentina aspectos organizativos y el grado de preparacin de los
y Mxico previo a la administracin de la evaluacin;
administradores de pruebas en relacin con temas de
y iv) inuencia de otras evaluaciones nacionales en
disciplina y puntualidad. Los informes de los monitores
Mxico y Nuevo Len que trajo por resultado diculta-
externos pueden solicitarse a la CT-LLECE.
des logsticas adicionales.

Futuros estudios deberan contemplar una capacita-


cin ms profunda de los aplicadores, a pesar que en la
COMENTARIOS GENERALES SOBRE opinin de los pases el Manual del Aplicador es ade-
cuado. Es bastante probable que una capacitacin ms
LA IMPLEMENTACIN
extensa lleve a una minimizacin de los problemas de
Las conclusiones presentadas en esta seccin del implementacin, en particular aquellos asociados con
informe deben ser interpretadas en asociacin con divergencias de las pautas o de los procedimientos es-
otros dos documentos: i) el Informe de la Aplicacin tandardizados.
Denitiva, preparado por las Coordinaciones Naciona-
les; y ii) el Reporte Final del Observador Internacional, IV.3. ACOPIO
preparado por dicho profesional. En estos documentos DE DATOS
se presenta informacin cualitativa detallada sobre la
aplicacin de las pruebas. Para los propsitos de este PRESENTACIN DE DATOS A LA CT-LLECE
captulo, los informes de la aplicacin denitiva pre-
parados por las Coordinaciones Nacionales no fueron de El Criterio II.5 est referido al grado de cumpli-
gran utilidad ya que en ellos se destaca una marcada miento observado por los pases participantes con el
tendencia hacia privilegiar lo positivo, caracterizando calendario del estudio, en particular respecto de la im-
las actividades realizadas como perfectamente coordi- plementacin de la aplicacin denitiva. Las demoras
nadas, sin mayores problemas y estrictamente sujetas en la presentacin de documentos, informes y bases
a las directrices. Sin embargo, dentro de lo posible, se de datos, provoca demoras en otros aspectos del estu-
incluyeron en este documento con el objeto de propor- dio, tales como vericaciones, anlisis e interpretacin
cionar una mejor comprensin de los procedimientos. de los resultados. Por otra parte, las demoras tambin

120 REPORTE TCNICO


aumentan el riesgo de cometer errores producto de ver- de captura de datos (13 y 14 de julio de 2006) en Bo-
siones mltiples o incompletas. La puntualidad en la got, Colombia para los pases participantes que cont
presentacin de bases de datos a la CT-LLECE para su con la asistencia de la totalidad de los pases con la
revisin y procesamiento es particularmente importan- excepcin de Costa Rica y Nicaragua. En consecuencia,
te, habida cuenta que numerosos aspectos de los an- estos pases registraron demoras en la presentacin de
lisis y elaboracin de informes requieren el uso de una las bases de datos la CT-LLECE, entidad responsable de
base de datos combinada (por ej., el escalamiento). su procesamiento.

Con relacin a la base de datos, se estableci un pero- Se solicit a los pases participantes que en sus infor-
do de 12 semanas dentro del cual los pases deberan mes nales (aplicacin denitiva) juzgaran la utilidad
ingresar y vericar los datos obtenidos en la aplicacin e idoneidad de los manuales y software de captura de
denitiva. Durante este tiempo los items de respuesta datos. En general, los pases se mostraron satisfechos
abierta se corregiran y enviaran a la CT-LLECE para su con el manual. De los 16 pases para los cuales se dis-
procesamiento. Los pases se dividieron en tres grupos pone de informacin, cinco catalogaron el manual de
de acuerdo a la fecha de presentacin de datos: (i) captura de datos como muy bueno; nueve como bue-
pases contemplados dentro del horizonte de 12 sema- no y dos como regular. La mayora de las dicultades
nas: Brasil, Chile, Panam, Paraguay, Per, Uruguay y guardaban relacin con aspectos de capacitacin, in-
Colombia; (ii) pases con hasta 12 semanas de demora: consistencias entre el manual y el software y problemas
Argentina, Costa Rica, Ecuador, El Salvador, Guatema- originados por la existencia de versiones mltiples del
la, Mxico y Nuevo Len; y (iii) pases con ms de 12 software.
semanas de demora: Costa Rica, Repblica Dominicana
y Nicaragua. La utilidad e idoneidad del software de captura de da-
tos fue catalogada como muy buena por cuatro pases,
CAPTURA DE DATOS Y ESTRUCTURA como buena por seis pases, como regular por cuatro
pases y como deciente por un pas. La mayora de los
DE LA BASE DE DATOS problemas estaban asociados a versiones mltiples del
software, prdida de datos, la falta de correspondencia
La precisin del proceso de captura de datos afecta
entre el software y las categoras utilizadas en los ins-
la validez y conabilidad de los resultados. Por consi-
trumentos nacionales y las fechas de los talleres de ca-
guiente, es responsabilidad de las Coordinaciones Na-
pacitacin algunos de los cuales se realizaron despus
cionales producir bases de datos limpias, precisas y co-
que algunos pases ya haban comenzado el proceso.
herentes con las especicaciones proporcionadas por la
Otros problemas reportados fueron la disponibilidad de
CT-LLECE (Criterio II.9). Los aspectos relacionados con
redes, la consistencia entre la informacin derivada de
la base de datos y la captura de datos se consideran
distintas fuentes, la baja velocidad de procesamiento y
esenciales para lograr un alto nivel de calidad. Con la
la falta de asistencia tcnica dentro de los pases.
nalidad de ayudar a los pases participantes y garanti-
zar la calidad de sus datos nales, se elabor el Manual
Independientemente de estos comentarios, en trmi-
de Captura de Datos junto con un programa compu-
nos generales el proceso de captura de datos fue con-
tacional (software) de captura de datos. Este manual
siderado positivo. Mientras que un pas inform que,
describe dicho software y proporciona directrices sobre
al momento de redactar sus informes, el proceso de
su instalacin, junto con ofrecer una serie de informes
captura de datos an no se haba completado, cinco
sobre los instrumentos (cuadernillos, cuestionario del
pases catalogaron el proceso como muy bueno, siete
estudiante y cuestionario familiar), e implementa una
como bueno y dos como regular.
serie de vericaciones de validez. Se organiz un Taller

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 121


En un intento por vericar la precisin del proceso de captura de da-
tos, se realiz una doble captura de datos en un porcentaje de los cua-
dernillos; una realizada por cada pas y una realizada por la CT-LLECE.
El nmero de discrepancias entre las capturas se muestra por pas en la
Figura 3.2, pudiendo constatarse que existe una gran variabilidad entre
ellos. El nmero de discrepancias fue particularmente alto en Repblica
Dominicana (163) y Ecuador (245).

Figura 3.2.Nmero de diferencias entre la captura de datos


nacionales y la captura de datos internacionales

300

250
Nmero de diferencias

200

150

100

30

0
ana
la

ica

na
y
or

gua


bia

sil

r
o
en

y
le
a

ado
gua

Per
gua
ma

xic
Cub

vad

Chi

nti
Bra

nic
R
a
om

ara
oL

Pan
M
ate

Ecu
Uru

ta
a

rge
Sal

mi
Par
Col

Nic

Cos
ev
Gu

Do
El

Nu

lica
b
Rep

122 REPORTE TCNICO


NATURALEZA CONFIDENCIAL IV.4. CALIFICACIN
DE LOS INSTRUMENTOS Y CODIFICACIN
Las Coordinaciones Nacionales son responsables de Esta seccin del informe se centra en la calidad
garantizar la condencialidad de todos los materiales global de las calicaciones de items de respuesta
e instrumentos (Criterio II.10) sobre los cuales se re- abierta, segn se describen en el Criterio II.8. Estos
portara en el informe nal (aplicacin denitiva). Adi- procedimientos se detallan en el documento Manual
cionalmente, las Coordinaciones Nacionales asumen la de Codicacin de Preguntas de Respuesta Abierta. En
responsabilidad de garantizar la condencialidad de los forma adicional, los pases participaron en talleres de
resultados preliminares (Criterio II.11). capacitacin donde los representantes nacionales re-
ciban tanto la formacin como los materiales que les
Con este n, los pases suscribieron un acuerdo de con- permitiran replicar el proceso de capacitacin en sus
dencialidad que fue rmado por todas las personas respectivos pases.
que tuvieron contacto directo o indirecto con materia-
les de ndole condencial, en particular, con los ins- Los instrumentos del SERCE contemplan dos tipos de
trumentos. En algunos pases, los procedimientos para items: items de opcin mltiple e items de respues-
garantizar condencialidad eran idnticos a los utili- ta abierta. Los items de opcin mltiple se reeren
zados en sus propias evaluaciones nacionales, lo cual a objetos precisos, son codicados en forma objetiva
constituye un hecho positivo. Asimismo, los pases y son dicotmicos (es decir, slo existen dos catego-
incluyeron procedimientos adicionales sobre materias ras de respuesta: correcta o incorrecta). Se presentan
de seguridad y restriccin del acceso. No se detect mediante un enunciado seguido de cuatro alternativas
evidencia alguna de amenazas que pudieran arriesgar donde slo una es la correcta. Para responder a los
el carcter condencial de los documentos. items de opcin mltiple, los estudiantes deben se-
leccionar la alternativa correcta, siendo la respuesta
Por su parte, los observadores internacionales y moni- correcta el principal punto de concentracin. Por otra
tores externos informaron que dichas medidas podan parte, los items de respuesta abierta requieren que el
calicarse como muy buenas o buenas en prctica- estudiante construya su propia respuesta, son codi-
mente todos los pases. Hubo consenso entre los moni- cados en forma subjetiva (es decir, implican el uso de
tores en el sentido que las Coordinaciones Nacionales criterio) y son politmicos (ms de una categora de
y los aplicadores estaban muy conscientes de la nece- respuesta: correcta, parcialmente correcta o incorrec-
sidad de proteger el carcter condencial de los ma- ta). Estos items se presentan mediante un enunciado
teriales y que haban tomado las medidas necesarias. que describe la pregunta, proporcionan un espacio para
Los procedimientos implementados en Colombia fueron que el estudiante resuelva el problema y un segundo
catalogados como regular y se recomend que los ma- espacio para que el estudiante marque su respuesta
teriales fueran sellados ya que los propios administra- nal. Al responder la pregunta el estudiante debe con-
dores son los encargados de transportar el material a centrarse tanto en la respuesta correcta (crdito) como
la escuela. En todos los dems aspectos las medidas de en el proceso que lo llev a resolver el problema.
proteccin de la condencialidad adoptadas por este
pas se consideraron apropiadas. Estos dos aspectoscrdito y procesose capturaron
utilizando un sistema de codicacin de doble dgito.
El primer dgito representa el crdito asignado a la res-
puesta (por ej., 0 = sin crdito; 1 = crdito parcial; 2
= crdito total en items de respuesta corta, y 0 a 4 en

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 123


items de respuesta extensa). En aquellos casos que la del informa describe los items de respuesta abierta de
respuesta recibiera crdito (por ejemplo, 1 2 en items todos los pases.
de respuesta corta) el crdito va acompaado de un
segundo dgito que representa el tipo de estrategia uti- La tasa de consistencia del 85% entre la calicacin na-
lizado para resolver el problema. Por ejemplo, el cdigo cional e internacional de los items de respuesta abierta
21 asignado a un tem de respuesta corta signica que fue utilizada como primer criterio (Criterio II.8). El uso
el estudiante obtuvo crdito total en este tem (2) y de tablas de mltiple entrada entre las calicaciones
utiliz una estrategia determinada (1) para resolverlo. nacionales e internacionales, demostr que este crite-
rio global fue superado por todos los items. La Tabla
Por lo tanto, en el SERCE los items de respuesta abierta 4.1 en el Anexo A muestra la tasa de consistencia de
agregan subjetividad al proceso de calicacin, entre- items de Matemtica en tercer y sexto grado y de items
gando al monitoreo la importante funcin de garanti- de Ciencias en sexto grado. El nivel ms bajo de corres-
zar la conabilidad del proceso entre los pases parti- pondencia se detect en el tem DC6B6IT15 y fue del
cipantes. El SERCE, adems de implementar un proceso 89,3%. Todos los items de Matemtica mostraron tasas
de validacin a travs de la recalicacin internacional de consistencia superiores al 96%.
de los cuadernillos, ha desarrollado manuales detalla-
dos y ofrecido capacitacin a los pases. La CT-LLECE Igualmente importante fue examinar la direccin que
muestre un conjunto de cuadernillos (es decir, entre seguan las diferencias entre estos dos calicadores
5 y 10 respuestas) que los pases presentaron le envia- que permitieran deducir si las calicaciones naciona-
les eran menos o ms rigurosas que las calicaciones
ron. Estos items fueron recalicados por calicadores
internacionales. Ambos porcentajes se muestran en las
internacionales con dominio del lenguaje de la evalua-
dos ltimas columnas de la Tabla 4.1. En general, las
cin, conocedores de temas educativos y capacitados
diferencias presentaban una distribucin aleatoria que
en el uso de las mismas directrices utilizadas en el es-
no sugera una direccin determinada.
tudio. Posteriormente, este conjunto internacional de
calicaciones se compar al conjunto nacional de cali-
Un procedimiento formal denominado ndice Kappa de
caciones. Para cada tem, el nivel de correspondencia
Cohen, cuantica la conabilidad entre calicadores
entre estos dos conjuntos de calicaciones representa 40
nacionales e internacionales para items de respuesta
el ndice de conabilidad entre calicadores.
abierta. El ndice Kappa proporciona el nivel al cual dos
jueces, el calicador nacional y el calicador interna-
El SERCE incluye 21 items de respuesta abierta distri-
cional, concuerdan respecto de clasicar los items en
buidos en los dos grados y en las diferentes asigna-
dos categoras mutuamente excluyentes (en este caso,
turas: 6 items de Matemtica de tercer grado; 9 items
las categoras de respuesta).
de Matemtica de sexto grado; y 6 items de Ciencias de
sexto grado. En general, el proceso cont con la aproba-
cin de los participantes (todos los pases catalogaron
los procesos y manuales como buenos o muy buenos)
en tanto que algunos pases adems sealaron que los
manuales eran precisos, claros y detallados. Algunas
dicultades se produjeron cuando las respuestas de los
estudiantes parecan no calzar con ninguna de las ca-
tegoras de respuesta. Estos casos fueron vericados
por la CT-LLECE o dejados en manos de expertos que 40 El ndice Kappa de Cohen oscila en un rango de 0,000 a 1,000,
donde los valores ms altos son indicativos de una mayor conabilidad. En t-
se responsabilizaron por su calicacin. Esta seccin rminos generales, un valor Kappa superior a .7000 se considera satisfactorio.

124 REPORTE TCNICO


La Figura 4.1 muestra el resultado de los seis items de Matemtica
correspondientes a tercer grado, a nivel internacional y por pas (los
datos han sido incluidos en la Tabla 4.2, Anexo A). El eje y del grco
identica el umbral 0,700 como el nivel aceptable de conabilidad.
Cada smbolo representa ya bien un pas o un valor global. El grco
no identica pases individuales ya que su propsito es mostrar va-
riabilidad o posibles patrones. La gura muestra que, si bien existe
variabilidad entre los ndices Kappa, todos los valores caen dentro
del rango aceptablesuperior a 0,700. En trminos de los diversos
items, el tem DM3B6IT11 mostr la menor variabilidad en tanto que
en el tem DM3B2IT11 se apreci la mayor variabilidad. En la Repblica
Dominicana este conjunto de ndices Kappa uctu entre 0,733 (tem
DM3B2IT11) y 1,000 (todos los dems items).

Figura 4.1. ndice Kappa de conabilidad entre calicado-


res para items de matemtica
de tercer grado

1.000

0.900

0.800

0.700

0.600

0.500

0.400

0.300

0.200

0.100

0.000
DM3B2IT11 DM3B2IT12 DM3B4IT11 DM3B4IT12 DM3B6IT11 DM3B6IT12
o.
Item
Item - Matemtica
- Mathematics 3 3
G rade

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 125


En forma similar, la Figura 4.2 muestra los resultados de nueve items
de Matemtica de sexto grado, a nivel internacional y por pas. En
comparacin con los resultados observados para los tems de Matem-
tica de tercer grado, los resultados del tem de Matemtica de sexto
grado mostraron mayores niveles de variabilidad entre los pases. En
tres casos, los ndices Kappa fueron inferiores al umbral de 0,700: i)
DM6B2IT16 en Nuevo Len (ndice Kappa 0,566), ii) DM6B4IT16 en
Per (ndice Kappa 0,618), y iii) DM6B4IT14 en Costa Rica (ndice
Kappa 0,659). Estos casos deben ser cuidadosamente analizados con el
objeto de, posiblemente, recomendar su eliminacin.

Figura 4.2. ndice Kappa de conabilidad entre


calicadores para items de matemtica de sexto grado

1.000

0.900

0.800

0.700

0.600

0.500

0.400

0.300

0.200

0.100

0.000
DM6B2IT14 DM6B2IT15 DM6B2IT16 DM6B4IT14 DM6B4IT15 DM6B4IT16 DM6B6IT14 DM6B6IT15 DM6B6IT16
Item
Ite m - -Ma th e m a tics G ra6do.
Matemtica e 6

126 REPORTE TCNICO


La Figura 4.3 muestra los ndices Kappa para items de Ciencias de sexto
grado. Estos resultados no son tan positivos como los correspondientes
a items de Matemtica de tercer y sexto grado (Figuras 4.1 y 4.2). La
variacin de estos items de Ciencias es bastante mayor y, de hecho,
en algunos casos los ndices Kappa se sitan a niveles inferiores al
aceptable. Sin embargo, un examen ms riguroso de esta gura y de la
Tabla 4.2 revela que la mayor variacin mostrada por estos items tuvo
su origen en los niveles no aceptables de ndices Kappa obtenidos en
Repblica Dominicana. Los ndices Kappa de los dems pases se sitan
en niveles aceptables de conabilidad. En consecuencia, estos seis
items de ciencia de Repblica Dominicana deben ser cuidadosamente
analizados con el objeto de, posiblemente, recomendar su elimina-
cin. Dado que este problema afecta a los seis items, los resultados
obtenidos en Repblica Dominicana en esta asignatura no debieran ser
publicados.

Figura 4.3. ndice Kappa de conabilidad entre


calicadores para items de ciencia de sexto grado

1.000

0.900

0.800

0.700

0.600

0.500

0.400

0.300

0.200

0.100

0.000
DC6.B1.IT 15 DC6.B2.IT 15 DC6.B3.IT 15 DC6.B4.IT 15 DC6.B5.IT 15 DC6.B6.IT 15

Item cie n ce G ra6do.e 6


Ite m --SCiencia

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 127


Otra forma de evaluar conabilidad consiste en realizar comparaciones
entre los calicadores de un pas. La Figura 4.4. muestra ndices Ka-
ppa por pas participante. En trminos generales todos los pases (con
excepcin de los seis items de ciencia de sexto grado en Repblica
Dominicana) excedieron el umbral de 0,700 en todas las asignaturas y
grados. Los problemas asociados con estos items se mencionaron con
anterioridad (vase la Figura 4.3).

Figura 4.4. ndice Kappa de conabilidad entre


calicadores entre los pases

Grad e 3 3
Matemtica Math Matemtica
Grad 6
e 6 Math Ciencias
Gard e6 6 Science

1.000
0.900
0.800
0.700
ndice Kappa

0.600
0.500
0.400
0.300
0.200
0.100
0.000
y
gua
a

la


bia
le

ana

ay


or
r
ina

gua
sil

n
a
Ric

ado

am

Per
ma

xic
Cub

Le
Chi

vad

agu
Bra

om

ara
ent

nic

Pan

Uru
M
ate
Ecu
ta

Sal

Par
evo
Col

Nic
Arg

Cos

mi

Gu
Do

El

Nu

128 REPORTE TCNICO


IV.5. NDICE DE CUMPLIMIENTO
DE LAS PAUTAS DE CALIDAD DEL SERCE.

En la presente seccin se presenta el ICUPAC (ndice de Cumplimiento de las Pautas de Calidad del SERCE).

Este ndice es una medida resumen del grado en que los pases siguieron las pautas de calidad en la aplicacin
del SERCE.

El ndice se construy a partir de las siguientes variables referentes al cumplimiento de las pautas de la aplica-
cin:

s )0ORCENTAJEDEESCUELASDELAMUESTRASELECCIONADAINICIALMENTEPORLA#OORDINACINDEL,,%#% QUE
nalmente participaron en el estudio (sin reemplazo).
s )0ORCENTAJEDEALUMNOSDETERCERGRADOQUEPARTICIPARONENLASPRUEBASDE,ENGUAJE
s )0ORCENTAJEDEALUMNOSDETERCERGRADOQUEPARTICIPARONENLASPRUEBASDE-ATEMTICA
s )0ORCENTAJEDEALUMNOSDESEXTOGRADOQUEPARTICIPARONENLASPRUEBASDE,ENGUAJE
s )0ORCENTAJEDEALUMNOSDESEXTOGRADOQUEPARTICIPARONENLASPRUEBASDE-ATEMTICA
s )0ORCENTAJEDESESIONESVISITADASQUEEMPEZARONENTIEMPOLASPRUEBAS
s )0ORCENTAJEDELOSMODELOS&CORRECTAMENTELLENADOS
s )0ORCENTAJEDEPRUEBASYCUESTIONARIOSLLENADOSENCORRESPONDENCIACONEL&
s )0ORCENTAJEDESESIONESDONDENOTUVOLUGARELUSODEINSTRUMENTOSINAPROPIADOSENLASPRUEBAS
s )!PLICACINDELASPRUEBASYCUESTIONARIOSACORDEALCRONOGRAMADEAPLICACIN
s )0ORCENTAJEDESESIONESVISITADASDONDENOHUBODESVIACIONESPORELAPLICADORDEL-ANUALPARALA
aplicacin de los instrumentos.
s )0ORCENTAJEDESESIONESDONDENOHUBOESTUDIANTESQUESALIERANYENTRARANDELASAULASDURANTELA
aplicacin de los instrumentos.
s )0ORCENTAJEDESESIONESDONDEHUBOLAPRESENCIADEOTROADULTODURANTELAAPLICACINDELASPRUE-
bas.
s )0ORCENTAJEDELASSESIONESVISITADASDONDENOSEPRODUJERONINTERRUPCIONESDURANTELAAPLICACINDE
las pruebas.
s )0ORCENTAJEDESESIONESDONDENOSEPRODUJOAYUDAALOSESTUDIANTESPORPARTEDELAPLICADOR
s )0ORCENTAJEDEESCUELASDONDENOHUBOEVIDENCIASDEAVISOPREVIOALAVISITADELOSOBSERVADORES
externos.
s )#ONCORDANCIAENTRECORRECTORES-ATEMTICASERO
s )#ONCORDANCIAENTRECORRECTORES-ATEMTICASTO

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 129


El mtodo seguido para calcular el ICUPAC implic la Para la construccin del ICUPAC se utiliz la tcnica de
construccin de nuevas variables que fueran una com- anlisis multivariante conocida como Anlisis de Com-
binacin de los 18 indicadores bsicos sealados ante- ponentes Principales, cuyo propsito es transformar
riormente. Las nuevas variables se construyeron agru- un conjunto de variables correlacionadas en otro menor
pando los indicadores que tuvieran mayor correlacin no correlacionado, a costa de una mnima prdida de
entre s, y procurando que las nuevas variables fueran informacin, entendida esta ltima como la varianza
independientes entre ellas. Una vez construidas las de los datos originales.
nuevas variables, se consideraron solamente aquellas
responsables de la mayor parte de la variabilidad total Adems se sigui la lgica de un modelo compensa-
de los indicadores bsicos. Cada una de estas variables torio, donde se combinan los datos en un algoritmo,
compuestas recibi una etiqueta relativa al proceso de comnmente aditivo, que permite que las bajas pun-
evaluacin que representa. Despus de seleccionar las tuaciones en unas variables se vean compensadas por
variables de resumen, a cada una de ellas se le asign las altas puntuaciones en otras.(Valds, H. Desempeo
un peso, utilizando criterios educmtricos que dieran del Maestro y su evaluacin. Editorial Pueblo y Educa-
cuenta del impacto relativo de cada una de estas varia- cin. La Habana, Cuba, 2004, pg. 124).
bles podra tener en los resultados de logro. Sumando
estas variables ponderadas se construy el ICUPAC.

A partir del anlisis, se obtuvieron las siguientes componentes o variables resumen:

s !DECUADACOBERTURADEESCUELASYESTUDIANTES# 

o I6:Porcentaje de sesiones visitadas que empezaron en tiempo las pruebas.

o I2: Porcentaje de alumnos de tercer grado que participaron en las pruebas de Lenguaje.

o I13: Porcentaje de sesiones donde hubo la presencia de otro adulto durante la aplicacin de
las pruebas.

o I14: Porcentaje de las sesiones visitadas donde no se produjeron interrupciones durante la


aplicacin de las pruebas.

o I15: Porcentaje de sesiones donde no se produjo ayuda a los estudiantes por parte del aplica-
dor.

o I16: Porcentaje de escuelas donde no hubo evidencias de aviso previo a la visita de los obser-
vadores externos.

130 REPORTE TCNICO


s !DECUADACOBERTURADELAPRUEBA# 

o I2: Porcentaje de alumnos de tercer grado que participaron en las pruebas de Lenguaje.

o I3: Porcentaje de alumnos de tercer grado que participaron en las pruebas de Matemtica.

o I4: Porcentaje de alumnos de sexto grado que participaron en las pruebas de Lenguaje.

o I5: Porcentaje de alumnos de sexto grado que participaron en las pruebas de Matemtica.

s ,LENADOCONFORMEDELOSINSTRUMENTOS# 

o I7: Porcentaje de los modelos F2 correctamente llenados.

o I8: Porcentaje de pruebas y cuestionarios llenados en correspondencia con el F2.

o I17: Concordancia entre correctores Matemticas 3ero.

o I18: Concordancia entre correctores Matemticas 6to.

s !DMINISTRACINDEPRUEBASSEGNMANUAL# 

o I10: Aplicacin de las pruebas y cuestionarios acorde al cronograma de aplicacin.

o I11: Porcentaje de sesiones visitadas donde no hubo desviaciones por el aplicador del Manual
para la aplicacin de los instrumentos.

s #OMPONENTENOETIQUETADAALNOPARECERCONSISTENTESUAGRUPAMIENTOPORLOQUENOSECONSIDERO
para el ndice sinttico:

o I1: Porcentaje de escuelas de la muestra seleccionada inicialmente por la Coordinacin del


LLECE, que nalmente participaron en el estudio (sin reemplazo).

o I9: Porcentaje de sesiones donde no tuvo lugar el uso de instrumentos inapropiados en las
pruebas.

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 131


La informacin en trminos de variabilidad total explicada por las componentes en funcin de las cuales se cons-
truy el ndice sinttico es del 71.93%, esto se detalla en la siguiente tabla.

Tabla 5.1 Anlisis de componentes principales, varianza y varianza acumulada

% Varianza
Componente % de Varianza
Acumulada
Adecuada cobertura de escuelas y
21.919 21.919
estudiantes
Adecuada cobertura de la prueba 20.472 42.391

Llenado conforme de los instrumentos 18.173 60.565

Administracin de pruebas segn manual 11.373 71.938

Cada una de las componentes anteriormente descritas recibi una ponderacin relativa al grado de inuencia que
cada una de ellas podra tener en el sesgo de los resultados de las pruebas. Las ponderaciones que recibieron
fueron las siguientes:

s !DECUADACOBERTURADELAPRUEBA
s !DECUADACOBERTURADEESCUELASYESTUDIANTES
s ,LENADOCONFORMEDELOSESTUDIANTES
s !PLICACINDEPRUEBASSEGNELMANUAL

Las razones para dar tal ponderacin a cada una de las componentes se explican enseguida:

s !DECUADACOBERTURADELAPRUEBA#  La razn de asignarle el mayor peso relativo a esta


categora es la de considerar que una falta de cobertura puede sesgar fuertemente la medicin de el
logro, dado que permite suponer que se ha hecho una seleccin de los mejores alumnos, independiente-
mente de que tan bueno sea el estado de las otras componentes.

s !DECUADA COBERTURA DE ESCUELAS Y ESTUDIANTES  #  La razn de esta ponderacin en
relacin a las otras tres es que la precisin de los estimadores es sensible a la prdida de escuelas de
la muestra y en consecuencia de alumnos, corriendo el peligro de tener intervalos de conanza muy
anchos o poca representatividad de la muestra, an a pesar de que se llenasen de manera conforme
los instrumentos y los aplicadores hubieren aplicado las pruebas segn el manual. Sin embargo, no se
espera que el comportamiento de esta falta de cobertura sea con sesgo intencional de seleccin sino por
razones justicadas, por lo que se ponder con peso relativo importante pero menor al de la anterior
componente.

132 REPORTE TCNICO


s ,LENADOCONFORMEDELOSINSTRUMENTOS#  Esta ponderacin es inferior a las anteriores,
porque la componente puede introducir un sesgo pero se supone con un impacto en menor escala que
las componentes anteriores.

s !DMINISTRACIN DE PRUEBAS SEGN MANUAL  #  Esta ponderacin es inferior a las dos
primeras componentes, porque esta puede introducir un sesgo pero se supone con un impacto en menor
escala que las ellas e similar a la anterior.

El ndice de cumplimiento de las pautas de calidad del SERCE se dene entonces de la siguiente manera:

)#50!#
# 
# 
# 
#

Los resultados del ICUPAC muestran que los pases se agrupan en cuatro conjuntos que son muy parecidos al in-
terior de los mismos y muy diferentes entre ellos. La tcnica utilizada para esta clasicacin es el algoritmo de k
medias del anlisis de cluster, la cual se caracteriza por generar grupos con mxima varianza entre ellos y mnima
a su interior. A continuacin se presenta un graco que ilustra tal agrupamiento.

Como se puede ver en el grco (5.1), los pases se agrupan de la siguiente forma:

s #ONMENORNDICEDECUMPLIMIENTOESTN#OLOMBIA #OSTA2ICA 2EPBLICA$OMINICANAY0ARAGUAY

s #ONUNNIVELINTERMEDIO BAJODECUMPLIMIENTOSEENCUENTRAN0ANAM 0ER "RASIL !RGENTINA 'UATEMA-


la, Chile, Mxico y Nicaragua.

s #ONUNNIVELINTERMEDIO ALTODECUMPLIMIENTOESTN5RUGUAY .UEVO,EN %CUADORY%L3ALVADOR

s #ONUNNIVELALTODECUMPLIMIENTOEST#UBA

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 133


Figura 5.1. Anlisis de cluster de los pases de acuerdo a su puntuacin en el ICUPAC
Indice del cumplimiento de las pautas de calidad del SERCE

1.50
Cuba

1.00

El Salvador

0.50
Ecuador
Nuevo Len
Nicaragua Mxico
Uruguay
Chile
0.00 Guatemala
Argentina
Brasil Per
Paraguay Panam
-0.50 Dominicana

Costa Rica

Colombia
-1.00

1 1.5 2 2.5 3 3.5 4


Nmero de caso del conglomerado

Enseguida se muestran los valores que obtuvo cada pas


PAS ICUPAC
en el ICUPAC (tabla 5.2). Cabe sealar que los pases
estn ordenados de forma ascendente, lo que indica Colombia -.96
que los primeros pases tuvieron un menor ndice de Costa Rica -.55
cumplimiento con las pautas y los pases del nal de la R. Dominicana -.53
tabla un mayor cumplimiento.
Paraguay -.53

Tabla 5.2 Puntuacin de los pases el ICU- Panam -.27


PAC en orden ascendente Per -.26
Argentina -.11
Brasil -.10
Guatemala -.03
Chile .06
Mxico .14
Nicaragua .16
Uruguay .22
Nuevo Len .28
Ecuador .36
El Salvador .74
Cuba 1.38

134 REPORTE TCNICO


IV.6. RESULTADOS GENERALES
ASOCIADOS CON LA CALIDAD
En secciones anteriores de este informe, se presentaron ejemplos de muestreo, aspectos relacionados con el
proceso de implementacin, la captura de datos y la calicacin de items de respuesta abierta. Todos estos as-
pectos son considerados fundamentales en trminos de garantizar la comparabilidad y validez de los resultados.

MUESTREO
En general, los pases cumplieron los requerimientos esenciales de muestreo (Criterio II.7). El estudio inclua
la participacin de 3.133 escuelas y una tasa mnima de participacin del 80%, requerimiento que fue cumplido
por todos los pases participantes. En cuanto a la tasa de participacin de las escuelas originalmente muestreadas
(70%), la mayora de los pases, con la excepcin de Brasil, Colombia y Ecuador, logr este objetivo. La requeri-
da tasa de participacin de estudiantes80% de los estudiantes muestreadosse resume a continuacin por
grado y asignatura:

s,ENGUAJE TERCERGRADOCRITERIOCUMPLIDOPORLAMAYORADELOSPASESCONLAEXCEPCINDE!RGENTINA
Nicaragua, Paraguay, Per y Repblica Dominicana.

s,ENGUAJE SEXTOGRADOCRITERIOCUMPLIDOPORLAMAYORADELOSPASESCONLAEXCEPCINDE"RASILY
Paraguay.

s-ATEMTICAS TERCERGRADOCRITERIOCUMPLIDOPORLAMAYORADELOSPASESCONLAEXCEPCINDE2EPBLICA
Dominicana, Nicaragua y Paraguay.

s-ATEMTICAS SEXTOGRADOCRITERIOCUMPLIDOPORLATOTALIDADDELOSPASESPARTICIPANTES

s#IENCIA SEXTOGRADOCRITERIOCUMPLIDOPORLATOTALIDADDELOSPASESPARTICIPANTES

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 135


con directrices y procedimientos tales como la puntua-
ASPECTOS ASOCIADOS
lidad y la adhesin a instrucciones. El reforzamiento
CON LA IMPLEMENTACIN de la habilidad del aplicador para controlar a grandes
Y ADMINISTRACIN DE DATOS grupos de estudiantes debera en consecuencia mejorar
sustancialmente el futuro comportamiento de los estu-
El proceso de implementacin estuvo slidamente diantes durante la evaluacin.
documentado por informes nacionales (aplicacin de-
nitiva) y por informes de monitoreo de la calidad En trminos generales, el proceso de administra-
elaborados por monitores externos y observadores in-
cin de datos fue considerado positivo, si bien no estu-
ternacionales. Durante el proceso de implementacin
vo exento de problemas. La mayora de las dicultades
se identicaron problemas menores aunque se estima
identicadas estaban asociadas a versiones mltiples
que, a futuro, slo ser necesario implementar algunos
de manuales y software, categoras de respuesta no
pasos adicionales para minimizarlos.
consideradas en el software, y problemas tcnicos re-
lacionados con el uso del software (es decir, baja ve-
1. Implementacin de la prueba piloto. Es im-
locidad de procesamiento, trabajo en redes, prdida de
portante cumplir el Criterio II.2 que requiere que cada
datos, etc.).
pas participe en una prueba piloto. Esto permite me-
jorar los procedimientos y anar el cronograma de tra-
En prcticamente todos los pases se produjeron pro-
bajo. Adicionalmente, es fundamental que los pases
blemas o divergencias. Algunos de estos problemas
puedan planicar su estrategia de muestreo en forma
podran estar asociados a diferencias inherentes a los
previa a la implementacin del estudio y ceirse es-
sistemas educativos, tales como las fechas de actividad
trictamente a ella. Por ejemplo, Nicaragua se bas en
escolar y temas de comportamiento. Sin embargo, la
conocimientos previos derivados de estudios censales
mayora de los problemas parecen estar concentrados
y, por lo tanto, no dio la suciente atencin a aspectos
del muestreo, hecho que trajo por resultados diversos en unos pocos pases.
problemas en los procesos nales.
s ,OS DATOS PROVENIENTES DE #OLOMBIA REVELAN
2. Cronograma de actividades y horizonte tempo- una baja preparacin de los aplicadores demostrada por
ral. Aparentemente, este tema estuvo presente durante su escaso conocimiento de los procedimientos. Sobre la
todo el estudio. De hecho, los problemas de esta ndole base de las observaciones se puede concluir que: en el
solan mencionarse en los informes nacionales bajo la 38% de las sesiones se proporcion asistencia indebida
categora dicultades. Dichos problemas persistieron a estudiantes; en el 57% de las sesiones ocurrieron
durante la presentacin de datos y el anlisis de los incidentes o interrupciones; en el 48% de las sesiones
resultados. En un estudio internacional de esta mag- se detect comunicacin/intercambio de informacin
nitud, el horizonte temporal adquiere una importancia entre los estudiantes; y el 55% de las sesiones no co-
vital y si las demoras no son aceptadas por todos los menz a la hora programada.
participantes, los pases que s la cumplen no tendran
por qu ser castigados por la demora de unos pocos. Es s ,OSDATOSPROVENIENTESDE#OSTA2ICATAMBIN
imprescindible establecer y hacer cumplir un horizonte revelan una baja preparacin de los aplicadores. So-
temporal realista. bre la base de las observaciones se puede concluir lo
siguiente: en el 41% de la sesiones se detectaron di-
3. Capacitacin de aplicadores. La duracin de la vergencias con las directrices; en slo el 39% de las
capacitacin entregada a los aplicadores debe ser ex- sesiones la cubierta de los instrumentos haba sido
tendida y hacer hincapi en la importancia de cumplir completada segn se instruye en las directrices; y el

136 REPORTE TCNICO


41% de las sesiones no comenz a la hora programada.
CALIFICACIN DE ITEMS
Tambin se registraron demoras en la presentacin de
la base de datos a la CT-LLECE. Finalmente, cabe des-
DE RESPUESTA ABIERTA
tacar que Costa Rica no cont con los datos que una
La evidencia presentada en este informe revela que
prueba piloto podra haber aportado.
los manuales, las guas de calicacin y los talleres de
capacitacin, fueron efectivos en trminos de garan-
s ,AS OBSERVACIONES REALIZADAS EN 2EPBLICA
tizar un alto nivel de consistencia durante el proceso
Dominicana revelaron que: el 47% de las sesiones se
de calicacin de los items de respuesta abierta. Adi-
caracteriz por problemas de puntualidad; en slo el
cionalmente, todos los pases catalogaron este proceso
55% de las sesiones las cubiertas de los instrumen- como muy positivo y destacaron la naturaleza integral
tos haban sido correctamente completadas; en un alto de los manuales. En general, los niveles de correspon-
porcentaje de las sesiones las caractersticas del en- dencia y conabilidad entre los calicadores se situa-
torno de la prueba (espacio, iluminacin, temperatura ron en niveles aceptables en la totalidad de los items.
ambiente) fueron descritas como no apropiadas. Adi- Entre las excepciones se incluyen: (i) todos los items
cionalmente, la vericacin del proceso de captura de de Ciencias de sexto grado de Repblica Dominicana y
datos en el pas arroj la segunda diferencia ms alta (ii) tres casos de items de Matemticas de sexto gra-
entre la vericacin nacional e internacional (163 di- do: DM6B2IT16 de Nuevo Len, DM6B4IT16 de Per y
ferencias). Finalmente, la base de datos fue presentada DM6B4IT14 de Costa Rica.
a la CT-LLECE con ms de 12 semanas de atraso. Dado que los problemas de calicacin tienen un im-
pacto directo sobre el desempeo de los estudiantes,
s ,OSDATOSCORRESPONDIENTESA%CUADORREVELAN los datos que presenten problemas (por ej., los items
el nmero ms alto de diferencias entre la vericacin de Ciencias de sexto grado de Repblica Dominicana)
nacional e internacional de captura de datos (245 ca- deberan ser especialmente destacados e incluso sera
sos), y destacan que los aplicadores no estaban lo su- recomendable considerar su exclusin de los informes.
cientemente familiarizados con los procedimientos.
Adicionalmente, cabe mencionar que Ecuador no parti-
cip en la prueba piloto.

s 0OR OTRA PARTE LA RAZN QUE .ICARAGUA SE


menciona en este documento se debe a la ausencia
de problemas durante la etapa de implementacin
en muchos casos los datos demostraron ser demasiado
perfectos. El observador internacional conrm que sus
observaciones coincidan con las realizadas por los mo-
nitores externos. Sin embargo, los datos de Nicaragua
fueron entregados con ms de 12 semanas de retraso,
posiblemente, debido a problemas durante el proceso
de captura de datos, ya que el representante del pas
no asisti al taller organizado sobre este tema. Asi-
mismo, se detectaron algunos problemas, debido a que
originalmente en Nicaragua se planic el estudio bajo
la idea de que se hara un censo de todas las escuelas
del pas.

CAPTULO 4 ASEGURAMIENTO DE LA CALIDAD 137


en este informe que puede incluir aspectos relaciona-
COMENTARIO
dos con la comunicacin, la participacin en reuniones
FINAL y los tiempos involucrados, datos que tambin debe-
ran tenerse en cuenta. La combinacin de todos estos
El Anexo B contiene un resumen internacional de las
factores podra impactar la calidad de los datos de Co-
conclusiones relacionadas con el proceso de muestreo
lombia, Costa Rica, Repblica Dominicana y Paraguay,
(IV.1), informacin sobre la aplicacin de las pruebas
por lo que se sugiere interpretar cuidadosamente los
(IV.2) y sobre la calicacin de los items de respuesta
resultados de estos pases.
abierta (IV.3). El Anexo C presenta informes paralelos
para cada pas participante. Estos ltimos tienen la
En trminos generales, las conclusiones presentadas en
nalidad de servir como una rpida gua de referen-
este informe demuestran que el SERCE fue rigurosa-
cia para cada pas ya que ofrecen un listado de reco-
mente implementado y con estricta adhesin a pro-
mendaciones sobre el manejo de datos. Una limitacin
cedimientos diseados para garantizar resultados de
de estos informes es el hecho que fueron sintetizados
alta calidad. Este estudio proporcion herramientas de
para permitir la presentacin cuantitativa de resulta-
gran utilidad para guiar a los pases, entre ellas, do-
dos. Para descripciones pormenorizadas y anlisis caso
cumentos impresos y manuales detallados, reuniones
a caso de cada uno de estos temas, srvase consultar
y talleres de capacitacin. Con las excepciones que se
los informes elaborados por los monitores, documentos
mencionan en cada seccin, estos resultados tienen el
disponibles en la CT-LLECE.
potencial de contribuir a una mejor comprensin de
Se hace extremadamente difcil juzgar el impacto que
los resultados de la educacin en Amrica Latina, e
las conclusiones presentadas en este informe podran
identicar importantes caractersticas de los sistemas
tener a nivel individual o grupal. Por consiguiente, es
educativos que pueden hacer valiosos aportes a una
recomendable interpretar estas conclusiones en con-
educacin de calidad.
juncin con otros informes, tales como: i) el Reporte
Final del Observador Internacional; ii) el Informe de la
aplicacin denitiva; iii) el Reporte Final de Cobertura
de Escuelas y Alumnos); y iv) los reportes nales de
calicacin.

Al combinar informacin de las distintas reas mues-


treo, implementacin de la prueba, administracin de
datos, y calicacin de tems de respuesta abiertase
aprecia que, en trminos generales, las divergencias o
problemas se distribuyen en forma aleatoria entre los
pases. Sin embargo, de acuerdo al ICUPAC se detect
una concentracin de problemas en Colombia, Costa
Rica, Repblica Dominicana y Paraguay. Esto sugiere
que la aplicacin en tales naciones identica proble-
mas en todas las reas. La evidencia presentada en este
informe identica problemas en las tasas de participa-
cin de los estudiantes, el proceso de implementacin,
la conabilidad de las calicaciones y la presentacin
oportuna de las bases de datos. La CT-LLECE dispone de
informacin bastante ms completa que la presentada

138 REPORTE TCNICO


5
CAPTULO

PROCESAMIENTO
DE
DATOS
E
l presente captulo describe el procesamiento de datos del SERCE. La lgica de presentacin divide el
procesamiento en dos etapas. La primera de ellas consiste en los procedimientos de control de calidad de
los datos y depuracin de los datos. La segunda etapa del procesamiento se reere a los procesos para la
generacin de informacin. En cada una de estas etapas se explica, por separado, los procesos relativos
a los datos de logro y los que se reeren a los cuestionarios de contexto. Esto porque hay diferencias importantes
en el procesamiento de datos, especialmente en la etapa de generacin de informacin.
En este captulo se presentan las principales procedimientos y resultados relativos a la depuracin de datos, la
estimacin de parmetros y escalamiento de tems, las escalas de habilidades, los niveles de desempeo, el ndice
de estatus socioeconmico de los estudiantes y la estructura de la base de datos regional.

V.1. ESTRUCTURA DE LA BASE DE DATOS REGIONAL


Y PROCEDIMIENTOS PARA SU DEPURACIN

V.1.1. Estructura de la base de datos regional

El objetivo de este documento es describir brevemente las bases de datos del SERCE que se envan a los pases
bajo embargo para que, aquellos que lo deseen, puedan realizar los reportes nacionales del SERCE.

En total el SERCE ha producido 18 bases de datos, que se clasican de la siguiente forma:

s #INCOBASESDERESULTADOSDELOSESTUDIANTES
s #UATROBASESCONDATOSDEESTUDIANTESYSUSFAMILIAS
s 3IETEBASESDEPROFESORES
s $OSBASESDEESCUELASYDIRECTORES

Bases de resultados de aprendizaje

Las bases de desempeo de los estudiantes son las siguientes:

s ##IENCIAS
s ,,ECTURA
s ,,ECTURA
s --ATEMTICA
s --ATEMTICA

140 REPORTE TCNICO


Las bases de resultados tienen identicadores por pas, centro educativo, grado, aula y estudiante. Adems de
identicadores compuestos para distinguir a los estudiantes considerando cada una de las variables menciona-
das.
Los resultados de aprendizaje resumidos aparecen en tres variables distintas:

s,/')4?05.4!*%ESLAESTIMACINDEHABILIDADENLOGITS
s05.4!*%?%34!.$!2?&).!,CORRESPONDEALPUNTAJEASIGNADOACADAESTUDIANTEDEACUERDOALAESCALA
del SERCE, donde el promedio de las medias nacionales es igual a 500 y la desviacin estndar es 100.

s.IVELQUECORRESPONDEALNIVELDEDESEMPEOENELQUESEUBICANLOSESTUDIANTES YESTNIDENTIlCA
dos por letras y una leyenda respectiva. Enseguida se describe el signicado de cada letra correspondi
ente a los niveles:

o A: corresponde a los estudiantes por Debajo del Nivel I de desempeo.


o B: Nivel I de desempeo.
o C: Nivel II de desempeo.
o D: Nivel III de desempeo.
o E: Nivel IV de desempeo.

Adems de los resultados en resumen, al nal de cada base de aprendizaje se incluyen las respuestas que dieron
los estudiantes a cada uno de los tems de la prueba.

Bases de estudiantes y familias

Las bases de datos de estudiantes y sus familias son:

s#UESTIONARIO1!CUESTIONARIODEALUMNOSDE
s#UESTIONARIO1!CUESTIONARIODEALUMNOSDE
s#UESTIONARIO1&CUESTIONARIODEFAMILIADELOSESTUDIANTESDE
s#UESTIONARIO1&CUESTIONARIODEFAMILIADELOSESTUDIANTESDE

Cada una de las bases de datos tiene la clave del cuestionario y nmero de tem en los nombres de las variables,
adems de estar debidamente etiquetada con el texto del tem y las opciones de respuesta en todas las preguntas
de opcin mltiple.
Es preciso sealar que estas bases se construyeron a partir del nmero total de estudiantes que tuvo informacin
vlida para, al menos, una de las pruebas del SERCE. Por lo tanto, el nmero total de estudiantes en las bases
de alumnos y familias es levemente superior al nmero de estudiantes en cada una de las bases de resultados de
aprendizaje. Tambin cabe aclarar que se separaron los datos del cuestionario de familia en una base para cada
grado evaluado, esto para facilitar el anlisis por grado.

CAPTULO 5 PROCESAMIENTO DE DATOS 141


Bases de profesores

Como se mencion anteriormente, hay siete bases de datos de profesores:

s#UESTIONARIO10#UESTIONARIOPARAELDOCENTE
s#UESTIONARIO1,#UESTIONARIOSOBRELAENSEANZADELENGUAJE
s#UESTIONARIO1-#UESTIONARIOSOBRELAENSEANZADEMATEMTICA
s#UESTIONARIO10#UESTIONARIOPARAELDOCENTE
s#UESTIONARIO1##UESTIONARIOSOBRELAENSEANZADECIENCIAS
s#UESTIONARIO1,#UESTIONARIOSOBRELAENSEANZADELENGUAJE
s#UESTIONARIO1-#UESTIONARIOSOBRELAENSEANZADEMATEMTICA

En las bases de docentes las variables de nombran con el cuestionario y el nmero de tem, y llevan las respec-
tivas etiquetas y opciones de respuesta.

Bases de escuelas y directores

Dos son las bases con datos a nivel escuela:

s#UESTIONARIO&%&ICHADEEMPADRONAMIENTODELAESCUELA
s#UESTIONARIO1$#UESTIONARIOPARAELDIRECTOR

Las bases estn debidamente etiquetadas y el nombre de las variables permite identicarlas en los cuestionarios.
Al nal de la cha de empadronamiento se incluyen una serie de variables auxiliares para identicar los grados
que ofrecan las escuelas y las reas y el grado en las que hubo estudiantes con puntajes vlidos en cada es-
cuela.

Notas adicionales

,AVARIABLE%342!4/!/2)').!,2?4##3#CORRESPONDEALAESTRATIlCACINDEL5RUGUAY DONDESECONSIDEROUNA
sobremuestra de escuelas de condicin social crtica.

V.1.2. Procedimientos de depuracin de los datos

La etapa de depuracin de los datos consisti en la aplicacin de procesos de vericacin de consistencia de la


INFORMACINRECOLECTADA0ARALOSRESULTADOSDELASPRUEBASDE,ECTURAY-ATEMTICAENY LOSDE#IENCIAS
DELA.ATURALEZAENYLAINFORMACINRECOLECTADAMEDIANTECUESTIONARIOSDECONTEXTO SELLEVACABOUN
proceso recursivo de vericacin y retroalimentacin a los pases para el ajuste de la informacin en caso de
existir inconsistencias. La Coordinacin Tcnica del LLECE (CT-LLECE) llev a cabo una serie de pruebas de control
de calidad de los datos y, en caso de existir inconsistencias, se peda a los pases vericarlas. Despus del control
de calidad se depuraron los datos de acuerdo a los criterios para exclusin estipulados en el diseo muestral.
En esta seccin del captulo se describen los procesos de control de calidad y de depuracin de los datos de logro
y de contexto, respectivamente.

142 REPORTE TCNICO


Depuracin de los datos de logro

Una vez recolectados y capturados, los datos de logro siguieron un proceso de depuracin para vericar su con-
sistencia. El procedimiento seguido consisti en disear e implementar un sistema de consultas en ambiente
Access, para vericar la estructura y el contenido de cada campo en cada tabla de datos. Una vez recibidas las
bases de datos, se ejecutaron las consultas y se gener un reporte de novedades (el 12 de marzo 2007) que fue
enviado a los pases con la solicitud de vericacin y correccin. En el caso de Repblica Dominicana y Per se
generaron reportes independientes. En el caso de Nicaragua y Costa Rica, no se gener un reporte especco sino
que se mantuvo comunicacin en lnea para acompaar el proceso de depuracin en el respectivo pas. Cada
vez que se reciba una nueva versin de cada base de datos, se ejecutaban de nuevo las consultas mencionadas
y se generaban nuevos reportes si continuaban apareciendo algunas novedades. En el caso de Cuba y Repblica
$OMINICANASEGENERARONTRESREPORTES&INALMENTE CONCLUIDOSLOSPLAZOSPARAQUECADAPASDEPURARASUBASEDE
datos, se procedi a realizar los ajustes respectivos, a consolidar la base de datos, y a generar la documentacin
JUNIO YELREPORTEDEIMPUTACIONESJUNIO ,OSREPORTESDENOVEDADESGENERADOSFUERONLOS
siguientes:

1. Reporte de novedades de las bases de datos (12 marzo 2007), con indicaciones de las novedades encontra
das en las bases de datos recibidas. Se exceptuaron las bases de Repblica Dominicana, Per, Nicaragua y
Costa Rica porque en la fecha de realizacin del reporte (12 de marzo 2007) an no se haban recibido las
respectivas bases.

2. Primer reporte de novedades de la base de Repblica Dominicana (15 marzo 2007).

3EGUNDOREPORTEDENOVEDADESDELABASEDE2EPBLICA$OMINICANAABRIL 

4. Tercer reporte de novedades de la base de Repblica Dominicana (2 mayo 2007).

2EPORTEDENOVEDADESDELABASEDE0ERMARZO 

2EPORTEDENOVEDADESDELABASEDE!RGENTINAABRIL 

7. Tercer reporte de novedades de la base de Cuba (4 abril 2007).

Cada uno de los reportes mencionados consisti de 47 tablas. Cinco de estas tablas indicaban la existencia de
campos vacos en las pruebas para cada una de las reas y grados evaluados. Las restantes 42 tablas indicaban
la existencia de valores no vlidos en los tems abiertos de las pruebas de Matemtica y Ciencias. Enseguida se
presenta una tabla que indica las tablas que se generaron en los reportes de novedades.

CAPTULO 5 PROCESAMIENTO DE DATOS 143


#5!$2/4!",!302/$5#)$!30!2!%,#/.42/,$%#!,)$!$$%,/3$!4/3$%,/'2/

Tablas producidas para el control de calidad de los datos de logro

4ABLA2EGISTROSCONCAMPOSVACOSENLAPRUEBADELECTURAPARA
4ABLA2EGISTROSCONCAMPOSVACOSENLAPRUEBADELECTURAPARA
4ABLA2EGISTROSCONCAMPOSVACOSENLAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONCAMPOSVACOSENLAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONCAMPOSVACOSENLAPRUEBADECIENCIASPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADEMATEMTICAPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADECIENCIASPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADECIENCIASPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADECIENCIASPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADECIENCIASPARA

144 REPORTE TCNICO


4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADECIENCIASPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADECIENCIASPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADECIENCIASPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADECIENCIASPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADECIENCIASPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADECIENCIASPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADECIENCIASPARA
4ABLA2EGISTROSCONVALORESNOVLIDOSENELTEMDELCUADERNILLO#DELAPRUEBADECIENCIASPARA

Una vez nalizado el proceso de control de calidad de las bases de datos se gener el Reporte de imputaciones
en la base de datos del SERCE (22 junio 2007), el cual se explica a continuacin.

Imputaciones de las bases de datos de logro

Despus del proceso recursivo de revisin y correccin de las bases de datos de logro fue necesario suprimir
algunos de los registros o imputar algn valor como medio para preparar los datos para su procesamiento. La
presente seccin muestra las imputaciones realizadas a las bases de datos remitidas por los pases participantes
en la aplicacin denitiva del SERCE, referidas a las respuestas a los cuadernillos de las pruebas de Lectura,
Matemtica y Ciencias. Los cuadros 5.2 a 5.8 presentan los registros que han sido suprimidos y aquellos que han
sido modicados, junto con el valor imputado, as como las modicaciones generales a los datos de Brasil, Cuba
y Panam, a los cdigos de aula y de crdito parcial y los casos de las bases de Costa Rica, Repblica Dominicana
y Brasil que se recibieron en forma extempornea.

%LREPORTEDEIMPUTACIONESTAMBINDACUENTAENLOSCUADROSADELNMERODEREGISTROSQUEHANSIDO
SUPRIMIDOSPARAELPROCESAMIENTODELOSDATOS ENLASPRUEBAS, , - -Y# PARACADAPAS PORNOCUMPLIR
con los criterios de universo o muestra y porque corresponden a estudiantes que no respondieron la prueba, es
decir, aquellos registros donde todos los campos estn digitados como X, Y o Z. De acuerdo con el procedimiento
previsto, estos estudiantes no tuvieron un valor estimado para su habilidad.

En los cuadros 5.14 a 5.18 se reporta el nmero de registros por cada tipo de cuadernillo y para cada pas, en las
PRUEBAS, , - -Y# QUECONFORMANLABASEDEDATOSYQUESERNUTILIZADOSPARALACALIBRACINDETEMS
y para la estimacin de habilidades.

Los signicados de los cdigos utilizados representan una pieza clave de informacin para comprender el alcance
de las imputaciones realizadas, por lo que se describen los cdigos y sus signicados enseguida:

s%LCDIGOh9vDECRDITOPARCIALSEREEMPLAZAPORh7v PARAMANTENERCOMONICASIGNIlCACINDELCDIGO
h9vELCASODEMULTIMARCAENLOSTEMSCERRADOS

s3IGNIlCADODELCDIGOUTILIZADOPARALASRESPUESTASDELOSTEMSCERRADOSENLABASEDEDATOS

o 1: Opcin A. Punta con 1 si es la clave y con 0 de otra forma.


o 2: Opcin B. Punta con 1 si es la clave y con 0 de otra forma.

CAPTULO 5 PROCESAMIENTO DE DATOS 145


O/PCIN#0UNTACONSIESLACLAVEYCONDEOTRAFORMA
o 4: Opcin D. Punta con 1 si es la clave y con 0 de otra forma.
o X: tem no administrado. No punta.
o Y: Ms de una respuesta (multimarca). Punta con 0.
o Z: No respuesta (omisin). Punta con 0.
s3IGNIlCADODELCDIGOUTILIZADOPARALASRESPUESTASDELOSTEMSABIERTOSENLABASEDEDATOS
o 1: Crdito nulo. Punta con 0.
o 2: Crdito parcial o total, segn cada caso. Punta con 1.
O#RDITOPARCIALOTOTAL SEGNCADACASO0UNTACON
O#RDITOTOTALENTEMABIERTO SEGNCADACASO0UNTACON
O7TEMMALIMPRESO.OPUNTA
o X: tem no administrado. No punta.
o Z: No respuesta (omisin). Punta con 0.

Abajo se presentan las tablas que dan cuenta de los registros eliminados y modicados. Despus se explican algu-
nas situaciones especcas que se dieron en el control de calidad de las bases de algunos pases. La siguiente parte
del documento resume los nmeros de registros suprimidos y los registros utilizados para el procesamiento.

CUADRO 5.2. REGISTROS SUPRIMIDOS POR ESTAR VACOS

Centro
Pas Educativo Grado Aula rea Estudiante Cuadernillo

#OSTA2ICA    -  #


0ARAGUAY    ,  #
0ARAGUAY    ,  #
0ARAGUAY    -  #

CUADRO 5.3. CAMPOS DE TEMS CERRADOS LLENADOS CON EL VALOR Z PORQUE SE ENCUENTRAN VACOS

Centro Campo
Pas Educativo Grado Aula rea Estudiante Cuadernillo vaco

#UBA    ,  # TEM


#UBA    ,  # TEM

146 REPORTE TCNICO


CUADRO 5.4. CAMPOS DE TEMS CERRADOS LLENADOS CON EL VALOR Z PORQUE TIENEN UN VALOR NO VLIDO

Centro valor no
0AS %DUCATIVO'RADO !ULA REA%STUDIANTE#UADERNILLO #AMPO VLIDO

#HILE   -  # )TEM 


#HILE   -  # )TEM 

CUADRO 5.5. CAMPOS PARES DE TEMS CERRADOS LLENADOS CON EL VALOR NULO PORQUE TIENEN UN VALOR NO VLIDO

Centro valor no
Pas Educativo Grado Aula rea Estudiante Cuadernillo Campo vlido

#OSTA2ICA    -  # )TEM 


#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM ::
#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM 
#HILE    -  # )TEM ::
#HILE    -  # )TEM ::

CAPTULO 5 PROCESAMIENTO DE DATOS 147


CUADRO 5.6. CAMPOS IMPARES DE TEMS ABIERTOS LLENADOS CON EL VALOR 0 PORQUE TIENEN OTRO VALOR

Centro valor no
Pas Educativo Grado Aula rea Estudiante Cuadernillo Campo vlido

#OSTA2ICA    -  # )TEM 


#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM
#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM 
#OSTA2ICA    -  # )TEM 
#HILE    -  # )TEM:
#HILE    -  # )TEM :
.UEVO,EN    #  # )TEM

CUADRO 5.7. CAMPOS DE TEMS ABIERTOS LLENADOS CON EL VALOR ZZ PORQUE SE ENCUENTRAN VACOS

Centro
Pas Educativo Grado Aula rea Estudiante Cuadernillo Campo

.UEVO,EN   #  # )TEM


$OMINICANA   #  # )TEM
$OMINICANA    #  # )TEM
$OMINICANA   #  # )TEM
$OMINICANA   #  # )TEM

CUADRO 5.8. CAMPOS DE TEMS ABIERTOS LLENADOS CON EL VALOR XX PORQUE TIENEN UN VALOR NO VLIDO

Centro valor no
Pas Educativo Grado Aula rea Estudiante Cuadernillo Campo vlido

#OSTA2ICA   -  # TEM 


$OMINICANA    #  # )TEM 
$OMINICANA    #  # )TEM 

148 REPORTE TCNICO


!DEMSDELASMODIlCACIONESSEALADAS LOSCDIGOSDEAULAORIGINALMENTEMARCADOSCOMO       
YSEREEMPLAZANPOR       Y RESPECTIVAMENTE
Por distintas situaciones fue necesario realizar ajustes a las bases de datos de cinco pases, a saber:

s 0ARA"RASILSELLEVARONACABOLASSIGUIENTESMODIlCACIONES

o Se recibi una base de datos el da 11 de junio, despus de vencido el plazo jado en 7 de junio.
Aunque ya se haba depurado la ltima base de datos recibida el 28 de febrero de 2007, se depur
nuevamente esta base remitida el 11 de junio y en consecuencia el archivo nal contempla los ajustes
REALIZADOSPOR"RASILENLASCODIlCACIONESALASRESPUESTASDELOSTEMSABIERTOSYDELOSCUADER
NILLOS# #Y#DELAPRUEBADEMATEMTICADETERCERGRADO

o El campo par de los tems 11 y 12, de los cuadernillos C1, C2 y C2 de la prueba de Matemtica para
tercer grado, estn con -1 y se reemplazan por nulo.

O%LCAMPOPARDELOSTEMSY DELOSCUADERNILLOS# #Y#DELAPRUEBADE-ATEMTICAPARA


tercer grado, estn con -1 y se reemplazan por nulo.

O%LCAMPOPARDELOSTEMSABIERTOS Y DELOSCUADERNILLOS# #Y#DELAPRUEBADE


Matemtica para sexto grado, estn con -1 y se reemplazan por nulo.

O%LCAMPOPARDELOSTEMSABIERTOS Y DELOSCUADERNILLOS# #Y#DELAPRUEBADE


Matemtica para sexto grado, estn con -1 y se reemplazan por nulo.

s %NELCASODE#OSTA2ICASERECIBIUNABASEDEDATOSELDADEJUNIO DESPUSDEVENCIDOELPLAZO
lJADOENDEJUNIO!UNQUEYASEHABADEPURADOLALTIMABASEDEDATOSRECIBIDAELDEMAYODE
2007, se depur nuevamente esta base remitida el 8 de junio y en consecuencia el archivo nal
CONTEMPLAELNICOAJUSTEREALIZADOPOR#OSTA2ICAALREGISTRO-# DONDEELTEM
ESTABACONELVALORYSEMODIlCPORELVALOR

s 0ARA#UBASELOSREGISTROSDELASAULASADEL#ENTRO%DUCATIVOSEREEMPLAZARONPORREGISTROSDE
las aulas 11 a 17, respectivamente, del Centro educativo 187.

s ,OSDATOSDE0ANAMSUFRIERONLASSIGUIENTESMODIlCACIONES

O,OSREGISTROSDEL#ENTRO%DUCATIVO!SEREEMPLAZARONPORREGISTROSDEL#ENTRO%DUCATIVO

O,OSREGISTROSDELAULADEL#ENTRO%DUCATIVO"SEREEMPLAZARONPORREGISTROSDELAULADEL#ENTRO
%DUCATIVO

O,OSREGISTROSDEL#ENTRO%DUCATIVO!SEREEMPLAZARONPORREGISTROSDEL#ENTRO%DUCATIVO

CAPTULO 5 PROCESAMIENTO DE DATOS 149


O,OSREGISTROSDELAULADEL#ENTRO%DUCATIVO"SEREEMPLAZARONPORREGISTROSDELAULADEL#ENTRO
%DUCATIVO

s 2EPBLICA$OMINICANAENVIUNABASEDEDATOSELDADEJUNIO DESPUSDEVENCIDOELPLAZOlJADOEN
7 de junio. Aunque ya se haba depurado la ltima base de datos recibida el 2 de mayo de 2007, se
depur nuevamente esta base remitida el 8 de junio y en consecuencia el archivo nal contempla
algunos ajustes realizados por Repblica Dominicana.

,OSCUADROSSUBSIGUIENTESAL INFORMANSOBREELNMERODEREGISTROSSUPRIMIDOSENCADAUNADE
las pruebas por no corresponder al universo o muestra, o bien por ser de estudiantes que no respondieron la
prueba.

CUADRO 5.9. NMERO DE REGISTROS SUPRIMIDOS EN LA PRUEBA L3

Nmero de registros suprimidos

Por razn de universo Por corresponder a estudiantes


Pas o muestra que no respondieron la prueba

!RGENTINA  


"RASIL  
04 Colombia 92 14
05 Costa Rica 48 7
#UBA  
#HILE  
%CUADOR  
09 El Salvador 4 8
.UEVO,EN  
'UATEMALA  
-XICO  
.ICARAGUA  
0ANAM  
0ARAGUAY  
19 Per 72 24
$OMINICANA  
21 Uruguay 187 41
TOTAL 1708 827

150 REPORTE TCNICO


CUADRO 5.10. NMERO DE REGISTROS SUPRIMIDOS EN LA PRUEBA L6

Nmero de registros suprimidos

Por razn de universo Por corresponder a estudiantes


Pas o muestra que no respondieron la prueba

!RGENTINA  


"RASIL  
#OLOMBIA  
05 Costa Rica 48 10
#UBA  
#HILE  
%CUADOR  
%L3ALVADOR  
11 Nuevo Len 40 5
'UATEMALA  
-XICO  
.ICARAGUA  
0ANAM  
0ARAGUAY  
19 Per 55 0
20 Dominicana 47 15
5RUGUAY  
TOTAL 1317 126

CAPTULO 5 PROCESAMIENTO DE DATOS 151


CUADRO 5.11. NMERO DE REGISTROS SUPRIMIDOS EN LA PRUEBA M3

Nmero de registros suprimidos

Por razn de universo Por corresponder a estudiantes


Pas o muestra que no respondieron la prueba

01 Argentina 149 17
"RASIL  
04 Colombia 90 5
#OSTA2ICA  
#UBA  
#HILE  
08 Ecuador 47 2
09 El Salvador 4 0
11 Nuevo Len 48 1
'UATEMALA  
14 Mxico 57 0
.ICARAGUA  
0ANAM  
0ARAGUAY  
19 Per 75 1
$OMINICANA  
5RUGUAY  
TOTAL 1723 151

152 REPORTE TCNICO


CUADRO 5.12. NMERO DE REGISTROS SUPRIMIDOS EN LA PRUEBA M6

Nmero de registros suprimidos

Por razn de universo Por corresponder a estudiantes


Pas o muestra que no respondieron la prueba

01 Argentina 127 0
"RASIL  
04 Colombia 8 0
05 Costa Rica 100 0
#UBA  
07 Chile 114 0
08 Ecuador 42 0
09 El Salvador 19 0
.UEVO,EN  
'UATEMALA  
-XICO  
.ICARAGUA  
0ANAM  
18 Paraguay 89 0
19 Per 57 0
20 Dominicana 15 0
21 Uruguay 145 0
TOTAL 1162 0

CAPTULO 5 PROCESAMIENTO DE DATOS 153


CUADRO 5.13. NMERO DE REGISTROS SUPRIMIDOS EN LA PRUEBA C6

Nmero de registros suprimidos

Por razn de universo Por corresponder a estudiantes


Pas o muestra que no respondieron la prueba

!RGENTINA  


04 Colombia 8 0
#UBA  
09 El Salvador 1 5
.UEVO,EN  
0ANAM  
18 Paraguay 89 2
19 Per 40 2
20 Dominicana 22 0
21 Uruguay 125 10
TOTAL 469 24

Despus de los procesos de depuracin y las imputaciones y ajustes correspondientes, las bases de datos de
logro se constituyeron de los registros que se describen en los cuadros 5.14 a 5.18, y que se desglosan por
cuadernillos.

154 REPORTE TCNICO


CUADRO 5.14. NMERO DE REGISTROS UTILIZADOS PARA EL PROCESAMIENTO DE LA PRUEBA L3

Tipo de Cuadernillo
Pas C1 C2 C3 C4 C5 C6 TOTAL
01 Argentina 898 989 999 890 1000 1005 5781
"RASIL 920  904 899 890 892 
04 Colombia 947 947    948 
05 Costa Rica 818 798 771 928  814 5025
#UBA 877 882 875 881  890 5291
07 Chile     977 957 5791
08 Ecuador 847    821 818 
09 El Salvador 1214  1222 1211 1221 1211 
11 Nuevo Len  941   952  5574
'UATEMALA 1118 1095 1121 1118 1121 1104 
14 Mxico 780  782 778  770 4579
.ICARAGUA 1040 1017 1029 1042 1049  
17 Panam  1020 1020  1027  
18 Paraguay    850 848 827 
19 Per 779 779  778 770  
20 Dominicana       
21 Uruguay  1070 1109 1108 1082  

TOTAL 15777 15655 15766 15830 15903 15689 94620

CAPTULO 5 PROCESAMIENTO DE DATOS 155


CUADRO 5.15. NMERO DE REGISTROS UTILIZADOS PARA EL PROCESAMIENTO DE LA PRUEBA L6

Tipo de Cuadernillo
Pas C1 C2 C3 C4 C5 C6 TOTAL
01 Argentina 1019  1011 1014 1001 994 
"RASIL   852  844 808 5001
04 Colombia 984  970 984 978  5851
05 Costa Rica   710 750  750 
#UBA  987 984  971 982 
07 Chile 1105 1118 1097   1090 
08 Ecuador   852 842  845 
09 El Salvador 1040   1042   
11 Nuevo Len    841 828  4998
'UATEMALA    871  847 5157
14 Mxico 789   770  799 
.ICARAGUA  1025  1008 1022 1020 
17 Panam 857 841  881 872 719 
18 Paraguay   725 720   
19 Per  740 755  759  4504
20 Dominicana 742 724 728 725  719 
21 Uruguay 995  1009 995 997 997 5989

TOTAL 15126 15145 15060 15119 15165 14856 90471

156 REPORTE TCNICO


CUADRO 5.16. NMERO DE REGISTROS UTILIZADOS PARA EL PROCESAMIENTO DE LA PRUEBA M3

Tipo de Cuadernillo
Pas C1 C2 C3 C4 C5 C6 TOTAL
01 Argentina 1047 1045 1055 1048   
"RASIL 928 917 920 924 917 928 
04 Colombia 987   957 951 974 5784
05 Costa Rica  752  855  792 4714
#UBA 877 881 877 880  890 5291
07 Chile 977 979  984 994 982 5880
08 Ecuador 880 874  874  859 5212
09 El Salvador     1240 1228 
11 Nuevo Len   902 909 901 900 5411
'UATEMALA  1128 1152 1141 1150 1144 
14 Mxico   774 770   
.ICARAGUA  1058  1052   
17 Panam       
18 Paraguay 857  848 849 858  5110
19 Per 794   801  790 
20 Dominicana  714 727   748 
21 Uruguay    1151 1144 1142 

TOTAL 16159 16036 16018 16188 16154 16108 96663

CAPTULO 5 PROCESAMIENTO DE DATOS 157


CUADRO 5.17. NMERO DE REGISTROS UTILIZADOS PARA EL PROCESAMIENTO DE LA PRUEBA M6

Tipo de Cuadernillo
Pas C1 C2 C3 C4 C5 C6 TOTAL
01 Argentina 1019  1028   1008 
"RASIL 870  879 871 874 847 5201
04 Colombia 984 977  984 972 980 5870
05 Costa Rica    700   4008
#UBA 981  985 974 974 982 5879
07 Chile 1099 1111 1122  1117  
08 Ecuador 871 872 872    5210
09 El Salvador 1042 1050 1048   1049 
11 Nuevo Len 794  778 799 780 758 
'UATEMALA  887  888   5249
14 Mxico 787 795 782  782 800 4711
.ICARAGUA 1079 1079 1072 1080 1085  
17 Panam 899 879 899 919   
18 Paraguay 722   724  722 
19 Per  755  772 771  4585
20 Dominicana 751  755    4502
21 Uruguay  1029 1021 1018 1028 1027 

TOTAL 15259 15224 15200 15287 15239 15124 91333

158 REPORTE TCNICO


CUADRO 5.18. NMERO DE REGISTROS UTILIZADOS PARA EL PROCESAMIENTO DE LA PRUEBA C6

Tipo de Cuadernillo
Pas C1 C2 C3 C4 C5 C6 TOTAL
01 Argentina 974 1015 1029 1041  947 
04 Colombia 990 979 980 992 981 989 5911
#UBA 984 994 990 979  981 5897
09 El Salvador   1050 1049  1054 
11 Nuevo Len 814 779 794  785 775 4711
17 Panam  904 909 922 908 898 5444
18 Paraguay  752  745 741  
19 Per       
20 Dominicana 752 750   758  
21 Uruguay  1028 1018 1020 1021 1028 

TOTAL 9010 9010 9035 9021 9011 8892 53979

DEPURACIN DE LOS DATOS DE CUESTIONARIOS DE CONTEXTO

Los datos provenientes de cuestionarios de contexto, al igual que los de logro, cumplieron con un proceso re-
cursivo de control de calidad. Este proceso consisti en la vericacin de la consistencia de las bases de datos a
travs de una serie de reportes que se explican a continuacin. Dichos reportes se enviaron a los pases para que
revisaran y corrigieran las inconsistencias. Entre los meses de julio a septiembre de 2007 se desarroll esta etapa.
Enseguida se explican los pasos que se tomaron para cumplir con ella.
El proceso de depuracin de las bases de datos de los cuestionarios de contexto se llev a cabo mediante tres ron-
das en las cuales se generaron 4 reportes de control de calidad para cada uno de los siguientes cuestionarios:

1&#UESTIONARIODE&AMILIA
&%&ICHADE%MPADRONAMIENTO
1$#UESTIONARIODELDIRECTOR
10#UESTIONARIODELDOCENTE
1!#UESTIONARIOSDELALUMNODEDEPRIMARIA
1!#UESTIONARIOSDELALUMNODEDEPRIMARIA
1,#UESTIONARIOSOBRELAENSEANZADEL,ENGUAJEDEDEPRIMARIA
1,#UESTIONARIOSOBRELAENSEANZADEL,ENGUAJEDEDEPRIMARIA
1-#UESTIONARIOSOBRELAENSEANZADE-ATEMTICADEDEPRIMARIA
1-#UESTIONARIOSOBRELAENSEANZADE-ATEMTICADEDEPRIMARIA
1##UESTIONARIOSOBRELAENSEANZADE#IENCIASDEDEPRIMARIA

CAPTULO 5 PROCESAMIENTO DE DATOS 159


El Reporte 1, en cada una de sus rondas, consisti en un conjunto de tablas que identican las principales di-
cultades halladas en las bases de datos remitidas por los pases, y que se detallan enseguida:

s,ATABLAREPORTAELNMEROTOTALDECASOSREGISTRADOPARAELCUESTIONARIOS

s,ASTABLASINICIALESREPORTANnSIEXISTEN LOSCASOSENQUELOSCDIGOSDEIDENTIlCACINDEL
cuestionario (pas, grado, centro escolar) se consideran errneos.

s0OSTERIORMENTESEPRESENTAUNATABLAPORCADAUNADELASPREGUNTASSIMPLESPOREJ1!P OUNA
TABLAPORCADAUNODELOSSUB ITEMSDECADAUNADELASPREGUNTASDEESTRUCTURACOMPLEJAPOREJ1!
P SIGUIENDOLAMISMAESTRUCTURADELAINTERFASEDECAPTURA%NESTASTABLASSEREPORTANLOSCASOS
considerados invlidos debido a que la respuesta digitada se encuentra fuera del rango de respuestas
establecido segn la tabla de cdigos incluida en la propia interfase de captura. Por ejemplo se
DETECTACONFRECUENCIAQUELOSVALORESNUMRICOSESTNPRECEDIDOSPORUNhvYESTOSEREPORTACOMO
VALORINVLIDOPOREJ1!PRESPUESTAVLIDA RESPUESTAINVLIDA 

s%NCASOSEXCEPCIONALES ANCUANDOLASRESPUESTASEXCEDANELRANGOESTABLECIDOENLAINTERFASE
pueden ser correctas, no obstante lo cual se registran en este reporte y se solicita la vericacin de
los valores.

s#ADAUNADELASTABLASINCLUYEPARACADACASOINVLIDOTODALAINFORMACINQUEPERMITEIDENTIlCARLO
dentro de la base de datos.

s%NLALTIMACOLUMNADECADATABLASECONSIGNALAINFORMACINERRNEATALCUALFUEINGRESADAYSOBRE
la que se solicita una revisin, recticacin o raticacin y reenvo de la misma.

El grupo de Reportes 2 presenta para cada pas la distribucin de frecuencia de la totalidad de las preguntas de
cada uno de los 11 cuestionarios. El propsito de este reporte fue identicar casos de valores atpicos o posibles
anomalas en los datos de modo tal de poder vericarlos y garantizar el control de los mismos.

,ASERIEDE2EPORTESVERIlCQUELOSTEMSCUYARESPUESTAIMPLICARUNADISTRIBUCINPORCENTUALELTOTALDE
dicha distribucin sumara cien por ciento. Los tems de este tipo son los siguientes:

s&ICHADE%MPADRONAMIENTOn&% TEMSA

s%NSEANZADELA#IENCIAn1#nTEMSA

s%NSEANZADEL,ENGUAJEn1,Y1,nTEMSA

s%NSEANZADELA-ATEMTICAn1-Y1-nTEMSA

160 REPORTE TCNICO


El control de las distribuciones porcentuales se realiz mediante cuatro tablas que agrupan la totalidad de las
inconsistencias encontradas en los cuestionarios citados y que se describen enseguida:

s4ABLAINCLUYECASOSQUEPRESENTANUNACOMBINACINVLIDA CONVALORESDENTRODELRANGOPEROCUYA
suma no corresponde a 100.

s4ABLAMUESTRACASOSPERDIDOS YSESOLICITAVERIlCARSIEFECTIVAMENTESETRATADECASOSDE
no-respuesta.

s4ABLACASOSDECOMBINACIONESINVLIDASDADOQUESECOMBINANRESPUESTADENTRODERANGO Y
respuesta 999. En estos casos se solicita la vericacin de los valores, es decir comprobar si las
respuestas registradas como omitidas (999) efectivamente corresponden a respuesta en blanco y no a
respuesta con valor 0 (cero).

s4ABLACASOSENLOSQUESEREGISTRAALMENOSUNVALORFUERADERANGO

La serie de Reportes 4 se orient a la identicacin de registros duplicados. Los cuestionarios que presentaron
estos casos son:

s10#UESTIONARIOPARAELDOCENTE

s1&#UESTIONARIOPARALAFAMILIA

s1,Y1,#UESTIONARIOSDE%NSEANZADEL,ENGUAJE

s1-Y1-#UESTIONARIOSDE%NSEANZADELA-ATEMTICA

Las diversas versiones de los reportes 1 a 4 tenan por objetivo que los pases vericaran, conrmaran o cor-
rigieran los problemas de captura detectados en los reportes de control de calidad y actualizaran las tablas cor-
respondientes a cada instrumento en el interfase de captura de Access.

En funcin de lo anterior se solicito que una vez realizada la revisin y correccin o conrmacin de la infor-
macin esta fuese remitida nuevamente a la CT-LLECE para poder disponer de las bases de datos en condiciones
para iniciar las tareas de anlisis. A partir de las actualizaciones que los pases enviaron se realiz una tercera
y ltima ronda de estos reportes a manera de garantizar que ya no existieran datos inconsistentes.

Una vez concluida la fase de depuracin recursiva, se realiz la consolidacin de las bases de datos de contexto
con las de logro. Con estrategias diferenciadas por actor escolar.

Las bases de datos de alumnos y familias se consolidaron de acuerdo al siguiente procedimiento:

s,ASBASESDEDATOSDERESULTADOSDELOSESTUDIANTESSEDEPURARONPARAASEGURARSEQUESECUMPLANCON
los criterios del diseo muestral.

CAPTULO 5 PROCESAMIENTO DE DATOS 161


s0ORCADAGRADOSECREUNABASEDE,ECTURAYUNADE-ATEMTICA ADEMSDEUNABASEDE#IENCIASPARA
sexto grado en los pases que aplicaron la prueba de Ciencias.

s0ARACONSOLIDAR1!Y1&SECREUNABASEDEDATOSQUECONTENAATODOSLOSALUMNOSDECADAGRADOQUE
al menos hubieran rendido un examen.

s4OMANDOCOMOBASELALISTADEALUMNOSQUEALMENOSRINDIERONUNEXAMEN SEAADIERONAESALISTALOS
DATOSDE1!Y1&DISPONIBLESPARACADAGRADO

s3ECREARONLASBASESDEDATOS1! 1! 1&Y1& DEFORMATALDESEPARARLASCARACTERSTICASDELOS


ESTUDIANTESDEYPARAPOSTERIORESANLISIS

s&INALMENTE CABEMENCIONARQUEDADOELPROCESODECONSTRUCCINDEUNABASENICADEESTUDIANTESPOR
grado lleva a que el total de estudiantes en estas bases sea mayor que los estudiantes en evaluados en
cada rea y grado. Tambin es posible encontrar casos en blanco en las bases de datos. Esto se debe a
estudiantes que al menos rindieron una prueba, pero que no llenaron el cuestionario de alumnos o que
su familia no llen el cuestionario correspondiente.

Las bases de datos de docentes se consolidaron con un proceso similar que a continuacin se describe:

s3ECREUNALISTADEAULASOSECCIONESPORGRADOAPARTIRDELASBASESDEDATOSNICADEESTUDIANTES
que al menos haban rendido una pruebapreviamente depurada por criterios de muestreo. Esto se
hizo agregando los datos de los estudiantes al nivel de aula. Tal procedimiento asegur que se inclu-
yeran en la base de datos solamente las aulas con estudiantes que cumplan con los criterios de mues-
treo.

s!CADAUNADELASLISTASDEAULASOSECCIONESSELESUNIERONLOSDATOSDELOSCUESTIONARIOS10#UES
TIONARIODELDOCENTE YLOSCORRESPONDIENTESCUESTIONARIOSSOBREENSEANZA1# 1,Y1- SEGN
correspondiera el grado.

Las bases de datos de escuelas tambin se crearon a travs de un procedimiento equiparable al de las otras bases,
tal como se indica enseguida:

s3ECREUNALISTADEESCUELASAPARTIRDELASBASESDEDATOSNICADEESTUDIANTESQUEALMENOSHABAN
rendido una pruebapreviamente depurada por criterios de muestreo. Esto se hizo agregando los datos de los
estudiantes al nivel de escuela. Tal procedimiento asegur que se incluyeran en la base de datos solamente las
escuelas con estudiantes que cumplan con los criterios de muestreo.

s!CADAUNADELASLISTASDEESCUELASSELESUNIERONLOSDATOSDELOSCUESTIONARIOS1$#UESTIONARIODEL
DIRECTOR Y&%&ICHADEEMPADRONAMIENTO 

162 REPORTE TCNICO


V.2. PROCEDIMIENTOS PARA LA ESTIMACIN DE PARMETROS
Y ESCALAMIENTO DE LOS TEMS

E n esta seccin se presentan los resultados para la estimacin de parmetros y escalamiento de los tems. Para
ELLOSEINICIACONLOSTEMSDE#IENCIAS PARADESPUSCONTINUARCONLOSDE,ECTURADEY lNALIZANDOCON
LOSTEMSDE-ATEMTICADEY

V.2.1. TEMS DE CIENCIAS

Aqu se presentan los resultados del procesamiento de datos para anlisis de tems del Estudio Principal del
Segundo Estudio Regional Comparativo y Explicativo SERCE, el cual incluy la aplicacin de pruebas de Lectura
(grados tercero y sexto), Matemtica (grados tercero y sexto) y Ciencias (grado sexto); la aplicacin de la prueba
de Ciencias se realiz en aquellos pases que voluntariamente optaron por incluirla.
El procesamiento de datos se realiz de acuerdo con lo planteado en el Documento Tcnico del Procesamiento
de datos para el Anlisis de tems y la Produccin de Resultados del SERCE, en el cual se propuso la Teora de
Respuesta a tem como modelo de anlisis y una serie de indicadores estadsticos para evaluar el comportamiento
de tems y de grupos de tems; en dicho documento se hicieron explcitos los criterios de anlisis para cada in-
dicador durante el anlisis de tems.
Es de anotar que el anlisis de tems es un proceso cuantitativo y cualitativo mediante el cual se establece la
calidad de los tems de un instrumento, en relacin con los propsitos para los cuales fueron elaborados. Su real-
izacin exige armonizar el conocimiento profundo del objeto de evaluacin, la poblacin evaluada y los propsi-
tos de la evaluacin con la capacidad para interpretar adecuadamente los indicadores estadsticos disponibles. El
proceso de anlisis de tems del Estudio Principal conducir a la toma de decisiones en relacin con la inclusin o
exclusin de tems para la fase de calicacin y produccin de resultados del Estudio. Los indicadores reportados
en este documento sern objeto de anlisis por parte de los expertos en psicometra y en cada disciplina a n de
asegurar que la produccin de los resultados nales del SERCE utilice la informacin de mayor calidad.

DEPURACIN DE LA INFORMACIN

El Laboratorio Latinoamericano para la Evaluacin de la Calidad de la Educacin, LLECE, envi las bases de datos
con las respuestas de los estudiantes evaluados en el Estudio Principal del SERCE, a partir de las cuales se pro-
ducirn resultados. Esta base de datos ya haba sido depurada de acuerdo con criterios preestablecidos.

En concordancia con el procedimiento planteado en el documento tcnico para el Procesamiento de Datos para el
anlisis de tem y la Produccin de Resultados del Estudio Principal del SERCE, se realizaron dos procedimientos
de depuracin de las bases de datos recibidas para obtener los diferentes indicadores de los tems, de los bloques
y de la prueba. En este caso no se excluye la informacin del Estado de Nuevo Len. Dadas las caractersticas
de la prueba de ciencias y la participacin del Estado de Nuevo Len (Mxico), en este caso NO se elimina la
informacin de este Estado al estimar los indicadores para realizar el anlisis de tem. En Ciencias participaron
4711 estudiantes de este estado.

CAPTULO 5 PROCESAMIENTO DE DATOS 163


Procedimiento 1. Depuracin por preguntas no alcanzadas: Se eliminan los registros de aquellos estudiantes
evaluados que no respondan (no alcancen) los dos ltimos tems del bloque que ocupe la segunda posicin en
su cuadernillo. Esta eliminacin de registros se realiza antes de procesar los datos. La base de datos que resulta
despus de este proceso es la que se utiliza para la estimacin de los valores de ajuste de los estudiantes.

Procedimiento 2. Depuracin por desajuste de estudiantes evaluados: Se eliminan los registros de aquellos
ESTUDIANTESEVALUADOSCUYOVALORDEAJUSTEPRXIMOOLEJANOSEAINFERIORAOSUPERIORA%STEPROCESOSE
lleva a cabo slo con los estudiantes que respondieron por lo menos un tem de la prueba y las dos ltimas pre-
guntas del cuadernillo asignado. El resultado es una nueva base de datos slo con los registros de los estudiantes
que se utilizan para la estimacin de los parmetros de los tems, bloques y pruebas.

El proceso de depuracin se observa en la tabla 1, con informacin por pas.

TABLA 1. CIENCIAS 6. NMERO DE ESTUDIANTES, POR PAS, SEGN PROCESO DE DEPURACIN.

DEPURACIN
N N No
Pas N Desajuste N Final %
Inicial Alcanzadas
Argentina  177    
Colombia 5911 19 798 5094  
Cuba 5897 2 1491 4404 74,7
El Salvador   822   
Nuevo Len 4711   4002 85,0
Panam 5444 87 920  81,5
Paraguay     72,9
Per   780  81,4
Dominicana  99 1170   
Uruguay  112 1020 5021  

TOTAL 53979 807 9956 43216 80,1

Todos los pases y el Estado de Nuevo Len tienen un porcentaje de participacin, en la estimacin de los indi-
cadores de los tems, superior al 70%. Del total de 10 entidades con informacin para la estimacin de indica-
DORES PARTICIPANCONMSDELDESUSESTUDIANTESEVALUADOS
0ARAGUAY !RGENTINA Y0ANAM SONLOSPASESCONMSPRDIDADEREGISTROSDEINFOR-
macin por no alcanzar los 2 ltimos tems.

164 REPORTE TCNICO


2EPBLICA$OMINICANA #UBA 0ARAGUAY Y!RGENTINA SONLOSPASESCONUNA
prdida mayor al 20% de sus registros por desajuste, a partir de los datos de poblacin luego de la primera depu-
racin.

Luego de la depuracin realizada, el nmero de estudiantes por bloque y por cuadernillo cuya informacin se
UTILIZAPARALAESTIMACINDEINDICADORESSEENCUENTRAENLASTABLASY

Tabla 2. CIENCIAS 6. Nmero de estudiantes por bloque.

Bloque N
1 14700
2 14207
 
4 
5 
 

Tabla 3. CIENCIAS 6. Nmero de estudiantes por cuadernillo.

Cuadernillo N
1 
2 
 7541
4 
5 
 

CAPTULO 5 PROCESAMIENTO DE DATOS 165


ANLISIS DE DATOS

A continuacin se presentan los indicadores para realizar el anlisis de tem, de bloque y de prueba. Las tablas
presentan informacin separada por bloques para facilitar los procesos de anlisis por parte del equipo de exper-
tos; no obstante, el procesamiento de datos se realiz para la prueba como una totalidad.

INDICADORES
POR TEM

Tabla 4a.
CIENCIAS 6. Indicadores por tem.
Bloque 1.
Error de Med- Correlacin Ajuste Prximo Ajuste Lejano
tem &ORMATO Dicultad Discrim. N
icin punto-medida (Int) (Outt)
$#")4 SMUR -0.121 0.018 0.94 0.52 1.01 1.01 
$#")4 SMUR  0.018  0.57 1.09 1.14 
$#")4 SMUR  0.019   1.02 1.02 
$#")4 SMUR  0.018 1.17  0.95 0.92 
$#")4 SMUR -0.084 0.018 0.72 0.52  1.08 
$#")4 SMUR  0.018 0.87 0.42  1.05 
$#")4 SMUR 0.512 0.018 1.04  0.99 0.99 
$#")4 SMUR  0.02  0.75 0.98 0.97 
$#")4 SMUR  0.021 1 0.24 0.99 1.02 
$#")4 SMUR 0.411 0.018 0.89 0.41  1.04 
$#")4 SMUR  0.018   0.88  
$#")4 SMUR -0.055 0.018 1.28 0.51 0.94 0.92 
$#")4 SMUR  0.018 0.97  1.01 1.02 
$#")4 SMUR 0.509 0.018 1.21   0.92 
$#")4 CP 1.047  1.11 0.45 0.84 0.7 

166 REPORTE TCNICO


Tabla 4b.
CIENCIAS 6. Indicadores por tem.
Bloque 2.
Error de Med- Correlacin Ajuste Prximo Ajuste Lejano
tem &ORMATO Dicultad Discrim. N
icin punto-medida (Int) (Outt)
$#")4 SMUR  0.019   0.9 0.84 14181
$#")4 SMUR 0.894 0.019 0.52  1.2  14181
$#")4 SMUR 1.141 0.02 0.92 0.28 1.04  14181
$#")4 SMUR -1.181 0.02 1.19 0.75 0.9 0.82 14181
$#")4 SMUR  0.019     14181
$#")4 SMUR 0.175 0.018  0.47 1.08 1.1 14181
$#")4 SMUR  0.019 0.98  1.01 1.01 14181
$#")4 SMUR  0.019 0.84  1.05 1.07 14181
$#")4 SMUR 1.482 0.022  0.22 0.9 0.85 14181
$#")4 SMUR  0.019   0.92 0.91 14181
$#")4 SMUR 0.17 0.018 0.94 0.47 1.01 1.01 14181
$#")4 SMUR -0.459 0.018   0.92 0.89 14181
$#")4 SMUR 2.091  1.02 0.14 0.97 0.98 14181
$#")4 SMUR 1.252 0.021 0.8  1.11 1.22 14181
$#")4 CP    0.19 0.89 0.81 

Tabla 4c.
CIENCIAS 6. Indicadores por tem.
"LOQUE
Error de Med- Correlacin Ajuste Prximo Ajuste Lejano
tem &ORMATO Dicultad Discrim. N
icin punto-medida (Int) (Outt)
$#")4 SMUR -0.511 0.019 1.41  0.9  
$#")4 SMUR 0.797 0.019    1.18 
$#")4 SMUR  0.022 1.02  0.98 0.99 
$#")4 SMUR -0.195 0.018  0.55 0.91 0.9 
$#")4 SMUR  0.02  0.27 1.17  
$#")4 SMUR  0.022 0.98  1.02 1.01 
$#")4 SMUR -1.052 0.02 0.89  1.05 1.07 
$#")4 SMUR -0.577 0.019 1.02  1 0.99 
$#")4 SMUR 0.401 0.018 0.97 0.42 1.01  
$#")4 SMUR 1.759 0.024  0.17 1.09  
$#")4 SMUR  0.019 0.71  1.1 1.15 
$#")4 SMUR -0.127 0.018 1.14  0.97 0.97 
$#")4 SMUR  0.018 1.27 0.57 0.94 0.92 
$#")4 SMUR  0.024 0.98 0.17 1.02 1.02 
$#")4 CP 1.201 0.014 1.07 0.41 0.92 0.82 

CAPTULO 5 PROCESAMIENTO DE DATOS 167


Tabla 4d.
CIENCIAS 6. Indicadores por tem.
Bloque 4.
Error de Med- Correlacin Ajuste Prximo Ajuste Lejano
tem &ORMATO Dicultad Discrim. N
icin punto-medida (Int) (Outt)
$#")4 SMUR  0.018  0.58 1.14 1.17 14107
$#")4 SMUR 1.218 0.021 0.88 0.25 1.08 1.11 14107
$#")4 SMUR 0.11 0.018  0.47 1.07 1.09 14107
$#")4 SMUR -1.514 0.022 1 0.8 1 0.99 14107
$#")4 SMUR  0.018 1.22 0.4 0.94  14107
$#")4 SMUR -0.544 0.018   0.97  14107
$#")4 SMUR  0.018 1.05  0.99 0.99 14107
$#")4 SMUR  0.022 1.05 0.19  0.94 14107
$#")4 SMUR  0.018 1.49 0.49 0.91 0.89 14107
$#")4 SMUR  0.018  0.48 1.02 1.04 14107
$#")4 SMUR  0.02   1.1 1.14 14107
$#")4 SMUR -0.248 0.018  0.55 0.99 1.01 14107
$#")4 SMUR  0.022 1.08 0.19  0.9 14107
$#")4 SMUR -0.244 0.018 0.95 0.55 1  14107
$#")4 CP 0.9 0.015  0.71 0.91 0.91 14097

Tabla 4e.
CIENCIAS 6. Indicadores por tem.
Bloque 5.
Error de Med- Correlacin Ajuste Prximo Ajuste Lejano
tem &ORMATO Dicultad Discrim. N
icin punto-medida (Int) (Outt)
$#")4 SMUR 0.411 0.018 0.78 0.4  1.07 14918
$#")4 SMUR 0.112 0.017    1.11 14918
$#")4 SMUR  0.019 0.98  1.01 1.02 14918
$#")4 SMUR -0.494 0.018   0.92 0.89 14918
$#")4 SMUR -0.854 0.018   0.9 0.84 14918
$#")4 SMUR  0.018 0.51  1.15 1.22 14918
$#")4 SMUR 0.871 0.019 0.77  1.1  14918
$#")4 SMUR  0.017 1  1 0.99 14918
$#")4 SMUR 1.107 0.02 1.12  0.92  14918
$#")4 SMUR 0.779 0.019 1.04  0.98 0.98 14918
$#")4 SMUR 0.959 0.019 0.91 0.29 1.05  14918
$#")4 SMUR  0.019 0.98  1.01 1.01 14918
$#")4 SMUR -0.158 0.017 1.5 0.52 0.9 0.89 14918
$#")4 SMUR 0.785 0.019 1.08    14918
$#")4 CP 2.424 0.024 1.07 0.12 0.87 0.59 

168 REPORTE TCNICO


Tabla 4f.
CIENCIAS 6. Indicadores por tem.
"LOQUE

Error de Med- Correlacin Ajuste Prximo Ajuste Lejano


tem &ORMATO Dicultad Discrim. N
icin punto-medida (Int) (Outt)
$#")4 SMUR  0.02   1.09 1.11 14851
$#")4 SMUR  0.022  0.2 0.9  14851
$#")4 SMUR   1.02 0.18 0.98 0.97 14851
$#")4 SMUR  0.018  0.45 1.1 1.14 14851
$#")4 SMUR  0.02     14851
$#")4 SMUR -0.418 0.018 0.89 0.58  1.02 14851
$#")4 SMUR  0.018  0.52 0.94 0.91 14851
$#")4 SMUR  0.019 1.02  0.99 0.99 14851
$#")4 SMUR  0.018 0.58 0.5 1.09 1.11 14851
$#")4 SMUR -0.001 0.018  0.49 0.92 0.91 14851
$#")4 SMUR  0.018 0.75 0.5 1.05 1.07 14851
$#")4 SMUR  0.018 1.25  0.94  14851
$#")4 SMUR  0.018 0.55 0.44 1.11 1.14 14851
$#")4 SMUR  0.018  0.4 0.9 0.88 14851
$#")4 CP 1.085 0.011 1.18 0.71 0.78 0.71 

CAPTULO 5 PROCESAMIENTO DE DATOS 169


INDICADORES POR OPCIN

Tabla 5a.
CIENCIAS 6. Indicadores por opcin.
Bloque 1.
Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad
1  0.01 1  
2 -0.14 0.01  -0.1 
  0.02  -0.15 
$#")4 1
4 -0.45 0.01 0.84  
Multimarca -0.79 0.14  -0.05 45
Omisin -0.49  0.8 -0.05 
1 0.21 0.01 1.07 0.24 
2  0.01   
   1.11 -0.09 754
$#")4 1
4 -0.45    829
Multimarca -0.7 0.21  -0.04 
Omisin  0.07 0.72 -0.05 89
1 -0.29 0.01 0.89 -0.15 
2 -0.12 0.01  -0.1 
  0.01 0.98 -0.14 
$#")4 4
4 0.49 0.02 1.02  4772
Multimarca -0.55 0.12 0.78 -0.04 54
Omisin  0.05 1.04 -0.05 
1  0.01 1.04  
2 -0.5 0.01 0.82 -0.25 
 0.28 0.01 0.95  
$#")4 
4  0.04 0.82 -0.12 
Multimarca -0.77   -0.08 
Omisin -0.55  0.82  119

170 REPORTE TCNICO


1 0.27 0.01  0.28 7579
2 -0.22 0.02  -0.1 
  0.02 1.07 -0.12 1495
$#")4 1
4  0.01 1.08  
Multimarca   0.72 -0.04 
Omisin -0.29 0.09   112
1  0.01 1.05  
2  0.01 1.01 -0.15 2709
 -0.24 0.01 1.07 -0.14 
$#")4 1
4 -0.17 0.01 1.09 -0.1 
Multimarca -0.55 0.11 0.89 -0.05 77
Omisin -0.51    145
1  0.01 0.87  4051
2  0.02 0.95 -0.15 
 -0.09 0.01 1.19  
$#")4 4
4  0.01 1  
Multimarca -0.57  0.9 -0.04 71
Omisin   0.89 -0.04 
1 0.19 0.01 0.98  
2   0.71  594
  0.02 0.78 -0.19 
$#")4 1
4  0.02 1.14 -0.14 2048
Multimarca -1.44 0.25 0.47  20
Omisin   0.81 -0.05 108
1 -0.11 0.01 1.04 -0.07 
2 -0.09 0.01 1.01 -0.1 
  0.02   
$#")4 
4 -0.42 0.02  -0.19 1999
Multimarca -0.48  0.9  55
Omisin  0.05 0.81  229

CAPTULO 5 PROCESAMIENTO DE DATOS 171


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad
1 -0.25 0.01 0.98 -0.15 
2  0.02 1  
  0.01   
$#")4 
4  0.01 1.09 -0.1 
Multimarca -1.18  0.42  
Omisin  0.04   
1 -0.29 0.01 0.9 -0.29 
2 0.57 0.01  0.49 
 -0.4 0.02 0.8  1089
$#")4 2
4 -0.49 0.02  -0.18 
Multimarca -1.05   -0.05 25
Omisin    -0.05 128
1 0.4 0.01 0.94 0.42 
2  0.01   
  0.02 0.91  
$#")4 1
4 -0.45 0.01 0.79 -0.19 
Multimarca  0.24 0.28  
Omisin  0.05 1 -0.05 248
1 -0.29 0.01 0.94 -0.17 
2 -0.17 0.01 1.01 -0.11 
 -0.2 0.01 1.08 -0.12 2887
$#")4 4
4 0.45 0.01   5401
Multimarca -1.01 0.2 0.51 -0.05 27
Omisin   0.74 -0.07 189
1 -0.25 0.02 0.99 -0.12 1995
2  0.01   1997
 0.52 0.01 0.91 0.44 5725
$#")4 
4 -0.29 0.01 0.92 -0.24 
Multimarca -1.2 0.17   
Omisin  0.09 0.89 -0.05 89

172 REPORTE TCNICO


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad
1  0.01 0.92  8424
1 crdito
nulo, 2 2  0.02  0.12 1875
crdito   0.02 0.57 0.57 
$#")4
parcial, 4 0 0 0 0 0
CRDITOMultimarca 0 0 0 0 0
total
Omisin -0.47 0.01 0.59 -0.21 2051

Tabla 5b.
CIENCIAS 6. Indicadores por opcin.
Bloque 2.
Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad
1 -0.28 0.02 0.98 -0.11 
2 -0.5 0.01 0.74  
  0.01 0.92  
$#")4 
4 -0.49 0.02 0.79  855
Multimarca -0.47 0.11 0.91 -0.04 
Omisin   0.74 -0.08 150
1 0.15 0.01 1.5 0.09 
2 0.21 0.01  0.12 
 -0.12 0.02   
$#")4 2
4 -0.27 0.01 0.85 -0.18 2597
Multimarca  0.09 0.77 -0.05 98
Omisin -0.45 0.04  -0.08 224
1 -0.01 0.01 1.1 -0.07 
2 0.48 0.02 1.07  
  0.01   
$#")4 2
4 0.09 0.02 1.2 0.01 
Multimarca -0.71 0.18 0.7 -0.04 
Omisin  0.09   91

CAPTULO 5 PROCESAMIENTO DE DATOS 173


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad

1  0.01  0.4 


2  0.02 0.75 -0.24 
  0.01 0.77  1487
$#")4 1
4 -0.47  0.9 -0.12 
Multimarca -1.01 0.15 0.57 -0.07 41
Omisin   0.88 -0.07 152
1 -0.29 0.01 0.97 -0.24 
2  0.02 0.7  
 0.29 0.01 0.97  9185
$#")4 
4 -0.49 0.02 0.77  590
Multimarca -0.75 0.12 0.7 -0.07 71
Omisin  0.08  -0.07 91
1 -0.51 0.02  -0.22 
2  0.01 1.08  
 -0.1 0.01  -0.11 
$#")4 2
4 0.02 0.02  -0.02 2174
Multimarca -0.84 0.15   
Omisin -0.49  0.78 -0.07 171
1 -0.44 0.02 0.71 -0.21 
2 0.05 0.01 1.25 -0.01 5494
  0.01  -0.21 
$#")4 4
4 0.5 0.01 1  
Multimarca -0.85 0.12  -0.07 70
Omisin -0.41  0.77  157
1  0.01 1.08 0.29 
2 -0.17 0.02 0.98 -0.1 
 0.19 0.02 1.54  
$#")4 1
4 -0.25 0.01 0.87 -0.25 4770
Multimarca -0.94  0.71 -0.05 25
Omisin     195

174 REPORTE TCNICO


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad

1 0.78 0.02 0.84 0.45 


2 -0.05 0.02 1.04 -0.04 1175
 -0.15 0.01  -0.29 
$#")4 1
4 -0.17 0.02 0.98 -0.09 1418
Multimarca   0.42 -0.05 
Omisin -0.22  0.88 -0.04 192
1  0.01 0.78 -0.21 
2 0.54 0.01 0.92 0.44 
 -0.29 0.01 0.85 -0.2 2890
$#")4 2
4 -0.1 0.01 1.04 -0.11 
Multimarca -0.8 0.17  -0.05 41
Omisin -0.4 0.07 0.82 -0.05 
1 -0.07 0.01  -0.09 
2  0.02 0.9 -0.14 1518
  0.01   
$#")4 
4  0.01 0.87 -0.2 2440
Multimarca  0.12   
Omisin -0.47 0.07 0.81  120
1  0.01 0.81 -0.28 2702
2  0.01 0.92 0.42 
 -0.27 0.02 1  
$#")4 2
4  0.02 0.84  991
Multimarca -1.18 0.19  -0.07 
Omisin
1  0.01 0.94 -0.15 7547
2 -0.28 0.01 0.74 -0.17 2251
 0.78  0.99  2014
$#")4 
4 0.19 0.02 1.24 0.07 2254
Multimarca -0.91 0.15   
Omisin -0.59 0.1   95

CAPTULO 5 PROCESAMIENTO DE DATOS 175


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad

1  0.02 1.27 0.21 


2 -0.08 0.02 1.15 -0.07 2020
 -0.1 0.01 0.95 -0.11 
$#")4 1
4 0.04 0.01 1.15 -0.02 4581
Multimarca  0.1  -0.07 91
Omisin -0.47 0.07   148
1 -0.14 0.01 0.9  
1 crdito 2 0.87 0.02 0.79  
nulo, 2  0 0 0 0 0
$#")4
crdito 4 0 0 0 0 0
total Multimarca 0 0 0 0 0
Omisin -0.12 0.02 0.89 -0.05 922

176 REPORTE TCNICO


Tabla 5c.
CIENCIAS 6. Indicadores por opcin.
"LOQUE
Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad
1 -0.5 0.01  -0.29 
2  0.01 0.89 -0.18 
  0.01 0.89 -0.17 
$#")4 4
4  0.01 0.91 0.44 8405
Multimarca -1.04    8
Omisin   0.85 -0.04 88
1 -0.11 0.01 1.04 -0.11 
2 0.2 0.01 1.2 0.15 4547
 -0.04 0.02 1.09 -0.04 1885
$#")4 2
4  0.01 1.24 -0.01 
Multimarca    -0.05 
Omisin   0.87 -0.04 129
1 -0.14 0.01 0.89 -0.12 
2 0.05 0.01  0.01 
 -0.18 0.01 0.87 -0.19 
$#")4 4
4 0.48 0.02 0.99  
Multimarca -0.51  0.81 -0.04 
Omisin  0.05 0.78 -0.04 
1  0.01 0.85 -0.27 
2 -0.52  0.71 -0.12 
 -0.25 0.01 0.94 -0.19 2521
$#")4 4
4  0.01 0.91  
Multimarca -0.92 0.22 0.57 -0.05 22
Omisin  0.09  -0.04 82
1 -0.28 0.01 0.8  
2 0.22 0.01  0.19 
 0.15 0.01 1.22 0.09 
$#")4 
4 -0.18 0.02  -0.1 
Multimarca -1.28  0.48 -0.04 
Omisin -0.18 0.04 0.9 -0.04 

CAPTULO 5 PROCESAMIENTO DE DATOS 177


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad

1 -0.11 0.01 0.97 -0.18 


2  0.01 1.01 0.28 
 0.15 0.04   700
$#")4 2
4 -0.04 0.01 1.01  
Multimarca  0.11 0.75 -0.05 
Omisin  0.09 0.77 -0.05 84
1  0.01 1.04 0.21 
2 -0.11 0.01 1.19 -0.09 
 -0.28 0.02 0.97 -0.1 718
$#")4 1
4 -0.51  0.79 -0.15 
Multimarca -0.57 0.19 0.99 -0.04 
Omisin -0.27 0.05  -0.05 
1 -0.45 0.02 0.84 -0.24 
2 0.22 0.01 1  8594
 -0.24 0.02 1 -0.12 1299
$#")4 2
4 -0.11 0.01 1.12 -0.08 1892
Multimarca -0.79 0.19  -0.05 25
Omisin  0.08 0.9 -0.04 82
1 -0.14 0.01  -0.11 2497
2 -0.1 0.01 1.09 -0.12 4002
  0.01 1  
$#")4 
4  0.02 0.78  1142
Multimarca -0.29 0.2 1.04 -0.02 27
Omisin  0.05  -0.07 245
1 -0.5 0.02 0.59 -0.18 778
2  0.02 1.41 0.12 
 -0.24 0.02 0.82  
$#")4 2
4 0.09 0.01 1.11 0.09 8928
Multimarca -1.4 0.44 0.4 -0.05 9
Omisin  0.07  -0.05 100

178 REPORTE TCNICO


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad

1  0.01 1.18 0.18 


2 -0.22 0.02 0.94 -0.11 1280
 -0.01 0.01 1.12  7071
$#")4 1
4   0.88 -0.09 
Multimarca -1.08  0.52 -0.05 14
Omisin   0.78 -0.05 125
1  0.01  -0.18 
2 -0.14 0.01 1.12 -0.1 
  0.01 0.82 -0.19 1519
$#")4 4
4 0.29 0.01 0.97  
Multimarca     14
Omisin -0.27 0.04   251
1 -0.28 0.01 0.91 -0.24 
2 0.29 0.01 0.95  7800
  0.02 0.9 -0.14 1120
$#")4 2
4  0.02 0.87 -0.17 
Multimarca  0.25 0.79 -0.04 20
Omisin  0.08 0.88 -0.04 71
1 -0.22 0.01 0.78  4271
2 -0.41 0.01  -0.24 1814
 0.25 0.01  0.2 4812
$#")4 4
4 0.47 0.02 1.02  
Multimarca  0.14  -0.05 
Omisin -0.2 0.04 0.82 -0.05 
1  0.01 0.98  
1 crdito
nulo, 2 2  0.01 0.87 0.19 2508
crdito  0.95 0.02 0.72 0.44 1557
$#")4
parcial, 4 0 0 0 0 0
CRDITO Multimarca 0 0 0 0 0
total
Omisin  0.02 0.71  1179

CAPTULO 5 PROCESAMIENTO DE DATOS 179


Tabla 5d.
CIENCIAS 6. Indicadores por opcin.
Bloque 4.
Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad
1     
2 -0.05 0.01  -0.04 
  0.01  0.12 8127
$#")4 
4 -0.15  1.19  
Multimarca  0.08  -0.05 91
Omisin -0.48 0.07 0.82 -0.05 89
1  0.01 1.25 0.04 5504
2  0.02 0.84  1298
 0.25 0.01 1.12 0.2 
$#")4 
4 -0.21 0.01 0.91  
Multimarca -0.24 0.07 0.94  
Omisin   0.82 -0.04 121
1 -0.12 0.01 1.15 -0.1 
2 -0.12 0.01   
  0.02  -0.18 
$#")4 4
4  0.01 1.07 0.22 
Multimarca  0.12 1.24 -0.02 
Omisin  0.05  -0.04 
1 0.08 0.01 0.99 0.25 11220
2  0.02 0.98  
    -0.11 
$#")4 1
4  0.02  -0.14 1401
Multimarca  0.11 0.8 -0.05 50
Omisin -0.7 0.08  -0.05 41
1 -0.49 0.02 0.71 -0.18 
2 -0.47 0.02  -0.15 854
  0.01 0.94  
$#")4 
4 -0.18 0.01 0.98 -0.2 
Multimarca  0.11   52
Omisin -0.5 0.05 0.74  

180 REPORTE TCNICO


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad

1 -0.41 0.02 0.9  779


2  0.01 0.9 -0.19 1942
 -0.28 0.01 1.02 -0.17 
$#")4 4
4 0.19 0.01 0.97  
Multimarca -0.7 0.14 0.74 -0.05 41
Omisin  0.09 1.04  
1  0.01 0.79 -0.24 
2 -0.05 0.01 1.17  
  0.02  -0.17 
$#")4 4
4 0.27 0.01 1  
Multimarca    -0.08 102
Omisin -0.58 0.05 0.71 -0.08 158
1  0.01 0.87 -0.18 
2  0.01   
 0.51 0.02   
$#")4 
4 -0.29 0.02 0.79 -0.1 891
Multimarca    -0.05 
Omisin   0.9 -0.05 
1  0.01 0.91 0.44 
2  0.01  -0.27 4198
  0.01 0.9 -0.14 
$#")4 1
4  0.02   
Multimarca -0.97 0.19  -0.05 21
Omisin -0.48 0.04 0.78 -0.1 
1  0.01 1 -0.17 
2 0.21 0.01 1.04 0.28 
 -0.15 0.01 1.12 -0.08 
$#")4 2
4 -0.24 0.02 1.02 -0.09 
Multimarca -1.01 0.21 0.57 -0.05 22
Omisin -0.41 0.04 0.82 -0.08 

CAPTULO 5 PROCESAMIENTO DE DATOS 181


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad
1 -0.04 0.01 1.14 -0.02 
2 0.01 0.01  0.01 
 -0.19 0.01 0.97 -0.15 
$#")4 4
4 0.21 0.01 1.15 0.18 
Multimarca -0.45 0.12 0.79  
Omisin -0.27 0.04 0.98 -0.05 295
1 -0.48 0.02 0.79 -0.21 
2  0.02 0.89  1040
 0.2 0.01 0.98  7754
$#")4 
4 -0.14 0.01 1.22 -0.09 
Multimarca  0.14 0.8 -0.05 
Omisin    -0.11 474
1 -0.14 0.01  -0.2 8179
2 -0.22 0.01 0.88 -0.11 1912
 -0.05 0.02 1.02 -0.02 
$#")4 4
4  0.02 0.89  2719
Multimarca  0.2 0.52 -0.05 24
Omisin  0.05 0.74  
1 -0.18 0.01 1.12 -0.1 2251
2  0.02 1 -0.12 
 -0.29 0.01 1.05 -0.18 
$#")4 4
4 0.19 0.01 1  7740
Multimarca   0.77 -0.05 49
Omisin -0.48 0.05  -0.07 
1  0.01 0.95  
1 crdito
nulo, 2 2  0.01 0.88 0.22 7900
crdito  0.84  0.92  1078
$#")4
parcial, 4 0 0 0 0 0
CRDITOMultimarca 0 0 0 0 0
total
Omisin  0.02 0.77 -0.21 

182 REPORTE TCNICO


Tabla 5e.
LECTURA 3. Indicadores por opcin.
Bloque 5.
Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad
1  0.01 0.92 -0.2 
2  0.02 1.09  
 -0.09 0.01 1.18 -0.05 
$#")4 4
4  0.01 1.08 0.27 
Multimarca -0.54  0.81  
Omisin  0.05 0.82  179
1  0.01 0.9 -0.2 
2 0.19 0.01 1.05 0.25 
  0.02 0.91 -0.1 911
$#")4 2
4  0.01 1.48 -0.02 
Multimarca  0.09   88
Omisin -0.58 0.05 0.7 -0.08 179
1  0.02 0.79 -0.1 705
2 -0.22 0.01 1.01 -0.27 
    0.02 1021
$#")4 4
4  0.01 1  
Multimarca -0.78 0.12 0.54 -0.04 24
Omisin  0.1  -0.05 55
1 -0.47 0.01 0.81 -0.29 
2  0.01 0.9 -0.15 1578
 0.24 0.01  0.41 8899
$#")4 
4  0.02  -0.11 
Multimarca  0.11 0.75 -0.04 45
Omisin -0.41 0.04 0.88  227
1 -0.59 0.02 0.75 -0.21 
2 -0.45 0.01  -0.24 2571
 0.21 0.01 0.91 0.42 10022
$#")4 
4 -0.57 0.02  -0.17 929
Multimarca -0.71 0.14 0.71 -0.04 
Omisin -0.49  0.81 -0.04 75

CAPTULO 5 PROCESAMIENTO DE DATOS 183


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad

1  0.01 1.2 0.15 5554


2  0.01   
 -0.4 0.01  -0.17 
$#")4 1
4 0.04 0.01 1.58 0.05 
Multimarca -0.29 0.12 1 -0.02 40
Omisin -0.42   -0.08 
1 -0.18 0.01  -0.11 4120
2 -0.19 0.01 1.02 -0.1 2929
 -0.04 0.01 1.22 0 
$#")4 4
4  0.01 1.19 0.21 
Multimarca -0.51  0.75  28
Omisin  0.05 0.81 -0.05 214
1 0.2 0.01 1.01  
2  0.02 0.98 -0.1 887
 -0.42 0.02 0.89 -0.1 
$#")4 1
4  0.01 0.98  4892
Multimarca  0.12 0.8 -0.04 42
Omisin -0.49   -0.05 
1 -0.24 0.01 0.88 -0.22 
2 0.54 0.02 0.94 0.42 
  0.02 0.9 -0.08 
$#")4 2
4 -0.2 0.01 0.92 -0.11 
Multimarca -0.42 0.17 0.84 -0.02 25
Omisin  0.04 0.85  294
1  0.01 1.01 -0.15 
2  0.01 1  4827
 -0.48 0.02  -0.15 
$#")4 2
4 -0.29 0.01 0.91  2155
Multimarca  0.14   22
Omisin    -0.07 

184 REPORTE TCNICO


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad

1 -0.28 0.01 0.88 -0.19 


2 -0.19 0.01 1.07 -0.1 
  0.01  0.28 
$#")4 
4 -0.02 0.01  0 
Multimarca -0.88 0.15  -0.04 18
Omisin  0.05 0.87 -0.05 212
1  0.01 0.89 -0.21 
2  0.02 0.82 -0.14 
  0.01 1.01  
$#")4 
4 -0.07 0.01 1.14 -0.04 4805
Multimarca -0.58    29
Omisin -0.42 0.05 0.82  198
1 -0.45 0.01 0.81 -0.29 
2  0.01 0.9 0.44 7798
  0.01 0.9  1744
$#")4 2
4  0.01 0.99  
Multimarca     24
Omisin   0.82  
1 -0.27 0.01 0.9 -0.22 
2  0.01  -0.09 
 0.42 0.01 0.97  4808
$#")4 
4  0.02 0.9 -0.11 957
Multimarca  0.17 0.82 -0.01 14
Omisin  0.05 0.95 -0.04 210
1 -0.12 0.01 0.94 -0.2 
1 crdito
nulo, 2 2 0.84    
crdito  2.01  0.49 0.4 
$#")4
parcial, 4 0 0 0 0 0
CRDITO Multimarca 0 0 0 0 0
total
Omisin  0.01 0.71 -0.15 2278

CAPTULO 5 PROCESAMIENTO DE DATOS 185


Tabla 5f.
CIENCIAS 6. Indicadores por opcin.
"LOQUE
Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad
1 -0.21 0.01 1.07  
2  0.02 0.84 -0.12 1581
  0.02 1.12  
$#")4 
4  0.01 1.2  5490
Multimarca   0.58  21
Omisin  0.05 0.98 -0.05 
1  0.01 0.77  5277
2 0.02 0.01 1.22 0.02 2529
 0.79 0.02 0.82  
$#")4 
4 -0.22 0.01 0.89 -0.14 
Multimarca -0.49 0.09  -0.04 71
Omisin     145
1 -0.14 0.02 1.01  
2 -0.11 0.01 1.04  
 -0.19 0.01 0.91 -0.18 
$#")4 4
4  0.02 0.97  
Multimarca -0.48 0.15 0.75 -0.02 
Omisin -0.27   -0.04 221
1 -0.25 0.01 1.17  
2 0.21 0.01 1.09 0.24 
 -0.04 0.01  -0.02 
$#")4 2
4 -0.4 0.02 0.92 -0.12 1059
Multimarca     28
Omisin -0.55   -0.07 
1 0.14 0.02 1.41 0.1 
2 -0.05 0.02 1.27 -0.02 2809
 -0.11 0.01 1.22 -0.08 
$#")4 1
4 0.02 0.01 1.27 0.02 
Multimarca -0.75 0.17  -0.04 27
Omisin -0.51  0.77 -0.07 

186 REPORTE TCNICO


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad

1 0.21 0.01   


2 -0.24 0.01 1.12 -0.12 2525
 -0.45 0.01 0.85 -0.2 2129
$#")4 1
4 -0.25 0.02 1.08 -0.09 
Multimarca   0.94  
Omisin  0.08 0.72  88
1 -0.4 0.01 0.89 -0.21 2801
2  0.01 0.94 0.41 7777
  0.01 0.88 -0.19 2589
$#")4 2
4  0.02  -0.14 1477
Multimarca -0.9 0.12  -0.05 
Omisin -0.45 0.05 0.85  217
1 -0.41 0.01 0.78 -0.2 2502
2 0.44 0.01 0.99  4997
  0.02 0.92 -0.09 828
$#")4 2
4  0.01 1.07 -0.14 
Multimarca  0.12 0.8  
Omisin -0.47 0.05 0.77  210
1 -0.28 0.01  -0.15 
2 0.2 0.01 1.09 0.25 
 -0.18 0.01 1.19 -0.08 
$#")4 2
4 -0.19 0.02 1.22 -0.08 
Multimarca -0.51    
Omisin -0.47  0.9  188
1 -0.42 0.01  -0.28 4024
2 -0.4 0.02 0.89 -0.14 
 -0.29 0.01 1.01  2020
$#")4 4
4  0.01 0.91  
Multimarca  0.18 0.98  29
Omisin  0.08   117

CAPTULO 5 PROCESAMIENTO DE DATOS 187


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad

1  0.01 1.12 -0.14 2892


2 0.24 0.01 1.05 0.28 7402
 -0.27 0.01 1.05 -0.14 
$#")4 2
4 -0.22 0.02 1.18 -0.08 1554
Multimarca  0.18 0.97  
Omisin -0.4 0.04 0.9  
1 -0.4 0.01 0.85 -0.22 2911
2  0.01 0.99 -0.15 2592
  0.01 0.97 -0.15 2209
$#")4 4
4  0.01 0.94 0.41 
Multimarca  0.19 1  29
Omisin  0.04 0.99  
1 0.21 0.01 1.17  
2 -0.12 0.01 1.18  
 -0.24 0.01 1.02 -0.12 
$#")4 1
4 -0.22 0.01 1.07 -0.1 
Multimarca -0.49 0.1 0.94 -0.04 
Omisin -0.41 0.09 1 -0.04 97
1  0.01   
2 0.48 0.01 0.89  
  0.02  -0.09 1005
$#")4 1
4  0.01  -0.14 2199
Multimarca   1.12 -0.02 12
Omisin  0.09 0.97  84
1 crdito 1 -0.42 0.01 0.85 -0.42 
nulo, 2 2 0.11 0.01 0.77 0.07 
crdito
  0.01   
parcial,
$#")4 4  0.04 0.54  
CRDITO
parcial, Multimarca 0 0 0 0 0
4 crdito
Omisin -0.5 0.01 0.71 -0.2 1725
total

188 REPORTE TCNICO


MAPA DE DISTRIBUCIN DE HABILIDADES Y DIFICULTADES

Tabla 6.
CIENCIAS 6. Mapa de distribucin de habilidades y dicultades.

%STUDIANTES-!0/&)TEMS
<more>|<rare>
5 . +
. |
. |
. |
. |
|
4 . +
. |
. |
. |
\$-")4
\$-")4

. |T
\$-")4
. |
\$-")4$-")4
\$-")4
2 . +
4\$-")4$-")4
\3$-")4$-")4$-")4$-")4$-")4
\$-")4$-")4$-")4
\$-")4$-")4
\$-")4$-")4$-")4$-")4$-")4
$-")4$-")4$-")4$-")4$-")4
 $-")4$-")4$-")4$-")4$-")4
$-")4$-")4$-")4
3\$-")4$-")4$-")4$-")4$-")4
$-")4
\$-")4$-")4$-")4$-")4
\$-")4$-")4$-")4$-")4$-")4
$-")4
\-$-")4$-")4$-")4$-")4$-")4
\$-")4$-")4$-")4
- $-")4$-")4$-")4

CAPTULO 5 PROCESAMIENTO DE DATOS 189


\$-")4$-")4$-")4$-")4
\$-")4$-")4
\$-")4$-")4$-")4
\$-")4$-")4$-")4$-")4$-")4
$-")4
3\3$-")4$-")4
 $-")4$-")4$-")4$-")4$-")4
\$-")4$-")4
\$-")4$-")4
.# |
\$-")4$-")4
. T|
 $-")4$-")4
. |T
\$-")4
. |
. |
\$-")4

\$-")4
. |
|
. |
|
-4 . +
<less>|<frequ>

#ADASMBOLO@EQUIVALEAESTUDIANTES%LPUNTO INDICAQUEHAYENTREYESTU-
diantes.

190 REPORTE TCNICO


02/-%$)/ $%36)!#).%34.$!296!,/2%3-8)-/9-.)-/$%$)&)#5,4!$%3$%4%-3

Grco 1.

#)%.#)!30ROMEDIO DESVIACINESTNDARYVALORESMXIMOYMNIMODEDIlCULTADESDE
tems, por bloque.

1.60

1.50

1.40

1.30

1.20 B1
B2
B3
1.10
B4
B5
1.00
B6

0.90

0.80

0.70

0.60
-4.00 -3.00 -2.00 -1.00 0.00 1.00 2.00 3.00 4.00

P r o me d io d e d ific u lta d ite ms

CAPTULO 5 PROCESAMIENTO DE DATOS 191


FUNCIN DE INFORMACIN DE LA PRUEBA

Grco 2.

#)%.#)!3&UNCINDEINFORMACIN

Funcin de informacin de la prueba


Informacin

Medida

192 REPORTE TCNICO


VALOR DE DIFICULTAD DE TEMS POR PAS

Tabla 7a.
CIENCIAS 6. Valor de dicultad de cada tem por pas.
Bloque 1.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4   -0.272  -0.789 -0.402  -0.119  0.557
$#")4   -0.592 0.187 -0.485  -1.047 0.015  
$#")4   -0.21  1.417 0.775 1.211   0.71
$#")4   -2.029   -0.448 -0.472   
CAPTULO 5

$#")4   -1  0.278 0.427  0.709 -0.499 -0.711
$#")4  0.28 -0.182      0.787 0.111
$#")4 0.721  -0.552     0.907 1.409 0.508
$#")4 -1.497 -0.799 -2.059  -1.024 -1.255 -1.272 -0.972  -1.741
$#")4          
$#")4 0.271  -0.98 0.498 0.718 0.715 0.725   
$#")4  0.981 -1.801   0.474 1.117  2.094 
$#")4 0.171    -1.514 -0.155 0.872 0.915  
$#")4  0.549  0.757      0.198
$#")4 0.577    0.248   0.911  -0.207
$#")4   -0.015     1.291 2.271 
PROCESAMIENTO DE DATOS
193
194
REPORTE TCNICO

Tabla 7b.
CIENCIAS 6. Valor de dicultad de cada tem por pas.
Bloque 2.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 -1.018 -0.852    0.091 -0.428   -1.29
$#")4 1.218 1.199  0.708 0.777 1.095  0.448  1.52
$#")4   0.118 1.208  1.522  1.159  0.958
$#")4 -1.259  -2.94  -0.914    -0.084 
$#")4  -0.871    -0.449 -0.529  0.19 -0.882
$#")4 0.409 0.294 -0.097  0.229 0.094  0.571 0.557 0.1
$#")4  0.955 0.079 0.747 0.914  0.824   1.041
$#")4  1.487 -0.754  0.74 0.917   0.908 0.248
$#")4 1.72 1.749 -0.081 2.299    1.845 2.15 1.152
$#")4  0.585 -0.74  0.457  0.921 1.057  0.428
$#")4 0.152   0.195    0.054 0.975 
$#")4  -0.584  -0.781  -0.579   0.752 
$#")4  2.218   1.988     1.797
$#")4    1.55      1.091
$#")4 1.551 2.248 -0.208  1.925  1.528   1.015
Tabla 7c.
CIENCIAS 6. Valor de dicultad de cada tem por pas.
"LOQUE
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4      -0.442 -0.492  0.908 
$#")4 0.844 0.958 0.494  0.552 0.557  0.898  
$#")4  1.77   1.559 1.451 1.814 2.229  0.829
$#")4 -0.22        0.145 
CAPTULO 5

$#")4    0.902 1.084 1.109 0.994 0.847  
$#")4   1.058 1.257 1.07 1.501 1.571 1.808 2.19 
$#")4   -1.972  -0.877 -1.191 -1.074 -0.897 -0.787 
$#")4 -0.408  -1.072  -1.242    0.281 -0.51
$#")4   -0.259  0.228    1.17 0.188
$#")4  2.082 0.504 1.891   1.89   2.252
$#")4 1.281 0.912 0.197  0.84   0.809 0.51 
$#")4  -0.228  -0.144   -0.092  0.514 -0.452
$#")4  -0.447     0.152  0.481 -0.495
$#")4     1.704 1.895 1.829 1.904 2.5 1.722
$#")4  1.125   1.074   1.407 2.517 
PROCESAMIENTO DE DATOS
195
196
REPORTE TCNICO

Tabla 7d.
CIENCIAS 6. Valor de dicultad de cada tem por pas.
Bloque 4.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4    -0.79  -0.44    
$#")4  0.459    1.588   1.007 
$#")4  -0.401 -0.201 -0.424 -0.124 0.175 0.204 0.95 0.009 0.598
$#")4 -1.924    -2.401 -1.725 -0.822 -0.775  -1.852
$#")4 0.081 0.427   0.044 0.891 0.751  0.978 
$#")4 -0.428 -0.514  -0.595 -0.747 -1.17 -0.185   
$#")4 0.205     0.595 0.251  1.204 0.15
$#")4  1.815   1.101  1.872 2.075  1.517
$#")4 -0.099  -1.504 0.545 -0.492  0.418 0.28  -0.412
$#")4 0.15  -0.958  -0.04 0.008  0.297 0.229 -0.187
$#")4 1.271 0.898   1.489 1.455 0.904   
$#")4  -0.17 -1.29   -0.097  -0.089  
$#")4 2.299 2.089  2.252 2.292 1.912 1.904  2.492 1.129
$#")4 -0.24  -0.295 -0.447  -0.229  0.174  
$#")4 1.204   2.05 1.844 0.199    
Tabla 7e.
CIENCIAS 6. Valor de dicultad de cada tem por pas.
Bloque 5.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 0.984  -0.717 -0.959  -0.51 0.91 1.144  1.449
$#")4      0.485 0.551  0.705 -0.221
$#")4 0.79  -0.495 1.202  1.757 1.24 1.515 1.785 
$#")4 -0.774 -0.778  -0.211 -0.428  -0.027 0.11 0.491 
CAPTULO 5

$#")4 -0.949 -1.149   -1.191  -0.475 -0.497  
$#")4      0.479 0.701 0.455 0.441 0.54
$#")4   -0.125 0.947   0.858 0.948 0.8 0.842
$#")4  -0.451    -0.27 0.181   
$#")4 1.014 0.987   1.078  1.402 1.812  0.9
$#")4 0.71 0.85 -0.747 0.998  2.029 0.741  1.771 
$#")4 0.97  0.217   1.208  1.127  
$#")4 1.121 0.488   0.992 1.185 0.891 0.888 1.249 
$#")4 -0.188   0.207  0.158   0.717 -0.574
$#")4 0.797 0.747    1.072 0.971 1.144  
$#")4   1.201  2.112 2.229   4.982 2.009
PROCESAMIENTO DE DATOS
197
198
REPORTE TCNICO

Tabla 7f.
CIENCIAS 6. Valor de dicultad de cada tem por pas.
"LOQUE
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4    1.204    1.104  
$#")4   0.47 1.881 1.272 1.749 1.942 2.074  
$#")4 1.577 2.104 0.209 1.899  2.144 1.579   
$#")4 0.25 0.007    -0.004   0.444 0.202
$#")4    1.222 0.977 1.001 1.449   1.117
$#")4 -0.475   -0.775  -0.04 -0.524  0.157 
$#")4   -1.194 0.177 -0.215 0.12 -0.272 -0.09 0.77 -0.048
$#")4 0.441 0.745        
$#")4 0.218 -0.119 -0.474  0.044 -0.099  -0.055  
$#")4  0.014   -0.52  0.098  0.959 -0.182
$#")4 -0.04 -0.054 -0.408   0.052  -0.055  -0.155
$#")4     0.155  0.225 0.175 1.202 
$#")4   -1.141 0.591 0.489    0.179 0.12
$#")4 0.004 0.99       1.749 -0.548
$#")4 1.198     1.207  1.218 2.059 0.841
VALOR DE AJUSTE DE TEMS POR PAS

Tabla 8a.
CIENCIAS 6. Valor de ajuste de cada tem por pas.
Bloque 1.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 0.97 0.88    0.95 0.97 0.9 0.95 1.07
$#")4 1.19 1 1.02 1.12 1.17 1.05 1.11 1.11 1.01 1.14
$#")4 0.97 1.01 1.2  1.02 0.97 1.08 0.99 1 1.07
$#")4  0.98 0.92 0.99  0.92 0.94 0.94 0.92 
CAPTULO 5

$#")4 1.14  1.01  1.09 1.08 1.07  1.01 1.14
$#")4   1.01 1.04 1.01 1 1.01 1.04  1.05
$#")4 0.98 0.97 1.02 0.97 0.98 0.99 0.98  1.09 1
$#")4 0.95 1.01 0.8 1 0.94 1.01 1.05 1  0.98
$#")4 1.02 1.07 0.87 1.09 1.08 1.01 1.07 1.08 1.08 1.08
$#")4 0.94 1.08 1.02 1.09 1.19 1.1 0.98 1.08  1.04
$#")4 0.92 0.95 0.9       
$#")4 0.97 0.91  0.9 0.85 0.91 0.94 0.94 0.95 0.99
$#")4 1.02  1.04 1 0.91 1.08 1.04  1.07 0.97
$#")4  0.94  0.98 0.92 0.98 0.94 0.94 0.94 0.88
$#")4  0.7 0.95   0.72  0.58 0.77 0.74
PROCESAMIENTO DE DATOS
199
200
REPORTE TCNICO

Tabla 8b.
CIENCIAS 6. Valor de ajuste de cada tem por pas.
Bloque 2.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 0.84 0.87  0.9 0.82 0.92 0.94 0.91 0.99 0.85
$#")4 1.22 1.24   1.25 1.22  1.18 1.07 
$#")4 1.09   1.1 1.24 1.04 1.04  1.02 1.07
$#")4 0.85 0.87  0.85 0.87 0.85 0.9 0.88 0.92 
$#")4 0.91 0.98 0.8 0.99 0.91  0.98 1.01 1 0.91
$#")4 1.1  1.07 1.01 1.09  1.04 0.99  1.08
$#")4 1 1.05 1.04 0.98 1.01 1.02 0.97 0.99 0.95 1.01
$#")4 1.09 1.11   1.07 1.08 1.1 1.09 1.05 1.15
$#")4  0.89 0.91   0.81 0.91 0.89  0.84
$#")4  0.9 0.89 0.94 0.89 0.99 0.98  1 0.89
$#")4  1.04  1.02 1 1.04 0.98 1.12 0.99 0.92
$#")4 0.88 0.89 0.8 0.85 0.9 0.9 0.9 0.87 0.94 0.81
$#")4  1.02 0.91 1.02  1.17 1.09   0.97
$#")4  1.27 0.98 1.24 1.2  1.12  1.08 1.22
$#")4 0.9 0.81  0.8 0.87 0.78  0.92  0.9
Tabla 8c.
CIENCIAS 6. Valor de ajuste de cada tem por pas.
"LOQUE
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 0.87 0.89 0.78 0.88 0.91 0.85 0.9 0.89  0.88
$#")4 1.17 1.12  1.17 1.15 1.1    1.14
$#")4  1.08 0.92 1.05  1 1.01  0.94 
$#")4 0.92 0.9  0.92 0.85 0.91 0.95 0.89 0.98 0.92
$#")4 1.19 1.12 1.79  1.15  1.09 1.07 1.05 1.21
CAPTULO 5

$#")4 1.01 0.92 1.18 1.02 0.97 0.95 0.99 0.97 0.97 1
$#")4 1.15 1.04 0.92 1.02 1.07 1.11 1.05 1.11 1.07 
$#")4 0.98  0.92  0.99 0.92 1.01 1 1.02 0.97
$#")4 0.97  1.19 0.95 1.05 0.99 1.05  1.01 
$#")4  1.58 0.97 1.42    1.41 1.1 1.28
$#")4 1.2 1.11 1.01 1.12 1.14 1.1 1.12 1.05 1.1 1.14
$#")4  0.94 1.08 1 0.92 0.94 0.92   0.97
$#")4 0.99 0.95 0.84   0.95 0.94 0.99 1 0.98
$#")4  1.04   1.01   0.98  1
$#")4 0.91 0.8 1 0.79 0.81 0.8 0.85 0.75  0.77
PROCESAMIENTO DE DATOS
201
202
REPORTE TCNICO

Tabla 8d.
CIENCIAS 6. Valor de ajuste de cada tem por pas.
Bloque 4.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 1.18 1.17 1.02   1.12 1.17 1.21 1.05 
$#")4 1.14 1.02   1.09   1.09 0.94 
$#")4 1.07  1.14 1.01 1 1.02 1.04 1.09 0.99 1.07
$#")4  0.91  0.88 0.8 0.88 0.92 0.94  0.88
$#")4 0.89 0.94   0.92 0.97 0.98 0.98 1 0.95
$#")4 0.97 0.95 0.88 0.97 0.91 1.02 0.94 0.95 0.92 0.92
$#")4 0.98 1.01  0.99 1.01 0.99 0.98 1.05  0.98
$#")4 0.87 1 0.95 0.87 0.98 0.91 0.97  1 0.89
$#")4 0.92 0.94 0.74 0.91 0.87 0.97 0.91 0.9  
$#")4  1.02 1.07 1.05 1.04 1 1.07 1.05  1
$#")4 1.1 1.14   1.21 1.18 1.12 1.08 1.04 
$#")4 1.04 0.98  0.99 0.99 1.02 1.01  0.92 1.02
$#")4 0.99 1 0.85   1.1  0.95 0.95 
$#")4  0.95 1.07 0.98 0.95  1 1 0.97 
$#")4 0.92 0.95   0.94 0.97 0.95 0.9 1 0.9
Tabla 8e.
CIENCIAS 6. Valor de ajuste de cada tem por pas.
Bloque 5.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 1.05  0.97 1 1.04 1  0.98 1.02 1.1
$#")4 1.08 1.05   1.17 1 1.01 1.04 1 1.07
$#")4 1.04 1.05 1.42 1.04 0.95  0.99 1.02 1 1.08
$#")4 0.88 0.91  0.95 0.94 0.95 0.94 0.9 0.94 0.89
$#")4 0.84  0.72 0.88 0.81 0.88 0.94 0.88  
CAPTULO 5

$#")4 1.14 1.1  1.15 1.17 1.12 1.14 1.08 1.09 1.14
$#")4   1.04 1.19 1.14 1.2 1.14   1.14
$#")4 1.02 1 0.84 1 1.01 1.02  0.98  1.01
$#")4 0.9 0.92 0.77 0.99 1.02 1 0.99  1.04 0.95
$#")4 1.05 1.05 0.88 1 1.04 1.14 0.97  1.15 
$#")4 1.07  1.11 1.01  1.07 1.09 1.02 1 
$#")4 1.02 1.04 1 1.01 1.04 0.97 1.01 1.02 1 1.11
$#")4 0.89 0.9 1 0.88 0.91 0.85 0.9 0.88  
$#")4  1 0.9 1 0.99 1  0.95 0.99 0.95
$#")4 0.8  0.85 0.55  0.54  0.49  
PROCESAMIENTO DE DATOS
203
204
REPORTE TCNICO

Tabla 8f.
CIENCIAS 6. Valor de ajuste de cada tem por pas.
"LOQUE
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 1.08 1.04 1.25 1.05 1.09 1.05 1.15 1.09 1.05 
$#")4 0.77  0.84 0.88 0.87 0.85 0.85 0.92  0.82
$#")4 0.98 1.1   0.97  0.98 1.21 0.99 
$#")4 1.1 1.1  1.12    0.99 0.98 1.18
$#")4 1.24  1.45 1.27 1.2  1.18 1.24 1.11 1.2
$#")4 1.02 1.07 0.75 1.04 1.01 1.09  1.07 1.02 1.04
$#")4 0.87 0.91  0.94  0.92 0.9 0.92 0.99 
$#")4 0.97 1.02 0.94 0.95 0.97 0.98 0.95 0.98 1.04 0.98
$#")4 1.08 1.07 1.02 1.09 1.07 1.08 1.04 1.14 1.02 1.08
$#")4 0.9 0.92 0.89 0.9 0.91 0.9 0.94 0.94 0.92 0.91
$#")4  1.02 1.07  1  1.05 1.04 1.02 1
$#")4 0.94 0.94 1.01 0.95  0.9  0.94  0.92
$#")4 1.19 1.14 1.01 1.14 1.11 1.21 1.21 1.15 1.12 1.15
$#")4 0.92 0.89 0.81 0.88 0.88  0.92  0.97 0.87
$#")4 0.75 0.75 0.92 0.72 0.87 0.71 0.75 0.7  0.77
VALOR DE DISCRIMINACIN DE TEMS POR PAS

Tabla 9a.
CIENCIAS 6. Valor de discriminacin de cada tem por pas.
Bloque 1.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 1.09 1.45 1.28 1.22  1.15 1.08  1.19 0.84
$#")4 0.29 1.07 0.9 0.51 0.59 0.82 0.91 0.48 0.97 
$#")4 1.07 0.99 0.58 1.08 1.02 1.04 0.91 1.01 1.02 
$#")4 1.17 1.04 0.99  1.09 1.29  1.18 1.28 1.11
CAPTULO 5

$#")4   0.98 0.77 0.7 0.74 0.75 0.89 0.98 0.79
$#")4 0.82 0.92 0.98 0.85 0.98 1.02 0.98 0.95  0.81
$#")4 1.11 1.1 0.99    1.05 0.91 0.92 1.02
$#")4 1.05 0.99 1.05 1.02 1.09 1 0.95 1.01  1.01
$#")4 0.98 0.94 1.28 0.98 0.94 0.99  0.91  0.92
$#")4 1.21 0.72 0.98 0.72  0.78 1.04 0.87 0.95 
$#")4 1.22 1.08 1.12 1.14  1.28 1.1 1.1  1.25
$#")4 1.12  1.15 1.44 1.09  1.14 1.12  1.02
$#")4  0.85  0.98  0.89 0.89  0.97 1.11
$#")4 1.1 1.15 1.17 1.05   1.09 1.09  1.49
$#")4 1.09  1.04 1.12 1.12 1.11 1.07 1.12 1.04 1.14
PROCESAMIENTO DE DATOS
205
206
REPORTE TCNICO

Tabla 9b.
CIENCIAS 6. Valor de discriminacin de cada tem por pas.
Bloque 2.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 1.22 1.22 1.08  1.28  1.18  1.05 
$#")4  0.72  0.42 0.4 0.7 0.59  0.8 0.79
$#")4 0.85  1.07 0.87 0.77 0.97  0.95 0.99 
$#")4  1.12 1.07 1.12 1.18  1.22 1.24 1.54 1.09
$#")4 1.17  1.07  1.17 1.11  0.95 0.99 1.15
$#")4  0.74 0.8 1  0.71 0.92  0.89 
$#")4 1 0.92 0.95 1.04 0.98 0.99  1.01 1.01 1.01
$#")4 0.77 0.91  0.92 0.82 0.85   0.9 
$#")4 1.11 1.07 1.15  1.11 1.11 1.05 1.07 1.02 1.19
$#")4   1.18 1.12 1.4 1.07 1.07 1.12 1 
$#")4 1.2 0.84 1.12 0.9 0.98 0.87   1 
$#")4 1.44 1.29 1.2 1.29 1.44 1.28  1.28 1.15 1.41
$#")4 0.99 0.99 1.15 1 0.98  0.97 1.01 0.99 1.02
$#")4 0.72 0.85   0.81  0.87 0.85 0.85 
$#")4 1.09 1.07 1.15 1.07   1.11 1.01 0.99 
Tabla 9c.
CIENCIAS 6. Valor de discriminacin de cada tem por pas.
"LOQUE
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 1.27 1.14 1.12 1.52  1.52 1.27  1.14 1.29
$#")4  0.81 0.71 0.58 0.55  0.81 0.74  0.77
$#")4 1.05  1.2  1.04 1 0.99 0.99 1.02 0.87
$#")4  1.28 1.09  1.49  1.18  1.14 
CAPTULO 5

$#")4  0.81 0.4  0.78 0.95  0.82 0.97 0.79
$#")4 1 1.09 0.79 1   1.02 1.01 1 1.01
$#")4  0.97 0.99 0.97 0.87 0.9 0.95 0.82 0.88 
$#")4 1.08 0.84 1.09 1.08 1.01 1.21 0.95 1 0.88 
$#")4 1.15 1.15 0.72 1.2 0.77 1.01 0.91  0.98 0.74
$#")4 0.89 0.84 1.1 0.82 0.87 0.72  0.8  0.95
$#")4 0.81 0.8 0.94 0.52 0.72 0.71 0.9 0.87 0.58 0.78
$#")4 1.18  0.88 0.97   1.4 1.21  1.11
$#")4 1.04 1.19 1.04 1.22 1.14 1.22  1.05  
$#")4 1.02 0.97 1.01 0.98 0.99 0.99 1 1 0.98 0.99
$#")4 1.08 1.08 0.95 1.07 1.12 1.08 1.07   
PROCESAMIENTO DE DATOS
207
208
REPORTE TCNICO

Tabla 9d.
CIENCIAS 6. Valor de discriminacin de cada tem por pas.
Bloque 4.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 0.2  0.91   0.51 0.58 -0.02  -0.09
$#")4 0.89 0.9 0.9 0.92 0.87 0.94 0.95 0.9 1.1 0.94
$#")4  0.85  0.94  0.9 0.8 0.88 1.04 0.8
$#")4 1.07  1.25  1.05 1.05  1.11 1.04 1.04
$#")4 1.5 1.25 1.29 1.09  1.07  1.07 1.02 1.27
$#")4 1.07 1.17 1.22 1.09 1.2 0.98  1.18 1.28 
$#")4 1.08 0.95   0.99 1.02 1.1 0.85 0.97 1.11
$#")4 1.08 1  1.08 1.04 1.09 1.01 0.99 1 1.08
$#")4    1.27  1.14 1.41 1.51  1.48
$#")4 0.88 0.91 0.94 0.87   0.57 0.77  1.01
$#")4   0.8 0.9 0.84    0.95 
$#")4 0.89 1.07 0.74  1.07 0.91 0.95 1.21 1.25 0.97
$#")4 1.01 1 1.12 0.98 0.95   1.01 1 
$#")4 0.9 1.24 0.82 1.07  1.2 1.02 1 1.17 
$#")4 1.11   1.09 1.11 1.05 1.07  0.99 
Tabla 9e.
CIENCIAS 6. Valor de discriminacin de cada tem por pas.
Bloque 5.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 0.94 0.92 0.99 1.01 0.85 1.02 0.97 1.02  
$#")4  0.81  0.91 0.42  0.97 0.77 1.01 0.7
$#")4    0.95 1.1 0.95 1 0.99 1 0.7
$#")4  1.18 1.09 1.25 1.22 1.28  1.52 1.22 1.12
CAPTULO 5

$#")4 1.25 1.17 1.11 1.41  1.25 1.19 1.48  1.24
$#")4     0.58  0.72 0.72  
$#")4 0.9  0.88 0.72 0.88 0.8 0.74  0.87 0.75
$#")4  1 1.1 0.97 0.94 0.9   0.84 0.95
$#")4 1.18 1.15 1.47  1.01 1.04 1.02 1 0.99 1.11
$#")4 0.9 0.88  1.02 0.88 0.95 1.05  0.94 1.14
$#")4 0.89 0.95 0.78 0.98 0.88 0.92 0.9 0.98 0.99 0.95
$#")4  0.88  0.99 0.95  0.95  1.01 0.74
$#")4  1.44  1.57 1.41  1.5  1.14 1.4
$#")4 1.1  1.22 1 1.04 1.01 1.07  1.01 
$#")4   1.09 1.05  1.07 1.05  1.02 1.05
PROCESAMIENTO DE DATOS
209
210
REPORTE TCNICO

Tabla 9f.
CIENCIAS 6. Valor de discriminacin de cada tem por pas.
"LOQUE
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4  0.92 0.49 0.91 0.9  0.8 0.89 0.98 
$#")4    1.07 1.15 1.09 1.08 1.04 1.02 1.2
$#")4 1 0.97  0.98 1 1.01 0.99 0.95 1 
$#")4    0.51 0.57  0.79 1.01 1.05 
$#")4   0.75 0.71 0.7 0.55 0.88  0.72 0.77
$#")4 0.95  1.07 0.94 1  0.91 0.79 0.9 0.84
$#")4   1.17 1.28 1.29  1.44 1.45 1.02 
$#")4 1.09 0.98 1.12 1.07  1.02 1.1 1.07 0.98 1.05
$#")4 0.7      0.82   0.71
$#")4   1.18  1.29  1.28 1.22 1.14 
$#")4  0.91  0.72 0.98  0.79  0.85 0.99
$#")4 1.22 1.27 0.98 1.21 1.18 1.25   1.04 
$#")4   0.94  0.72  0.05 0.59 0.24 0.42
$#")4  1.18   1.48  1.2 1.19 1.02 
$#")4 1.15  1.1 1.1 1.14 1.22 1.19  1.05 
PROPORCIN DE RESPUESTAS CORRECTAS DE CADA TEM POR PAS

Tabla 10a.
CIENCIAS 6. Porcentaje de respuestas correctas de cada tem por pas.
Bloque 1.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 0.41 0.55 0.57 0.59  0.58   0.4 
$#")4  0.59  0.47  0.51 0.71 0.5 0.55 
$#")4 0.28    0.22  0.25 0.28 0.21 
$#")4   0.85   0.59    
CAPTULO 5

$#")4 0.57 0.47 0.7 0.51 0.44 0.4 0.4   
$#")4  0.44 0.55 0.41      0.48
$#")4  0.41       0.21 
$#")4 0.79  0.85 0.75 0.72 0.75 0.75 0.71 0.59 
$#")4  0.24   0.24 0.15 0.17  0.11 
$#")4  0.42 0.7 0.4      0.44
$#")4 0.4 0.29 0.82  0.4   0.2 0.12 0.71
$#")4  0.57 0.8 0.47 0.8     
$#")4   0.54     0.28 0.19 
$#")4  0.4   0.45 0.28 0.28  0.21 0.55
$#")4  0.4   0.5  0.28  0.1 
PROCESAMIENTO DE DATOS
211
212
REPORTE TCNICO

Tabla 10b.
CIENCIAS 6. Porcentaje de respuestas correctas de cada tem por pas.
Bloque 2.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 0.72 0.7 0.91 0.58 0.7 0.48  0.57  0.77
$#")4      0.27  0.41  0.21
$#")4 0.28 0.25 0.49  0.24 0.2   0.18 
$#")4  0.78  0.79 0.71     0.82
$#")4  0.7  0.59     0.47 
$#")4 0.42 0.45  0.59 0.47 0.48 0.44   0.48
$#")4   0.5      0.1 0.29
$#")4  0.22  0.24    0.42  0.45
$#")4 0.18 0.18  0.11 0.28 0.15 0.18  0.12 0.27
$#")4     0.42   0.28 0.22 0.41
$#")4 0.47 0.42 0.59 0.47  0.42  0.5  0.58
$#")4 0.58  0.71  0.44  0.58   
$#")4 0.12 0.12  0.09 0.15 0.1 0.11 0.1 0.08 0.17
$#")4 0.24 0.2  0.2 0.24 0.24 0.24 0.18 0.29 0.28
$#")4 0.2 0.12 0.55 0.11  0.1 0.2  0.08 0.29
Tabla 10c.
CIENCIAS 6. Porcentaje de respuestas correctas de cada tem por pas.
"LOQUE
Repblica
Nuevo
tem Argentina Colombia Cuba El Salvador Panam Paraguay Per Domini- Uruguay
Len
cana
$#")4  0.72 0.81 0.58 0.58   0.48  
$#")4       0.29   
$#")4  0.17 0.42 0.18 0.2 0.21 0.17 0.11 0.15 
CAPTULO 5

$#")4   0.8 0.4  0.41  0.47 0.47 
$#")4 0.25 0.27   0.28 0.27   0.21 0.24
$#")4 0.24  0.28 0.24 0.28 0.21 0.2  0.11 0.25
$#")4  0.78 0.84 0.71   0.74 0.7  
$#")4   0.7      0.44 
$#")4 0.44 0.42 0.54 0.42 0.45     
$#")4    0.15 0.1 0.19  0.17 0.24 0.11
$#")4 0.25  0.45 0.4   0.24   
$#")4 0.54   0.54 0.47 0.48 0.54 0.47  
$#")4 0.58  0.89 0.49  0.42 0.48 0.47 0.4 
PROCESAMIENTO DE DATOS

$#")4 0.14 0.21 0.27  0.18 0.15 0.17 0.15 0.09 0.18
$#")4 0.54 0.4 0.81 0.27     0.08 
213
214
REPORTE TCNICO

Tabla 10d.
CIENCIAS 6. Porcentaje de respuestas correctas de cada tem por pas.
Bloque 4.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 0.45  0.74  0.48     0.51
$#")4 0.2 0.4  0.19 0.28 0.19  0.22 0.28 
$#")4  0.59 0.52 0.59 0.52   0.29 0.5 
$#")4  0.8  0.87 0.9    0.77 0.84
$#")4 0.49 0.4  0.27 0.48    0.29 0.45
$#")4      0.75 0.55   
$#")4  0.44  0.42 0.4  0.45  0.24 
$#")4 0.19   0.17  0.22 0.15  0.1 0.2
$#")4  0.45 0.77   0.42 0.41 0.44  0.59
$#")4 0.47    0.5 0.5 0.48  0.45 0.54
$#")4 0.24   0.2 0.2 0.21  0.22 0.21 
$#")4 0.57 0.54  0.5 0.55 0.52 0.49 0.52  
$#")4 0.11 0.12 0.75 0.11 0.1 0.15 0.15 0.1 0.09 
$#")4  0.58 0.54 0.59 0.59 0.55 0.51  0.4 
$#")4 0.7  1.17 0.55  0.92    0.74
Tabla 10e.
CIENCIAS 6. Porcentaje de respuestas correctas de cada tem por pas.
Bloque 5.
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4 0.29 0.24  0.7   0.29 0.25  0.2
$#")4 0.55 0.57 0.58  0.41   0.47  0.54
$#")4  0.29  0.24 0.29   0.19 0.15 0.57
$#")4   0.84  0.58 0.51 0.5   
CAPTULO 5

$#")4  0.74 0.84  0.74    0.41 0.72
$#")4   0.4       
$#")4  0.28  0.28 0.22 0.22  0.28  
$#")4 0.55  0.75 0.54 0.58  0.45 0.47 0.44 
$#")4 0.28 0.28 0.58 0.19  0.18 0.21 0.15 0.19 
$#")4    0.27    0.28  
$#")4 0.29   0.27  0.24  0.25 0.22 0.27
$#")4    0.28 0.28 0.25    
$#")4  0.57 0.74 0.44 0.55  0.47   
$#")4   0.55   0.27 0.28 0.25 0.18 
$#")4 0.07 0.05   0.14 0.11  0.05 0.01 0.18
PROCESAMIENTO DE DATOS
215
216
REPORTE TCNICO

Tabla 10f.
CIENCIAS 6. Porcentaje de respuestas correctas de cada tem por pas.
"LOQUE
Repblica
tem Argentina Colombia Cuba El Salvador Nuevo Len Panam Paraguay Per Uruguay
Dominicana
$#")4  0.28  0.25   0.27  0.18 0.24
$#")4 0.2 0.21  0.15  0.17 0.14 0.12 0.09 0.25
$#")4 0.19 0.12 0.48 0.15  0.12 0.18 0.11 0.09 0.19
$#")4  0.48 0.58  0.41 0.49 0.4 0.42  0.45
$#")4 0.25 0.22 0.27 0.24 0.28 0.28 0.2 0.25  
$#")4 0.59  0.89   0.5    0.57
$#")4 0.55  0.74 0.45  0.47 0.55 0.51  0.5
$#")4   0.52 0.29  0.28   0.18 
$#")4 0.44 0.51  0.57 0.48 0.51 0.52 0.5  
$#")4 0.57 0.48  0.42  0.41   0.28 
$#")4 0.49 0.5   0.5 0.48 0.45 0.5  
$#")4 0.42 0.52  0.42 0.45  0.44 0.45 0.24 
$#")4 0.41 0.4       0.45 0.47
$#")4 0.48 0.28    0.22    
$#")4  0.59 1.85    0.54 0.54 0.15 
V.2.2. tems de Lectura 3

Esta seccin contiene los resultados del procesamiento de datos para anlisis de tems del Estudio Principal del
Segundo Estudio Regional Comparativo y Explicativo SERCE, el cual incluy la aplicacin de pruebas de Lectura
(grados tercero y sexto), Matemtica (grados tercero y sexto) y Ciencias (grado sexto); la aplicacin de la prueba
de Ciencias se realiz en aquellos pases que voluntariamente optaron por incluirla.
El procesamiento de datos se realiz de acuerdo con lo planteado en el Documento Tcnico del Procesamiento
de datos para el Anlisis de tems y la Produccin de Resultados del SERCE, en el cual se propuso la Teora de
Respuesta a tem como modelo de anlisis y una serie de indicadores estadsticos para evaluar el comportamiento
de tems y de grupos de tems; en dicho documento se hicieron explcitos los criterios de anlisis para cada in-
dicador durante el anlisis de tems.

Es de anotar que el anlisis de tems es un proceso cuantitativo y cualitativo mediante el cual se establece la
calidad de los tems de un instrumento, en relacin con los propsitos para los cuales fueron elaborados. Su real-
izacin exige armonizar el conocimiento profundo del objeto de evaluacin, la poblacin evaluada y los propsi-
tos de la evaluacin con la capacidad para interpretar adecuadamente los indicadores estadsticos disponibles. El
proceso de anlisis de tems del Estudio Principal conducir a la toma de decisiones en relacin con la inclusin o
exclusin de tems para la fase de calicacin y produccin de resultados del Estudio. Los indicadores reportados
en este documento sern objeto de anlisis por parte de los expertos en psicometra y en cada disciplina a n de
asegurar que la produccin de los resultados nales del SERCE utilice la informacin de mayor calidad.

RESULTADOS SOBRESALIENTES

La prueba result ajustada, en su dicultad, al conjunto de estudiantes con los que se estimaron los indicadores.
Para la muestra utilizada en el anlisis, el Bloque 1 result ser el ms fcil y el Bloque 2 el ms difcil; la difer-
encia entre los dos es de 1.42 logits.
$EACUERDOCONLOSRESULTADOSDEAJUSTE SEDEBENELIMINAR PARALACALIlCACINlNALLOSTEMS$,")4 $,-
")4 $,")4Y$,")4.OOBSTANTE SERECOMIENDAQUEELGRUPODEEXPERTOSANALICECONCUIDADOESTOS
tems ya que algunos se encuentran muy cerca del criterio de eliminacin.
Se recomienda revisar los procesos de aplicacin de las pruebas en Repblica Dominicana ya que es alto el por-
centaje de casos eliminados por los criterios establecidos en el documento tcnico de procesamiento.

DEPURACIN DE LA INFORMACIN RECIBIDA

El Laboratorio Latinoamericano para la Evaluacin de la Calidad de la Educacin, LLECE, envi las bases de datos
con las respuestas de los estudiantes evaluados en el Estudio Principal del SERCE, a partir de las cuales se pro-
ducirn resultados. Esta base de datos ya haba sido depurada de acuerdo con criterios preestablecidos.
En concordancia con el procedimiento planteado en el documento tcnico para el Procesamiento de Datos para
el anlisis de tem y la Produccin de Resultados del Estudio Principal del SERCE, se realizaron dos procedimien-
tos de depuracin de las bases de datos recibidas para obtener los diferentes indicadores de los tems, de los
bloques y de la prueba, luego de excluir la informacin del Estado de Nuevo Len. Dadas las caractersticas de la
participacin del Estado de Nuevo Len (Mxico), se debe eliminar su informacin al estimar los indicadores para

CAPTULO 5 PROCESAMIENTO DE DATOS 217


realizar el anlisis de tem. En Lectura de grado tercero participaron 5574 estudiantes de este estado.

Procedimiento 1. Depuracin por preguntas no alcanzadas: Se eliminan los registros de aquellos estudiantes
evaluados que no respondan (no alcancen) los dos ltimos tems del bloque que ocupe la segunda posicin en
su cuadernillo. Esta eliminacin de registros se realiza antes de procesar los datos. La base de datos que resulta
despus de este proceso es la que se utiliza para la estimacin de los valores de ajuste de los estudiantes.

Procedimiento 2. Depuracin por desajuste de estudiantes evaluados: Se eliminan los registros de aquellos
ESTUDIANTESEVALUADOSCUYOVALORDEAJUSTEPRXIMOOLEJANOSEAINFERIORAOSUPERIORA%STEPROCESOSE
lleva a cabo slo con los estudiantes que respondieron por lo menos un tem de la prueba y las dos ltimas pre-
guntas del cuadernillo asignado. El resultado es una nueva base de datos slo con los registros de los estudiantes
que se utilizan para la estimacin de los parmetros de los tems, bloques y pruebas.

El proceso de depuracin se observa en la tabla 1, con informacin por pas.

DEPURACIN
N
Pas N No Alcanzadas N Desajuste N Final %
Inicial
Argentina 5781 291    
Brasil  117   72,2
Chile 5791 124  4102 70,8
Colombia  92    
Costa Rica 5025 48    
Cuba 5291  1771   
Ecuador  227    
El Salvador   1878   
Estado Nuevo Len 5574
'UATEMALA  284    
Mxico 4579 95 1214  71,4
Nicaragua  97   74,8
Panam  128   71,1
Paraguay   1484   
Per  111 1215  71,4
Rep. Dominicana   1497 2020 51,2
Uruguay      

TOTAL 94620 2888 24222 61936 65,5

218 REPORTE TCNICO


La columna identicada con %, indica el porcentaje de estudiantes que quedan luego de los procesos de depu-
racin, para la estimacin de indicadores.

Con excepcin de Repblica Dominicana, todos los pases tienen un porcentaje de participacin, en la estimacin
DELOSINDICADORESDELOSTEMS SUPERIORAL$ELTOTALDEPASESCONINFORMACINPARALAESTIMACINDE
indicadores, 9 participan con ms del 70% de sus estudiantes evaluados. Es importante revisar el proceso de
aplicacin de pruebas en Repblica Dominicana de tal manera que se pudiera explicar una prdida tan grande.
2EPBLICA$OMINICANA 0ARAGUAY 5RUGUAY !RGENTINA %CUADOR Y'UATEMALA
 SONLOSPASESCONMSPRDIDADEREGISTROSDEINFORMACINPORNOALCANZARLOSLTIMOSTEMS
2EPBLICA$OMINICANA #UBA Y0ARAGUAY SONLOSPASESCONUNAPRDIDAMAYORAL
de sus registros por desajuste, a partir de los datos de poblacin luego de la primera depuracin.

Luego de la depuracin realizada, el nmero de estudiantes por bloque y por cuadernillo cuya informacin se
UTILIZAPARALAESTIMACINDEINDICADORESSEENCUENTRAENLASTABLASY

Tabla 2. LECTURA 3. Nmero de estudiantes por bloque.

Bloque N
1 
2 
 
4 
5 
 20285

Tabla 3. LECTURA 3. Nmero de estudiantes por cuadernillo.

Cuadernillo N
1 
2 
 
4 
5 11220
 8952

CAPTULO 5 PROCESAMIENTO DE DATOS 219


ANLISIS DE DATOS
A continuacin se presentan los indicadores para realizar el anlisis de tem, de bloque y de
prueba. Las tablas presentan informacin separada por bloques para facilitar los procesos de
anlisis por parte del equipo de expertos; no obstante, el procesamiento de datos se realiz
para la prueba como una totalidad.

INDICADORES POR TEM

Tabla 4a
LECTURA 30. INDICADORES POR TEM
Bloque 1

Ajuste Ajuste
Error de Correlacin
tem &ORMATO Dicultad Discrimin. Prximo Lejano N
Medicin punto-medida
(Int) (Outt)
$,")4 SMUR  0.017 1.07 0.4 0.97 0.95 
$,")4 SMUR  0.02   0.97 0.87 
$,")4 SMUR   1.4 0.5 0.87 0.85 
$,")4 SMUR   1.25  0.92 0.91 
$,")4 SMUR 0.007  0.85  1.04  
$,")4 SMUR       
$,")4 SMUR -0.911 0.017 1.27 0.48 0.89 0.82 
$,")4 SMUR -0.22    1.01  
$,")4 SMUR -2.425 0.025 1.04  0.97 0.82 
$,")4 SMUR   1.05 0.4 0.98 1 
$,")4 SMUR  0.017 1.09 0.41   

220 REPORTE TCNICO


TABLA 4B.
LECTURA 3. INDICADORES POR TEM.
Bloque 2.

Ajuste Ajuste
Error de Correlacin
tem &ORMATO Dicultad Discrimin. Prximo Lejano N
Medicin punto-medida
(Int) (Outt)
$,")4 SMUR   0.85  1.05 1.09 20420
$,")4 SMUR   0.97  1 1.05 20420
$,")4 SMUR  0.015 0.55 0.28 1.12 1.17 20420
$,")4 SMUR  0.015 0.9   1.04 20420
$,")4 SMUR   0.5  1.17  20420
$,")4 SMUR 0.745  0.59 0.25  1.22 20420
$,")4 SMUR   0.8  1.08 1.09 20420
$,")4 SMUR      1.05 20420
$,")4 SMUR 0.895   0.4 0.99  20420
$,")4 SMUR 0.717    1.01  20420
$,")4 SMUR  0.018 1.19 0.49 0.87 0.78 20420

TABLA 4C.
LECTURA 3. INDICADORES POR TEM.
",/15%

Ajuste Ajuste
Error de Correlacin
tem &ORMATO Dicultad Discrimin. Prximo Lejano N
Medicin punto-medida
(Int) (Outt)
$,")4 SMUR -0.118 0.015 0.92 0.41 1.02 1.05 
$,")4 SMUR -1.818 0.02 1.08 0.4 0.94 0.82 
$,")4 SMUR  0.02 1.08 0.4 0.95 0.8 
$,")4 SMUR -1.848 0.02 1.18 0.47 0.85  
$,")4 SMUR   1.09  0.97  
$,")4 SMUR   0.88 0.4 1.04 1.07 
$,")4 SMUR    0.44 0.98 0.99 
$,")4 SMUR -0.417  0.85  1.04 1.1 
$,")4 SMUR 1.012 0.017 1.01 0.44 0.99 0.99 
$,")4 SMUR    0.5 0.89 0.85 
$,")4 SMUR   1.09 0.44 0.97  

CAPTULO 5 PROCESAMIENTO DE DATOS 221


TABLA 4D.
LECTURA 3. INDICADORES POR TEM.
",/15%

Ajuste Ajuste
Error de Correlacin
tem &ORMATO Dicultad Discrimin. Prximo Lejano N
Medicin punto-medida
(Int) (Outt)
$,")4 SMUR -0.21   0.52 0.9 0.88 
$,")4 SMUR  0.017 1.24 0.5   
$,")4 SMUR  0.017 1.14  0.92 0.82 
$,")4 SMUR -1.727 0.019 1.17 0.47 0.87 0.74 
$,")4 SMUR -0.17  0.7  1.1  
$,")4 SMUR -0.155   0.44 1.01  
$,")4 SMUR -0.542  1.29 0.52 0.89 0.85 
$,")4 SMUR       
$,")4 SMUR 1.402 0.018 1.05 0.48 0.97 0.88 
$,")4 SMUR   0.72  1.1 1.17 
$,")4 SMUR 1.044 0.017 1.09 0.49 0.95 0.9 

TABLA 4E.
LECTURA 3. INDICADORES POR TEM.
",/15%

Ajuste Ajuste
Error de Correlacin
tem &ORMATO Dicultad Discrimin. Prximo Lejano N
Medicin punto-medida
(Int) (Outt)
$,")4 SMUR  0.015 0.77  1.08 1.12 22284
$,")4 SMUR -0.415 0.015 1.27 0.49 0.91 0.87 22284
$,")4 SMUR 0.288 0.015   0.95  22284
$,")4 SMUR  0.017 1.09 0.45 0.95 0.87 22284
$,")4 SMUR -0.798   0.41 0.99 0.98 22284
$,")4 SMUR  0.015 0.59 0.29 1.15 1.2 22284
$,")4 SMUR -0.507 0.015 1.12 0.45   22284
$,")4 SMUR 1   0.51 0.89  22284
$,")4 SMUR 0.744 0.015   1.07 1.1 22284
$,")4 SMUR -0.747 0.015  0.52  0.79 22284
$,")4 SMUR  0.015 0.87  1.04 1.08 22284

222 REPORTE TCNICO


TABLA 4F.
LECTURA 3. INDICADORES POR TEM.
"LOQUE

Ajuste Ajuste
Error de Correlacin
tem &ORMATO Dicultad Discrimin. Prximo Lejano N
Medicin punto-medida
(Int) (Outt)
$,")4 SMUR  0.015 0.94  1.02 1.02 20172
$,")4 SMUR 1.282 0.017  0.4  0.95 20172
$,")4 SMUR 0.91  0.1 -0.01 1.41 1.59 20172
$,")4 SMUR 0.707   0.47 0.91 0.89 20172
$,")4 SMUR  0.017 1.01  1 0.97 20172
$,")4 SMUR 0.209 0.015   1.07 1.09 20172
$,")4 SMUR -0.248 0.015 1.14   0.95 20172
$,")4 SMUR  0.015 1.05 0.41 0.98 0.99 20172
$,")4 SMUR  0.017 1.05  0.97 0.94 20172
$,")4 SMUR   0.49 0.24  1.22 20172
$,")4 SMUR -1.224 0.017 1.07 0.4   20172

CAPTULO 5 PROCESAMIENTO DE DATOS 223


INDICADORES POR OPCIN
TABLA 5A.
LECTURA 3. INDICADORES POR OPCIN.
Bloque 1.

OPCIN OPCIONES DE PROMEDIO DE ERROR DE !*534% N


TEM CORRELACIN
CORRECTA RESPUESTA HABILIDAD MEDICIN /54&)4 DE RESPUESTA
1 -0.5 0.01 1 -0.22 
2 -0.9   -0.19 910
   0.87  782
$,")4 4
4  0.01 0.97 0.4 12810
MULTIMARCA  0.2   105
OMISIN -0.54 0.04 1.09 -0.1 
1 -0.8 0.02 0.77  1514
2 0.18 0.01 0.98  14851
   0.91 -0.14 
$,")4 2
4  0.02 0.85  1054
MULTIMARCA  0.2   115
OMISIN -0.79 0.12 1.01  119
1 -0.49 0.01 0.8  
2 -0.51 0.01 0.8 -0.22 
 -0.28 0.01 1.02 -0.12 
$,")4 4
4  0.01  0.5 
MULTIMARCA  0.22  -0.2 111
OMISIN -0.99 0.11  -0.08 
1 -0.27 0.01  -0.11 
2 -0.48 0.01 0.8 -0.27 5089
 0.54 0.01 0.92  
$,")4 
4  0.02  -0.11 2148
MULTIMARCA -2.98 0.22  -0.22 109
OMISIN  0.05   
1  0.01 1.08  
2 -0.51 0.01 0.85 -0.21 
 -0.08 0.02  -0.02 2824
$,")4 1
4 -0.45 0.01 0.87 -0.17 2740
MULTIMARCA  0.19 0.5 -0.22 
OMISIN  0.04  -0.04 

224 REPORTE TCNICO


OPCIN OPCIONES DE PROMEDIO DE ERROR DE !*534% N
TEM CORRELACIN
CORRECTA RESPUESTA HABILIDAD MEDICIN /54&)4 DE RESPUESTA
1 0.07 0.01 0.95  
2  0.04 0.51 -0.19 410
  0.04 0.72 -0.12 
$,")4 1
4 -1.18  0.58 -0.1 
MULTIMARCA -2.89 0.17  -0.25 149
OMISIN -2.01 0.21 0.41 -0.1 47
1 -0.75 0.02 0.72  
2  0.01 0.92 0.48 
  0.02 0.82 -0.18 1550
$,")4 2
4  0.01 0.78  2414
MULTIMARCA -2.51  0.54  
OMISIN -0.98 0.11 0.87 -0.09 
1 -0.41 0.01 0.99 -0.25 5579
2 -0.21 0.02   
  0.01 1  
$,")4 
4   0.88 -0.15 
MULTIMARCA -2.91 0.19   128
OMISIN -0.79 0.1  -0.08 
1 0.1 0.01 0.97  
2 -1.1   -0.19 
 -0.47  1.11 -0.09 794
$,")4 1
4 -1.15  0.57 -0.18 515
MULTIMARCA -4 0.2 0.5  87
OMISIN    -0.09 99
1 -0.48 0.01 0.84 -0.19 
2 -0.14 0.01 1.14 -0.08 5829
 -0.8 0.02 0.58 -0.22 1484
$,")4 4
4  0.01 1.02 0.4 7922
MULTIMARCA -2.88 0.2   
OMISIN -0.9 0.08  -0.09 227
1 -0.79 0.02 0.7 -0.22 1450
2  0.02  -0.24 1858
 0.27 0.01 0.97 0.41 
$,")4 
4  0.02  -0.11 
MULTIMARCA -2.89 0.17 0.48 -0.25 145
OMISIN -0.81 0.1 0.82  112

CAPTULO 5 PROCESAMIENTO DE DATOS 225


TABLA 5B.
LECTURA 3. INDICADORES POR OPCIN.
Bloque 2.

OPCIN OPCIONES DE PROMEDIO DE ERROR DE !*534% N


TEM CORRELACIN
CORRECTA RESPUESTA HABILIDAD MEDICIN /54&)4 DE RESPUESTA
1 -0.22 0.01 1.28 -0.15 4822
2  0.02  -0.19 1290
   0.9 -0.11 851
$,")4 4
4  0.01 1.04  
MULTIMARCA   0.5 -0.2 192
OMISIN -0.98 0.1  -0.07 109
1 -0.15 0.01  -0.15 
2 0.59 0.01 1.09  
  0.02 1.19 -0.08 2595
$,")4 2
4 -0.5 0.02 0.72 -0.18 2210
MULTIMARCA  0.17  -0.19 
OMISIN -0.81 0.05  -0.12 411
1 -0.58 0.02  -0.19 
2 0 0.01 1.51  
  0.01 1.14 0.28 
$,")4 
4 -0.28 0.02 1.11 -0.14 
MULTIMARCA -2.29 0.19  -0.17 118
OMISIN  0.09 0.89  172
1  0.01  -0.12 
2  0.02 0.75 -0.21 
 -0.11 0.02 1.2 -0.07 
$,")4 4
4 0.52 0.01   8590
MULTIMARCA -2.27 0.14 0.41 -0.2 171
OMISIN -0.59   -0.08 
1  0.01 1.29  7810
2 0.04 0.01 1.44 -0.01 
 -0.14 0.01 1.08 -0.09 
$,")4 1
4 -0.2 0.02 1.07 -0.09 2279
MULTIMARCA  0.14  -0.2 
OMISIN  0.04  -0.14 740

226 REPORTE TCNICO


OPCIN OPCIONES DE PROMEDIO DE ERROR DE !*534% N
TEM CORRELACIN
CORRECTA RESPUESTA HABILIDAD MEDICIN /54&)4 DE RESPUESTA

1 0.41 0.01 1.25 0.25 


2 0.07 0.01  0.01 5801
 -0.22 0.01 0.98  
$,")4 1
4 -0.24 0.02  -0.1 2482
MULTIMARCA  0.12 0.45 -0.18 220
OMISIN -0.47 0.04 0.9 -0.1 855
1 -0.14 0.01 1.11 -0.12 5709
2  0.02 0.82 -0.18 
 -0.05 0.01  -0.05 
$,")4 4
4 0.51 0.01 1.08  
MULTIMARCA -2.74  0.4 -0.22 
OMISIN  0.04 1  559
1  0.01 0.9 -0.18 
2  0.02 0.99 -0.12 
 0.58 0.01 1.07  7249
$,")4 
4  0.01 1.17  
MULTIMARCA -2.54 0.15  -0.21 154
OMISIN -0.52 0.04 0.78 -0.09 514
1  0.01 1.12 -0.11 
2 -0.78 0.02 0.51 -0.25 1840
 -0.54 0.02  -0.14 1205
$,")4 4
4  0.01 0.95 0.4 
MULTIMARCA -1.98   -0.2 
OMISIN -1.21 0.11 0.48 -0.1 
1 0.59 0.01 1.04  7471
2  0.01  -0.02 
 -0.5 0.02  -0.19 2441
$,")4 1
4 -0.42 0.01 0.74 -0.21 
MULTIMARCA  0.1   299
OMISIN -0.79 0.07  -0.1 
1 -0.19 0.01 0.87 -0.15 5974
2  0.01 0.84 -0.19 
 0.99 0.02  0.49 4907
$,")4 
4 -0.17 0.02 0.98 -0.08 2494
MULTIMARCA -2.02 0.14 0.51 -0.19 191
OMISIN  0.07  -0.08 

CAPTULO 5 PROCESAMIENTO DE DATOS 227


TABLA 5C.
LECTURA 3. INDICADORES POR OPCIN.
"LOQUE

OPCIN OPCIONES DE PROMEDIO DE ERROR DE !*534%


TEM CORRELACIN N DE RESPUESTA
CORRECTA RESPUESTA HABILIDAD MEDICIN /54&)4
1  0.01 1.05  
2 0.5 0.01 1.07 0.41 10919
  0.02 1.25 -0.09 1858
$,")4 2
4 -0.75  0.72  
MULTIMARCA  0.09 0.7  
OMISIN -1.21 0.08  -0.11 217
1  0.04  -0.22 784
2 -0.75 0.02 0.91 -0.19 
     979
$,")4 4
4  0.01 0.94 0.4 
MULTIMARCA -2.52 0.14 0.44 -0.18 151
OMISIN  0.08   
1  0.01 0.99 0.4 17105
2 -0.75 0.02 0.88 -0.17 
 -0.88  0.79 -0.15 818
$,")4 1
4 -1.04   -0.21 1070
MULTIMARCA  0.1 0.48 -0.21 255
OMISIN  0.09   197
1 -1.25 0.02 0.54 -0.28 
2 -0.97 0.02  -0.22 
  0.01 0.87 0.47 
$,")4 
4   0.72 -0.14 582
MULTIMARCA  0.12  -0.21 178
OMISIN -1.44 0.08  -0.14 
1  0.01 0.97 -0.21 
2  0.01   8115
  0.01 0.99 -0.15 
$,")4 2
4 -0.42 0.02 0.91 -0.11 
MULTIMARCA  0.1  -0.21 225
OMISIN  0.07  -0.12 

228 REPORTE TCNICO


OPCIN OPCIONES DE PROMEDIO DE ERROR DE !*534%
TEM CORRELACIN N DE RESPUESTA
CORRECTA RESPUESTA HABILIDAD MEDICIN /54&)4
1 -0.55 0.02 0.81 -0.22 
2 -0.11 0.02 1.27 -0.05 
 -0.22 0.01 1.04 -0.12 4928
$,")4 4
4  0.01 1.1 0.4 7872
MULTIMARCA -2.4 0.11 0.28 -0.2 207
OMISIN    -0.12 510
1 -0.55 0.02 0.97 -0.17 2241
2  0.01 1 0.44 9724
  0.02  -0.12 2140
$,")4 2
4  0.01  -0.24 
MULTIMARCA  0.11  -0.14 
OMISIN  0.07 1.01 -0.07 
1 0.42 0.01 1.2  12154
2 -0.1 0.02 1.52 -0.04 2187
 -0.58 0.01   
$,")4 1
4 -0.72 0.05 0.88 -0.1 475
MULTIMARCA -1.79 0.12 0.8  
OMISIN -1.4 0.1 0.58 -0.11 
1  0.01 0.92 -0.19 
2  0.01 0.88 -0.17 
 0.82 0.02 1 0.44 
$,")4 
4 -0.1 0.01 1.12  
MULTIMARCA -1.88 0.11 0.48 -0.17 247
OMISIN  0.05 0.75 -0.09 
1 -0.74 0.01 0.72 -0.28 
2  0.02  -0.17 
 -0.47 0.01 0.97 -0.18 
$,")4 4
4  0.01 0.9 0.5 11875
MULTIMARCA -2.29 0.11 0.4 -0.2 227
OMISIN -0.97 0.1 0.89 -0.09 218
1  0.02 0.91  
2  0.02 0.84 -0.19 2255
 -0.44 0.02 1.02 -0.14 2485
$,")4 4
4 0.48 0.01 1 0.44 
MULTIMARCA  0.12 0.52 -0.2 217
OMISIN  0.07 1.09 -0.07 

CAPTULO 5 PROCESAMIENTO DE DATOS 229


TABLA 5D.
LECTURA 3. INDICADORES POR OPCIN.
Bloque 4.

OPCIN OPCIONES DE PROMEDIO DE ERROR DE !*534%


TEM CORRELACIN N DE RESPUESTA
CORRECTA RESPUESTA HABILIDAD MEDICIN /54&)4
1  0.01 0.79 -0.29 
2  0.01 0.92 0.52 
 -0.9 0.04  -0.12 
$,")4 2
4 -0.58 0.01 0.89 -0.22 4027
MULTIMARCA  0.12  -0.18 175
OMISIN  0.05 1.17 -0.09 700
1 -1.02 0.02 0.75 -0.29 2471
2 -1.21  0.58 -0.18 747
 -0.94 0.02 0.79 -0.24 
$,")4 4
4  0.01  0.5 
MULTIMARCA   0.22 -0.2 
OMISIN  0.08  -0.1 
1 -0.9 0.02  -0.25 
2  0.01   15512
 -1.14   -0.18 848
$,")4 2
4 -0.88 0.02 0.79 -0.21 1880
MULTIMARCA -2.2 0.11 0.52 -0.19 255
OMISIN -1.44 0.11  -0.09 
1  0.02 0.81 -0.27 2218
2 -1.24  0.58 -0.21 990
  0.01 0.88 0.47 
$,")4 
4   0.58 -0.18 
MULTIMARCA   0.21 -0.2 
OMISIN  0.07  -0.12 290
1 -0.72 0.02 1.02 -0.19 
2 0.47 0.01 1.17  11100
 -0.44 0.02 1.15  
$,")4 2
4  0.01 1.24 -0.15 4515
MULTIMARCA -1.15 0.09 1.11  419
OMISIN -1 0.08 0.88 -0.1 

230 REPORTE TCNICO


OPCIN OPCIONES DE PROMEDIO DE ERROR DE !*534%
TEM CORRELACIN N DE RESPUESTA
CORRECTA RESPUESTA HABILIDAD MEDICIN /54&)4

1 -0.88 0.02  -0.25 2475


2 -0.7 0.02 0.97 -0.15 1595
 0.55 0.01  0.44 
$,")4 
4  0.01 1.2 -0.17 5481
MULTIMARCA -1.94   -0.15 220
OMISIN  0.1 0.92 -0.08 215
1 -0.84 0.01 0.77  
2  0.02 0.91 -0.18 2294
 0.55 0.01 0.9 0.52 
$,")4 
4 -0.81 0.02 0.74 -0.18 
MULTIMARCA -2.7 0.15 0.45 -0.17 
OMISIN -0.89 0.08  -0.08 
1  0.02 1.28 -0.18 
2  0.01   11887
 -0.84  0.79 -0.17 1415
$,")4 2
4  0.01 1.91 0.01 
MULTIMARCA -2.52 0.14 0.51 -0.18 
OMISIN -1.2 0.08  -0.11 288
1  0.01 0.94  
2 -0.19 0.02 1.12 -0.08 
 -0.77   -0.15 
$,")4 4
4 1.08 0.02 0.85 0.48 5224
MULTIMARCA -2.25 0.12  -0.18 221
OMISIN  0.1  -0.07 
1 -0.85 0.02 0.97 -0.22 2219
2  0.01 1.1  
  0.02  -0.11 
$,")4 2
4 -0.5 0.02 1.19 -0.14 2557
MULTIMARCA   0.25 -0.19 140
OMISIN  0.07  -0.05 
1 -0.21 0.01 1.11 -0.15 9540
2 0.97 0.02 0.88 0.49 
 -1.04  0.45 -0.19 
$,")4 2
4 -0.74 0.02 0.59  
MULTIMARCA -0.92  0.84  702
OMISIN  0.07  -0.07 

CAPTULO 5 PROCESAMIENTO DE DATOS 231


TABLA 5E.
LECTURA 3. INDICADORES POR OPCIN.
Bloque 5.

OPCIN OPCIONES DE PROMEDIO DE ERROR DE !*534%


TEM CORRELACIN N DE RESPUESTA
CORRECTA RESPUESTA HABILIDAD MEDICIN /54&)4
1  0.01 1.1  
2  0.01 0.77  
 -0.14 0.02 1.48  
$,")4 1
4 -0.2 0.02  -0.09 
MULTIMARCA  0.12 0.5 -0.2 199
OMISIN -0.79   -0.1 
1  0.01 0.75 -0.25 
2 -0.54 0.01  -0.22 
 0.52 0.01 0.94 0.49 
$,")4 
4 -0.5 0.02 0.87 -0.17 
MULTIMARCA -2.59 0.14 0.48 -0.2 159
OMISIN  0.09 0.59 -0.1 177
1  0.02 0.95 -0.18 
2 -0.7 0.02   
 -0.22 0.01  -0.15 5957
$,")4 4
4  0.01 0.94  
MULTIMARCA  0.15 0.48 -0.19 154
OMISIN   0.71 -0.1 
1 -0.21 0.01 0.91 -0.22 10441
2  0.02  -0.18 
 0.02 0.02 1.24 -0.02 
$,")4 4
4 0.94 0.01 0.85 0.45 
MULTIMARCA -2.59 0.14  -0.2 
OMISIN  0.05 0.79 -0.08 478
1  0.01 1 0.41 15001
2 -0.9 0.02  -0.25 1858
 -0.92 0.02  -0.19 1011
$,")4 1
4  0.01 1.25 -0.15 
MULTIMARCA  0.12 0.47 -0.21 205
OMISIN -1.11 0.08  -0.1 192

232 REPORTE TCNICO


OPCIN OPCIONES DE PROMEDIO DE ERROR DE !*534%
TEM CORRELACIN N DE RESPUESTA
CORRECTA RESPUESTA HABILIDAD MEDICIN /54&)4

1  0.01 1.17 0.29 


2  0.02  -0.1 2451
  0.02 1.24  
$,")4 1
4  0.02 1.25 -0.1 
MULTIMARCA  0.1  -0.21 240
OMISIN -0.75  0.94 -0.09 
1  0.01 1 0.45 
2 -0.52 0.02 0.89 -0.19 2711
 -0.22 0.02  -0.08 2050
$,")4 1
4 -0.71 0.01   
MULTIMARCA  0.1 0.51 -0.21 270
OMISIN  0.12   100
1  0.01   10217
2 -0.17 0.01 1.01 -0.1 4125
 0.91 0.01 0.81 0.51 7121
$,")4 
4 -0.57 0.04 0.72 -0.1 722
MULTIMARCA -2.14 0.15  -0.17 178
OMISIN -1.14 0.09 0.51 -0.1 190
1 -0.02 0.01  -0.04 5987
2  0.02 0.77 -0.15 
  0.01 0.92 -0.2 
$,")4 4
4  0.01   8172
MULTIMARCA -2.18 0.12 0.44 -0.2 
OMISIN -0.41  1.01 -0.05 
1 -0.82 0.02 0.7 -0.27 2409
2 0.48 0.01 0.87 0.52 14789
 -0.71 0.02 0.75 -0.18 1574
$,")4 2
4  0.01 0.8  
MULTIMARCA  0.11  -0.18 248
OMISIN -1.15 0.12  -0.08 
1 -0.51 0.01 0.92 -0.21 
2 0.4 0.01 1.04  
 -0.45 0.02 1.08  1772
$,")4 2
4  0.02   
MULTIMARCA -2.59 0.12 0.42 -0.21 184
OMISIN   0.99 -0.07 

CAPTULO 5 PROCESAMIENTO DE DATOS 233


TABLA 5F.
LECTURA 3. INDICADORES POR OPCIN.
"LOQUE

OPCIN OPCIONES DE PROMEDIO DE ERROR DE !*534%


TEM CORRELACIN N DE RESPUESTA
CORRECTA RESPUESTA HABILIDAD MEDICIN /54&)4
1  0.01 1.07  5105
2 0.42 0.01   
  0.01 0.92 -0.17 
$,")4 2
4  0.02 0.95 -0.09 1218
MULTIMARCA  0.12 0.42 -0.24 228
OMISIN -0.99   -0.07 111
1 -0.07 0.01  -0.08 8717
2 0.71 0.01 0.95 0.4 
  0.02 0.92 -0.11 2289
$,")4 2
4  0.01 0.78  
MULTIMARCA  0.15   157
OMISIN -0.72 0.05  -0.11 484
1 0.01 0.01  -0.01 
2  0.02 2.05 0.21 
 -0.04 0.01 1.17 -0.05 
$,")4 1
4 -0.59    899
MULTIMARCA  0.14  -0.25 179
OMISIN -0.8 0.09  -0.09 242
1  0.01   
2  0.02 1.01 -0.08 
  0.01 0.9 0.47 7292
$,")4 
4 -0.12 0.01 1.04 -0.1 
MULTIMARCA -2.84 0.15  -0.25 
OMISIN  0.07 0.79 -0.08 
1  0.01 0.75 -0.24 5442
2  0.01 0.95  
 -0.25 0.02 0.94 -0.11 
$,")4 2
4 0.05 0.01  0.02 
MULTIMARCA -2.95 0.14 0.25 -0.25 150
OMISIN   0.84 -0.09 

234 REPORTE TCNICO


OPCIN OPCIONES DE PROMEDIO DE ERROR DE !*534%
TEM CORRELACIN N DE RESPUESTA
CORRECTA RESPUESTA HABILIDAD MEDICIN /54&)4

1  0.01 1.11  


2  0.01 1.01 -0.18 5210
 0.01 0.02  0 
$,")4 1
4 -0.54 0.02 0.77 -0.19 2099
MULTIMARCA -2.9   -0.25 148
OMISIN -0.59 0.09 0.97  207
1 -0.25 0.01   
2  0.02 0.72 -0.19 1584
 -0.75 0.02  -0.24 1781
$,")4 4
4 0.41 0.01   11258
MULTIMARCA  0.14 0.59  192
OMISIN -0.8 0.1 0.91 -0.08 174
1  0.01 0.88  5100
2  0.01  0.41 
  0.02   2899
$,")4 2
4 -0.17 0.02 1.17 -0.07 
MULTIMARCA    -0.24 
OMISIN -0.81 0.1  -0.07 
1 -0.1 0.01 1.08  4289
2 -0.17 0.01 0.99  
  0.01 0.94  
$,")4 
4  0.01 0.78 -0.15 
MULTIMARCA  0.14 0.54 -0.24 211
OMISIN -0.5 0.07   284
1 -0.17 0.01 1.19 -0.12 
2 -0.09 0.02  -0.04 
  0.02  -0.07 2597
$,")4 4
4  0.01 1.18 0.24 
MULTIMARCA  0.15 0.41 -0.24 151
OMISIN  0.08 0.98  259
1 -0.54 0.01 0.95 -0.24 
2  0.01  0.4 
 -0.54   -0.12 
$,")4 2
4 -0.81  0.72 -0.17 
MULTIMARCA  0.14 0.5 -0.25 178
OMISIN -0.75 0.1 1.01 -0.08 195

CAPTULO 5 PROCESAMIENTO DE DATOS 235


MAPA DE DISTRIBUCIN DE HABILIDADES Y DIFICULTADES
4!",!
,%#452!-!0!$%$)342)"5#).$%(!"),)$!$%39$)&)#5,4!$%3

ESTUDIANTES MAPA TEMS

4 .# +
|
|
|
. |
. |
. |

|
. |
. |
. |
.# |
. |
2 . T+
.## |T
.# |
.#### |
\$,")4$,")4$,")4
\$,")4$,")4
\$,")4
3 $,")4$,")4$,")4
\3$,")4$,")4
\$,")4$,")4$,")4$,")4$,")4
$,")4$,")4
\$,")4$,")4$,")4
\$,")4$,")4$,")4$,")4
\$,")4$,")4
\$,")4$,")4$,")4$,")4
- $,")4$,")4
\-$,")4$,")4$,")4$,")4
\$,")4$,")4$,")4
\$,")4$,")4$,")4$,")4$,")4
$,")4$,")4
\$,")4$,")4$,")4
\$,")4$,")4

236 REPORTE TCNICO


\$,")4$,")4$,")4
3 $,")4
.##### |S
\$,")4$,")4$,")4
.## |
.### |
\$,")4$,")4
\$,")4$,")4$,")4
-2 . T+
. |T
. |
\$,")4
. |
. |
|

. |
\$,")4
. |
. |
|
. |
-4 . +

#ADASMBOLO@EQUIVALEAESTUDIANTES%LPUNTO INDICAQUEHAYENTREYESTU-
diantes.

CAPTULO 5 PROCESAMIENTO DE DATOS 237


02/-%$)/ $%36)!#).%34.$!296!,/2%3-8)-/9-.)-/$%$)&)#5,4!$%3$%4%-3

'2&)#/

,%#452!Promedio, desviacin estndar y valores mximo y mnimo de dicultades de


tems, por bloque.

1.40

1.30

1.20

1.10

1.00 B1
B2
B3
0.90
B4
B5
0.80
B6

0.70

0.60

0.50

0.40
-4.00 -3.00 -2.00 -1.00 0.00 1.00 2.00 3.00 4.00

P r o me d io d e d ific u lta d ite ms

238 REPORTE TCNICO


FUNCIN DE INFORMACIN DE LA PRUEBA

'2&)#/

,%#452!&5.#).$%).&/2-!#).

Funcin de informacin de la prueba


Informacin

Medida

CAPTULO 5 PROCESAMIENTO DE DATOS 239


240
REPORTE TCNICO

VALOR DE DIFICULTAD DE TEMS POR PAS

TABLA 7A.
,%#452!6!,/2$%$)&)#5,4!$$%#!$!4%-0/20!3
Bloque 1.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4    -1.125          -1.279 -0.085 -1.212
$,")4 -1.848     -2.214 -1.200 -1.947 -1.518  -1.187  -1.187  -0.719 
$,")4 0.248 -0.528 -0.250   -0.277   1.077   0.710 0.991   
$,")4 0.215 0.919 -0.047  -0.794 -1.899      0.875    0.540
$,")4  -0.447  0.149    -0.299 0.244  0.255     0.094
$,")4     -4.122  -2.720  -2.841  -2.788   -2.928  
$,")4 -0.925 -2.477  -1.189 -1.820   -0.597  -1.244 -0.251 -0.527  -0.592  
$,")4 -0.472 0.714 -1.252 -0.274 -0.717 -0.894 0.218 -0.424   0.115 0.074  -0.080  
$,")4  -2.505 -2.820 -2.227     -2.242  -2.257 -2.420 -2.179   
$,")4 0.149    -0.019  0.870    0.770    1.240 
$,")4  -1.459 -1.502 -1.084      -1.115 -0.810 -0.527   0.407 
TABLA 7B.
,%#452!6!,/2$%$)&)#5,4!$$%#!$!4%-0/20!3
Bloque 2.

tem Argentina Brasil CHILE Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 -1.207 -0.714 -1.142 -0.589 -0.709  -0.201 -0.897    -0.720 -0.514  0.020 -0.848
$,")4 0.490 1.410     1.098   0.180  1.112 0.718   
$,")4 0.410 0.050 -0.191 -0.094 0.484 -0.882  -0.278 0.097  -0.181  0.184 0.109 0.918 
CAPTULO 5

$,")4 0.217 0.425 0.042 0.492 -0.297    0.812      1.121 0.490
$,")4 0.595 1.251    0.299   0.992  0.501 0.428 0.815   
$,")4 0.770   0.722  -0.028 0.984 0.772    0.845 0.957 0.818 0.927 
$,")4 0.757    0.180   0.850 0.945  1.192 0.749    0.742
$,")4 0.925  0.922    0.959  1.152  0.922  0.855   0.807
$,")4   0.049 0.719       1.457 1.085 1.509   0.915
$,")4  0.728 0.527 0.770 0.000 0.082     0.950 1.008   1.052 
$,")4 1.125 1.959  1.288 0.707 -0.042 2.157    2.242 1.712  1.822  1.204
PROCESAMIENTO DE DATOS
241
242
REPORTE TCNICO

TABLA 7C.
,%#452!6!,/2$%$)&)#5,4!$$%#!$!4%-0/20!3
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 -0.487  -1.177 -0.101   0.040   -0.799 0.754 0.229    
$,")4 -1.912    -2.509   -1.855   -1.502 -1.511  -1.481  
$,")4 -2.018  -2.724  -2.970 -2.819     -1.407    -0.921 
$,")4 -2.191      -1.279 -1.812   -1.229  -1.551  -0.171 -1.777
$,")4   -0.287  0.097  0.809 0.728 1.298  1.080  0.825 0.577  
$,")4  0.541  0.595   0.919 0.745 1.018 0.545 0.884   0.587  
$,")4  -0.212    -0.558    -0.175    0.172  
$,")4 -0.514  -0.924   -1.115  -0.771 -0.259  -0.195    -0.005 -0.844
$,")4       1.405    1.290 1.191  1.215 2.258 0.940
$,")4  -0.284 -0.757  -1.189 -1.414    -0.292 -0.125  -0.110   
$,")4    -0.555 -1.015 -1.219    -0.405    -0.112  
TABLA 7D.
,%#452!6!,/2$%$)&)#5,4!$$%#!$!4%-0/20!3
Bloque 4.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 -0.550  -1.207 -0.091 -0.715       -0.012 0.079  1.255 
$,")4    -1.514   -0.574  -0.227   -1.024 -1.110 -1.511  
$,")4 -1.284 -1.475    -2.501    -1.424  -0.882  -1.570 0.092 -1.142
CAPTULO 5

$,")4 -2.122   -1.987    -1.945 -1.220 -2.148    -1.758 -0.001 
$,")4 -0.071       -0.247  -0.049  0.025  -0.257  
$,")4     -0.570   -0.171  -0.721  0.005 -0.259 0.189  -0.119
$,")4  -0.782  -0.911  -1.447 -0.110 -0.592 -0.221 -0.790   -0.101 -0.475 0.719 
$,")4 -0.579 0.784 -0.227  -0.294  -0.544  -0.205 -0.554 -0.128  -0.272 -0.484 0.540 
$,")4   0.779 1.554 0.927  2.297 1.441 2.085 0.870  1.415 1.544  2.547 1.420
$,")4 -0.877 -1.107 -0.792  -0.879 -1.150      -0.599   0.401 
$,")4 1.098   0.842  -0.848 1.729 1.221 1.890 0.982  1.529  1.422 2.184 
PROCESAMIENTO DE DATOS
243
244
REPORTE TCNICO

TABLA 7E.
,%#452!6!,/2$%$)&)#5,4!$$%#!$!4%-0/20!3
Bloque 5.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4  -0.504 -1.151 -0.255  -0.975 0.255 -0.192  -1.048  0.018 -0.002  -0.180 -0.482
$,")4     -0.997    0.248  -0.251 0.088  0.510  -0.701
$,")4 0.122 -0.185 -0.285  -0.507  0.981 0.512 0.875 0.275      
$,")4 1.150 2.497     1.825  1.858 1.191   1.878   1.077
$,")4 -0.924 0.225 -1.501 -1.054  -1.914  -0.827 -0.777 -1.781  -0.980 0.054 0.018 -0.180 
$,")4 -0.774 -0.550  -0.417 -0.817 -0.555  -0.245  -0.547   -0.217  -0.295 -0.784
$,")4   -0.991 -0.074 -1.454 -1.092    -1.009    -0.158  
$,")4   0.272  0.140 0.404  1.152 1.778 0.950 1.554  1.291 1.200  0.951
$,")4 0.757  0.720 0.781  -0.070   0.991 0.541   0.858   0.581
$,")4 -0.848 -1.505  -0.985 -1.797 -1.772  -0.719       1.025 -0.794
$,")4  -1.185 -0.549  -1.015    -0.408 -1.159 -0.140  -0.122  0.820 
4!",!&
,%#452!6!,/2$%$)&)#5,4!$$%#!$!4%-0/20!3
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.200 1.228   -0.051 -1.920 0.570 -0.004   0.298 0.245   0.952 0.194
$,")4 1.250  0.787 1.254 1.077  1.751 1.444 1.701 0.800   1.278  1.808 
$,")4  0.921   1.295 1.502  0.887  0.858  0.754 1.180 0.979  0.958
CAPTULO 5

$,")4  0.891 0.220 0.920 0.055  1.295      1.025   
$,")4 0.817  0.050 1.228 0.954  1.751    1.481  1.474  1.845 0.719
$,")4  0.408  -0.591 -0.192 -1.087   0.595  -0.259  1.284 0.119  0.498
$,")4    -0.574 -0.995     -0.294 -0.159 -0.059 0.055 0.115 0.977 -0.214
$,")4 -0.009   0.150  -0.457 0.528     0.419   0.871 0.021
$,")4  1.024  0.984  0.728  1.270   1.294 1.452  1.225  1.289
$,")4  0.051 0.178 0.184 -0.002 1.259    0.288 0.280 0.429 0.507   0.488
$,")4   -1.927  -2.171  -0.982 -0.944    -0.959 -0.821  0.124 -1.048
PROCESAMIENTO DE DATOS
245
246
REPORTE TCNICO

VALOR DE AJUSTE DE TEMS POR PAS

TABLA 8A.
,%#452!6!,/2$%!*534%$%#!$!4%-0/20!3
Bloque 1.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4   1.04 1.00 0.95 0.80 1.05 0.99 0.87 0.99 0.97  1.02  0.87 0.97
$,")4    0.88 0.82 0.79 0.90 0.87 0.91 0.84 0.98 0.92 0.85 0.92 1.00 0.81
$,")4  0.82 0.85 0.84  0.95 0.82 0.82 0.84   0.82  0.89  0.87
$,")4  1.02 0.91 0.92 0.84 0.80 0.95  1.01 0.92 0.91 0.97 0.94 0.90 0.95 0.94
$,")4 1.07 0.98 1.00  1.02 1.09  1.08 1.10 1.08 1.02  0.98 0.97  1.11
$,")4  0.55 0.49  0.49 0.40  0.59  0.58 0.72  0.57   
$,")4 0.84   0.79 0.79 0.74 0.91 0.82 0.89 0.75 0.85 0.89 0.89 0.87 1.05 0.82
$,")4 1.00 1.15 1.04  1.08  0.98  1.05 1.01 0.98 0.95 1.08 0.99 0.95 1.01
$,")4 0.79 0.95 0.77    0.99 0.78 0.95 0.77 0.99 0.87 0.71 0.82 0.80 0.71
$,")4   0.91  0.95  1.19  0.98 1.02  1.11 1.01 1.08  0.90
$,")4 0.94   0.90  0.91 0.98 0.97 1.02  0.87 0.99  1.05  0.90
TABLA 8B.
,%#452!6!,/2$%!*534%$%#!$!4%-0/20!3
Bloque 2.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 1.08 1.04 1.12 1.12 1.14 0.98 1.04 1.18 1.05  1.12 1.00 1.01  0.88 1.05
$,")4 0.98  0.99 1.04  1.12  1.02 1.19  1.01 1.09 1.04 1.05 1.28 0.99
$,")4 1.20 1.09 1.19  1.29  1.02 1.17  1.18 1.17  1.12 1.11  1.18
CAPTULO 5

$,")4   1.01 1.11 1.01 1.04 1.05 1.05 1.08 1.04 1.05 1.07  1.14 1.01 
$,")4  1.40  1.21 1.22    1.20 1.19 1.15 1.25 1.20 1.15 1.21 1.27
$,")4 1.19   1.22 1.25 0.98 1.10 1.21  1.28  1.21 1.25   
$,")4 1.09 1.05 1.08 1.07 1.10 1.29  1.10 1.02    1.07 1.11 1.00 1.11
$,")4 1.04 1.12 1.04 1.05  1.04 1.07 1.04 1.01 1.10 1.07 1.04 0.99  1.04 1.00
$,")4 1.04  1.02  1.02 0.89 0.91 0.98  1.07 0.99 0.94 1.02 0.97 0.81 0.98
$,")4  0.97 1.09 0.98  0.89 1.04   1.04 0.97 1.10 1.07 1.07  1.07
$,")4 0.80   0.80 0.87 0.81 0.79 0.84  0.81 0.79 0.78 0.74 0.75  0.82
PROCESAMIENTO DE DATOS
247
248
REPORTE TCNICO

TABLA 8C.
,%#452!6!,/2$%!*534%$%#!$!4%-0/20!3
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 1.02 1.07  1.02 0.98 1.12 1.15 1.04 1.18 1.05 1.15 1.04 1.21 0.98 1.22 1.04
$,")4 0.80 0.82 0.71  0.75  0.95  0.94 0.79 0.91 0.90 0.85  0.79 0.87
$,")4 0.82 0.75 0.77 0.77  0.59 0.82  0.90 0.74 0.91 0.90  0.94 1.08 0.78
$,")4    0.72 0.71 0.47 0.74 0.75 0.75  0.78 0.71 0.71 0.75  0.72
$,")4 0.99 1.08 0.94  0.95 1.01 0.92 0.99 1.02 1.07 0.99  0.97  0.88 0.94
$,")4  1.08 0.99  0.91 0.99  1.12 1.09  1.17   1.11  1.09
$,")4  0.91  0.95 1.00 0.99  0.95 1.07 1.04 0.97 0.99 0.94 0.99 0.92 1.00
$,")4 1.02  1.00 1.02 1.00  1.14 1.01 1.09 0.98 0.97  1.14 1.08 1.54 1.05
$,")4 1.01 1.02  0.99  0.97   1.01 0.97 1.04 1.00 1.08 1.01 0.78 0.95
$,")4 0.92  0.77 0.90 0.80 0.88 0.84     0.89  0.85 0.82 0.91
$,")4 0.92  0.88 1.00 0.97 0.87 0.88 1.01  0.92 0.94 0.98 0.98 0.94  0.94
TABLA 8D.
,%#452!6!,/2$%!*534%$%#!$!4%-0/20!3
Bloque 4.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.87  0.82 0.89 0.87 1.00 0.99 0.94 0.94 0.84 0.99   0.92  0.90
$,")4  0.84 0.81 0.87 0.77 0.58 0.82 0.84 0.82 0.71   0.71 0.74 0.78 
$,")4  0.85 0.75 0.84    0.80 0.88 0.78 0.82 0.89 0.78 0.88 0.82 0.90
CAPTULO 5

$,")4 0.70 0.88 0.75   0.51 0.75 0.71 0.80  0.82 0.77 0.74  0.75 0.78
$,")4 1.07 1.12 1.05 1.15 1.08 1.29 1.22 1.25  1.20   1.11 1.15 1.10 1.07
$,")4 1.05 1.05 1.02  1.01 1.10 1.04  1.11 0.94 0.99   1.11 1.04 1.04
$,")4 0.88 0.78 0.80 0.81 0.82  0.89 0.82  0.87 0.89  0.91  0.89 
$,")4 1.49  1.54  1.40  1.25   1.41 1.25 1.40   1.08 
$,")4  0.84 0.99 0.95 1.07 0.98  0.92 0.77 0.98 0.85 0.90 0.80 0.88 0.57 0.89
$,")4 1.20 1.18   1.10  1.18 1.09 1.07  1.08 1.12 1.07 1.18 0.99 1.19
$,")4 0.95 0.97  0.92 0.99 0.87    0.91  0.95 0.81 0.89  0.92
PROCESAMIENTO DE DATOS
249
250
REPORTE TCNICO

TABLA 8E.
,%#452!6!,/2$%!*534%$%#!$!4%-0/20!3
Bloque 5.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 1.04 0.99  1.11 1.08 0.94 1.19 1.17 1.17   1.15 1.10 1.04  1.15
$,")4 0.77 0.74  0.92 0.77 0.88 1.05 0.88 0.99 0.71 0.92 0.95 0.95  1.05 0.84
$,")4 0.99  0.99 0.97  0.94 0.97  0.94  0.95 0.94 1.01 0.98 0.95 
$,")4     0.95 0.85 0.80 0.91 0.79 0.84  0.84 0.79 0.81 0.70 0.95
$,")4 0.97 1.10 1.04 0.81 1.19 0.82 0.97 0.95 1.00  0.91 1.10 0.94  1.11 0.97
$,")4 1.19 1.22  1.19 1.10 1.07   1.22  1.17 1.17 1.18  1.20 1.28
$,")4 0.94 0.87 0.89  0.88 0.81   1.01 0.84  0.85  0.90  0.94
$,")4 0.90 0.82 0.84  0.89 0.85 0.82  0.89 0.87 0.85 0.80 0.82   0.82
$,")4 1.12 1.15 1.07  1.01 0.99   1.04  1.08 1.10 1.10 1.22  1.22
$,")4 0.79 0.77 0.79 0.77 0.75 0.80 0.88 0.80 0.87 0.78 0.87 0.78 0.87 0.81 0.82 0.77
$,")4 1.05  1.10  1.10 1.07 1.01 1.12 1.00 1.12 1.07    0.99 0.97
4!",!&
,%#452!6!,/2$%!*534%$%#!$!4%-0/20!3
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 1.01   1.01  0.95 0.95 1.01 1.05 0.97 1.02 1.01 1.12 1.09 1.08 1.02
$,")4 0.92  0.89 1.02 0.89 0.95  0.98 1.12 0.99 1.04 0.97 0.89  0.87 
$,")4 1.58   1.51   1.28 1.55  1.74 1.28    1.29 
CAPTULO 5

$,")4 0.95 0.97 0.94 0.87 0.94 0.80  0.85 0.90  1.00  0.92 0.94 0.87 0.92
$,")4  1.00 1.02 1.00 1.07 1.07 0.99 0.97 0.99 0.95 0.92  0.91  0.89 0.94
$,")4 1.15  1.12 1.05 1.07  1.12 1.05 1.04 1.04  1.04 1.11 1.02 1.11 1.08
$,")4 0.97 0.92 1.01 1.02 1.05 0.97 0.97  0.88 0.97 0.97 0.90  0.97 0.99 0.95
$,")4   0.97 1.04 0.95 1.02 1.05 0.89 0.99 0.98 0.98    1.04 1.04
$,")4 0.98   0.90 1.01 0.88 0.90 0.91 0.87 0.90 0.97 0.94 0.94  0.84 0.92
$,")4 1.21 1.07 1.19 1.18 1.12 1.70 1.09 1.17 1.08  1.12 1.09 1.11 1.18  1.14
$,")4 0.94 0.78 1.00 0.94 1.09 0.94 0.94 1.01  0.87 0.98 0.92 1.07 0.91 0.91 0.95
PROCESAMIENTO DE DATOS
251
252
REPORTE TCNICO

VALOR DE DISCRIMINACIN DE TEMS POR PAS

TABLA 9A.
,%#452!6!,/2$%$)3#2)-).!#).$%#!$!4%-0/20!3
Bloque 1.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 1.05 1.17  1.01 1.04  0.97   1.02 1.11 1.10 1.05   1.04
$,")4 1.05 1.10 1.09 1.05 1.04  1.08 1.04   1.00 1.05 1.11 1.02 0.99 1.09
$,")4 1.41 1.41 1.48 1.48 1.50 1.21 1.22 1.49 1.25 1.42 1.24 1.40 1.14 1.22 1.14 1.40
$,")4 1.22 1.00  1.18  1.10 1.12 1.11  1.24 1.20 1.08 1.17  1.09 1.22
$,")4 0.88 1.04 0.95 0.91 0.94 0.80 0.84 0.77  0.81 0.88 0.94  1.14 0.51 
$,")4  1.07  1.04 1.05 1.08 1.07    1.04 1.05 1.07 1.07 1.15 1.05
$,")4  1.12 1.07 1.22 1.12 1.08 1.29 1.42  1.27 1.58    0.99 1.15
$,")4 1.04  1.01 0.94 0.89 0.72    1.05 1.10 1.18 0.77 1.04 1.10 1.01
$,")4 1.05 0.98  1.04   1.01 1.05 1.01 1.05 0.99  1.11 1.05 1.15 1.07
$,")4 1.20   0.91 1.20  0.82 1.01 1.02 0.97 0.82  1.01 0.88  1.25
$,")4 1.10 1.15 0.95 1.12 0.99 1.07  1.07  0.99 1.27 1.10 1.07 0.94  1.14
TABLA 9B.
,%#452!6!,/2$%$)3#2)-).!#).$%#!$!4%-0/20!3
Bloque 2.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.94 0.95 0.87 0.78 0.70  0.91  0.92  0.80 1.00 1.01 0.75  0.90
$,")4 1.08 0.92 1.11 0.98 1.14 0.82 0.87 0.98 0.82 1.12 1.05  1.00 0.95 0.79 1.05
$,")4 0.45 0.81 0.44 0.50  0.90 0.99  0.95   0.84  0.71 0.89 0.57
CAPTULO 5

$,")4 0.91 0.95 1.00  0.98 0.89 0.92  0.91 0.95 0.90 0.81    0.84
$,")4 0.47  0.58   0.52 0.58   0.59 0.57  0.58  0.47 0.47
$,")4    0.59 0.55 1.05 0.81   0.50    0.70 0.72 
$,")4 0.78  0.75 0.80  0.45 0.92 0.81 0.91 0.89 0.94 0.82 0.87  0.94 0.77
$,")4 0.98  1.00 0.89 1.12 0.90   0.97 0.92   1.05  0.91 1.00
$,")4 0.91 1.09 0.92   1.19 1.07 1.00 1.04  0.98 1.01 0.98 1.01  
$,")4  1.08 0.88 1.04 0.97 1.20  1.08 1.08 0.91  0.88 0.90 0.95  0.85
$,")4 1.25  1.24 1.21 1.29  1.08 1.11  1.21 1.08 1.14 1.25 1.14 1.12 1.20
PROCESAMIENTO DE DATOS
253
254
REPORTE TCNICO

TABLA 9C.
,%#452!6!,/2$%$)3#2)-).!#).$%#!$!4%-0/20!3
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.99   0.99 1.07 0.90  0.98  0.99 0.80 0.89 0.70 1.04  0.97
$,")4 1.08   1.07 1.04 1.05  1.07 1.05 1.07  1.07    1.04
$,")4 1.07 1.08 1.04 1.09 1.07 1.10 1.14 1.12 1.08 1.07   1.10 0.98 0.75 1.11
$,")4 1.14 1.09 1.09  1.04 1.07 1.25 1.15 1.40   1.22 1.20 1.17 1.55 
$,")4  0.87 1.14 1.08 1.18 0.99 1.11  0.99  1.04 1.12 1.04 1.09 1.02 
$,")4 0.91 0.82 1.07 0.78 1.24 1.05    0.94  0.87 0.82 0.80 0.98 0.84
$,")4 1.01 1.21 0.97 1.19 1.05 1.01  1.11 0.88 0.99 1.08 1.08  1.04 1.07 1.05
$,")4 0.98 0.74 1.01 0.99 1.01   1.01   1.14 0.80 0.80 0.87 -0.05 
$,")4 1.00  1.02  1.10 1.02 1.01 0.95 0.99   0.99 0.84 0.98 1.05 
$,")4 1.22  1.40 1.17 1.20 1.08 1.47  1.50  1.50    1.28 1.19
$,")4 1.15 1.15 1.29 0.99  1.09  0.99 1.18 1.18 1.19 1.14 1.05 1.21 1.07 1.12
TABLA 9D.
,%#452!6!,/2$%$)3#2)-).!#).$%#!$!4%-0/20!3
Bloque 4.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 1.27  1.22 1.27 1.29  1.01 1.18   1.09 1.10  1.22 1.05 1.24
$,")4 1.14 1.25 1.05 1.12 1.09 1.08  1.14 1.42 1.21 1.21   1.22 1.47 1.17
$,")4 1.05 1.08 1.10 1.11 1.11  1.20 1.19   1.19 1.10 1.22 1.09  1.05
CAPTULO 5

$,")4 1.12 1.14  1.15  1.09  1.15 1.21   1.17 1.25 1.22  1.14
$,")4  0.75 0.95  0.88 0.70  0.50  0.72 0.57    0.84 0.84
$,")4 0.91 0.99 0.97 1.01 0.98 0.94 1.01 0.95 0.85     0.79  
$,")4 1.27   1.28 1.14 1.24    1.19  1.40 1.21 1.28 1.17 
$,")4 0.17  -0.21  0.15 0.50    0.29  0.50 0.29  0.94 0.49
$,")4  1.11 1.01 1.01 0.91 1.00 1.02   0.99 1.08  1.12 1.02 1.11 1.07
$,")4 0.75 0.85 0.70     0.81 0.85 0.55 0.82 0.84 0.85   0.72
$,")4  1.02 0.92 1.09  1.18 0.99 1.04 1.01 1.08 1.00  1.12 1.05 1.00 1.10
PROCESAMIENTO DE DATOS
255
256
REPORTE TCNICO

TABLA 9E.
,%#452!6!,/2$%$)3#2)-).!#).$%#!$!4%-0/20!3
Bloque 5.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.99  0.92 0.74 0.91 1.04  0.58 0.59 0.70 0.72  0.78 0.94 0.40 
$,")4 1.29 1.21   1.29  1.00  1.02 1.24 1.22 1.12 1.15 1.18  1.25
$,")4 1.07 0.97 1.07 1.11 0.92 1.07 1.04 1.14  1.04 1.10  1.00 1.09 1.07 1.11
$,")4 1.08 0.90 1.14  1.09  1.09  1.11 1.18   1.08 1.18 1.07 
$,")4 1.07 0.85 0.98 1.22 0.90 1.05 1.12 1.09 1.02  1.19 0.94 1.19   1.04
$,")4  0.58 0.85        0.50  0.59 0.48 0.44 
$,")4 1.12 1.08   1.10 1.17 1.17 1.15 0.98  1.10  1.15 1.28 0.55 1.08
$,")4 1.21 1.41 1.47 1.27    1.17  1.20  1.19 1.17 1.20 1.04 1.25
$,")4 0.81 0.72   0.98 1.01 0.89 0.80 0.95  0.88 0.75  0.82 1.00 0.57
$,")4 1.28 1.19 1.17 1.29 1.14 1.11      1.48 1.28   
$,")4  1.01 0.84 0.87 0.87  0.97 0.74 1.02 0.90 0.80  0.92 1.01 1.00 1.04
4!",!&
,%#452!6!,/2$%$)3#2)-).!#).$%#!$!4%-0/20!3
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 1.05  1.08 1.02 1.11 0.99 1.10  0.91 1.04 0.94 0.99  0.70 0.88 0.99
$,")4 1.10 1.07 1.22 1.02  1.09 1.01  0.91 1.04 0.99 1.01 1.09 0.95  1.18
$,")4 0.10 0.12  0.08 0.50   0.15 0.00 -0.14  0.11   -0.11 0.08
CAPTULO 5

$,")4   1.24 1.21  1.28 1.07 1.42 1.20  1.02 1.10 1.12 1.09 1.05 
$,")4 1.09 1.00 0.92 0.99 0.89   1.05 1.01  1.04 1.02  0.95  1.08
$,")4 0.82 0.89  0.98 0.82 0.90 0.79 0.89 0.87 0.91    0.94  
$,")4 1.05  1.01 1.01 0.92  1.17 1.12 1.41 1.09   1.12  1.07 1.14
$,")4 0.92  1.10 0.97 1.10  0.95    1.09 1.04 0.91 0.97 0.91 0.90
$,")4 1.01  0.98  0.99 1.25  1.07 1.09 1.11   1.04  1.04 1.07
$,")4 0.41 0.79    0.29   0.74  0.59 0.75  0.52 0.85 0.70
$,")4  1.18 0.98 1.04 0.95 1.00  0.98 1.09 1.12 1.04   1.08  1.05
PROCESAMIENTO DE DATOS
257
258
REPORTE TCNICO

PORCENTAJE DE RESPUESTAS CORRECTAS DE CADA TEM POR PAS

TABLA 10A.
,%#452!0/2#%.4!*%$%2%305%34!3#/22%#4!3$%#!$!4%-0/20!3
Bloque 1.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay
$,")4 0.78 0.45 0.81  0.82 0.87   0.57 0.80    0.75 0.52 0.74
$,")4 0.82 0.79 0.87 0.80 0.91 0.87 0.72 0.84 0.79  0.74  0.74 0.78  0.81
$,")4  0.59 0.55 0.44  0.58 0.28 0.42 0.28 0.48     0.19 0.44
$,")4 0.44  0.51   0.84  0.40 0.27 0.51     0.21 
$,")4 0.48 0.57 0.55 0.47   0.40  0.45 0.49 0.44 0.42 0.48 0.41  0.49
$,")4  0.95   0.98  0.90 0.95 0.92 0.97  0.94 0.94  0.84 0.95
$,")4  0.88 0.85 0.74 0.82 0.89   0.50  0.55  0.57  0.47 0.77
$,")4 0.59  0.74     0.58 0.49  0.47 0.48 0.49 0.51  
$,")4 0.90 0.89 0.92 0.88 0.91 0.98 0.79 0.89 0.87 0.90 0.88 0.89 0.87 0.89  0.91
$,")4   0.52 0.40 0.49     0.48      
$,")4 0.70  0.78 0.72 0.78 0.77    0.71     0.41 0.70
TABLA 10B.
,%#452!0/2#%.4!*%$%2%305%34!3#/22%#4!3$%#!$!4%-0/20!3
Bloque 2.

TEM Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.75     0.79 0.54  0.57     0.48 0.49 
$,")4 0.41 0.24 0.44  0.47  0.27     0.28    0.42
$,")4  0.50 0.54  0.40 0.70 0.49  0.49 0.59 0.54 0.42 0.47 0.48  0.41
CAPTULO 5

$,")4 0.47 0.42 0.49 0.40 0.57  0.28 0.42  0.42     0.28 0.41
$,")4      0.50    0.41  0.41    
$,")4  0.41    0.55          
$,")4  0.42  0.40  0.57     0.25    0.20 
$,")4         0.27      0.24 
$,")4  0.47 0.49      0.24 0.22 0.21 0.28 0.22 0.27  
$,")4     0.50  0.28   0.45     0.29 
$,")4 0.29   0.25    0.20 0.12 0.27 0.11 0.19 0.24 0.17 0.11 0.28
PROCESAMIENTO DE DATOS
259
260
REPORTE TCNICO

TABLA 10C.
,%#452!0/2#%.4!*%$%2%305%34!3#/22%#4!3$%#!$!4%-0/20!3
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4  0.54 0.72 0.51  0.78 0.48 0.47    0.45 0.49 0.42  0.58
$,")4  0.87 0.91 0.81 0.90 0.94 0.77  0.78 0.85 0.79 0.78 0.77 0.77 0.54 0.81
$,")4 0.85 0.88 0.91 0.84  0.92 0.75   0.88 0.77 0.80  0.80  0.82
$,")4  0.91 0.94 0.85 0.94  0.74 0.82  0.88 0.74 0.78 0.78 0.80 0.50 0.82
$,")4   0.55  0.49 0.72   0.25 0.44 0.28    0.19 
$,")4   0.47  0.52     0.40     0.22 
$,")4 0.45 0.55 0.55 0.49    0.42  0.54 0.41  0.51 0.45 0.24 
$,")4      0.74   0.55  0.54 0.59  0.55 0.47 
$,")4    0.29     0.21  0.24 0.27 0.29  0.12 
$,")4 0.55    0.74 0.78  0.59 0.51 0.57 0.52 0.52 0.52 0.52  0.57
$,")4 0.57 0.58   0.71 0.75   0.54 0.59 0.59 0.54  0.51 0.40 0.57
TABLA 10D.
,%#452!0/2#%.4!*%$%2%305%34!3#/22%#4!3$%#!$!4%-0/20!3
Bloque 4.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4    0.51  0.88  0.48  0.57 0.44 0.49  0.51 0.24 0.58
$,")4 0.82  0.91 0.77 0.87 0.95  0.75  0.78    0.77 0.44 0.80
$,")4 0.74  0.85 0.75 0.87 0.89  0.74   0.72   0.78 0.44 0.70
CAPTULO 5

$,")4 0.85  0.90  0.92 0.95 0.74  0.72  0.75 0.80 0.75 0.81  0.81
$,")4 0.51     0.70 0.41 0.54 0.47 0.52 0.49 0.48 0.47 0.55  
$,")4 0.51   0.55  0.75 0.40  0.44  0.41 0.49  0.45 0.29 0.51
$,")4   0.70  0.77 0.78 0.50    0.59  0.50 0.59  0.55
$,")4   0.54 0.57 0.57 0.72 0.59       0.59  
$,")4 0.29 0.25  0.21  0.52 0.12  0.14  0.20 0.24 0.21 0.20 0.10 0.24
$,")4  0.70    0.74 0.55  0.55  0.59  0.55 0.55  
$,")4 0.29  0.44  0.49 0.70 0.18    0.20 0.22    
PROCESAMIENTO DE DATOS
261
262
REPORTE TCNICO

TABLA 10E.
,%#452!0/2#%.4!*%$%2%305%34!3#/22%#4!3$%#!$!4%-0/20!3
Bloque 5.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4   0.75    0.45 0.55 0.51 0.71 0.59 0.50 0.50 0.49 0.52 
$,")4 0.71   0.59 0.72  0.42 0.57 0.44   0.49 0.42 0.41  
$,")4 0.49 0.55 0.58 0.45  0.70  0.40    0.44  0.44 0.18 
$,")4 0.29 0.11    0.50 0.18 0.18 0.17 0.28   0.17  0.09 0.29
$,")4 0.70  0.80 0.72 0.80 0.85    0.82  0.70 0.48 0.51 0.52 
$,")4       0.58    0.54  0.54  0.54 
$,")4 0.59 0.80 0.72  0.79 0.75  0.58  0.71 0.49 0.58 0.48 0.55 0.50 
$,")4   0.47  0.50 0.49  0.28 0.18  0.21 0.25 0.25 0.28 0.11 
$,")4     0.54 0.57 0.28   0.40     0.21 
$,")4  0.78 0.77 0.70 0.84 0.84   0.57    0.58  0.28 
$,")4    0.58 0.72 0.74 0.50 0.58 0.58  0.54  0.52   0.71
4!",!&
,%#452!0/2#%.4!*%$%2%305%34!3#/22%#4!3$%#!$!4%-0/20!3
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.45  0.59  0.51 0.84  0.51 0.42 0.57 0.44 0.45 0.49 0.57  0.47
$,")4 0.25 0.20  0.25 0.29  0.18  0.18  0.17 0.20  0.22 0.17 0.28
$,")4   0.28  0.25        0.27   
CAPTULO 5

$,")4   0.47  0.49  0.25 0.44  0.58 0.19 0.28   0.15 
$,")4  0.24 0.51   0.40 0.18  0.20  0.21 0.25    
$,")4  0.42 0.41  0.54   0.59  0.44  0.41  0.48 0.41 0.40
$,")4 0.54    0.70 0.71  0.58 0.44 0.57 0.54 0.52 0.50 0.48  0.55
$,")4 0.50  0.58 0.47    0.47 0.40 0.54  0.41 0.47   0.50
$,")4 0.25  0.28    0.18  0.19  0.24 0.22    
$,")4 0.45 0.49 0.48  0.50 0.29  0.48  0.45 0.44 0.41 0.40 0.42  0.41
$,")4 0.77 0.77 0.85 0.78 0.87 0.91  0.70  0.75  0.70  0.81 0.47 0.72
PROCESAMIENTO DE DATOS
263
V.2.3. TEMS DE LECTURA 6

La presente seccin muestra los resultados del procesamiento de datos para anlisis de tems del Estudio Principal
del Segundo Estudio Regional Comparativo y Explicativo SERCE, el cual incluy la aplicacin de pruebas de Lectura
(grados tercero y sexto), Matemtica (grados tercero y sexto) y Ciencias (grado sexto); la aplicacin de la prueba
de Ciencias se realiz en aquellos pases que voluntariamente optaron por incluirla.

El procesamiento de datos se realiz de acuerdo con lo planteado en el Documento Tcnico del Procesamiento
de datos para el Anlisis de tems y la Produccin de Resultados del SERCE, en el cual se propuso la Teora de
Respuesta a tem como modelo de anlisis y una serie de indicadores estadsticos para evaluar el comportamiento
de tems y de grupos de tems; en dicho documento se hicieron explcitos los criterios de anlisis para cada in-
dicador durante el anlisis de tems.
Es de anotar que el anlisis de tems es un proceso cuantitativo y cualitativo mediante el cual se establece la
calidad de los tems de un instrumento, en relacin con los propsitos para los cuales fueron elaborados. Su real-
izacin exige armonizar el conocimiento profundo del objeto de evaluacin, la poblacin evaluada y los propsi-
tos de la evaluacin con la capacidad para interpretar adecuadamente los indicadores estadsticos disponibles. El
proceso de anlisis de tems del Estudio Principal conducir a la toma de decisiones en relacin con la inclusin o
exclusin de tems para la fase de calicacin y produccin de resultados del Estudio. Los indicadores reportados
en este documento sern objeto de anlisis por parte de los expertos en psicometra y en cada disciplina a n de
asegurar que la produccin de los resultados nales del SERCE utilice la informacin de mayor calidad.
Resultados sobresalientes

La prueba result relativamente fcil para el conjunto de estudiantes con los que se estimaron los indicadores.
Para la muestra utilizada en el anlisis, el Bloque 2 result ser el ms fcil y el Bloque 1 el ms difcil; la difer-
encia entre los dos es de 1.25 logits.
$EACUERDOCONLOSRESULTADOSDEAJUSTE SEDEBENELIMINAR PARALACALIlCACINlNAL LOSTEMS$,")4 $,-
")4Y$,")4.OOBSTANTE SERECOMIENDAQUEELGRUPODEEXPERTOSANALICECONCUIDADOESTOSTEMSYA
que algunos se encuentran muy cerca del criterio de eliminacin.
En el grupo de estudiantes utilizado para la estimacin de indicadores hay 200 con todas las respuestas correctas
y 19 con cero respuestas correctas .

DEPURACIN
DE LA INFORMACIN RECIBIDA

El Laboratorio Latinoamericano para la Evaluacin de la Calidad de la Educacin, LLECE, envi las bases de datos
con las respuestas de los estudiantes evaluados en el Estudio Principal del SERCE, a partir de las cuales se pro-
ducirn resultados. Esta base de datos ya haba sido depurada de acuerdo con criterios preestablecidos.
En concordancia con el procedimiento planteado en el documento tcnico para el Procesamiento de Datos para
el anlisis de tem y la Produccin de Resultados del Estudio Principal del SERCE, se realizaron dos procedimien-
tos de depuracin de las bases de datos recibidas para obtener los diferentes indicadores de los tems, de los
bloques y de la prueba, luego de excluir la informacin del Estado de Nuevo Len. Dadas las caractersticas de la
participacin del Estado de Nuevo Len (Mxico), se debe eliminar su informacin al estimar los indicadores para
realizar el anlisis de tem. En Lectura de grado sexto participaron 4998 estudiantes de este estado.

264 REPORTE TCNICO


Procedimiento 1. Depuracin por preguntas no alcanzadas:

Se eliminan los registros de aquellos estudiantes evaluados que no respondan (no alcancen) los dos ltimos tems
del bloque que ocupe la segunda posicin en su cuadernillo. Esta eliminacin de registros se
realiza antes de procesar los datos. La base de datos que resulta despus de este proceso es la que se utiliza para
la estimacin de los valores de ajuste de los estudiantes.

Procedimiento 2. Depuracin por desajuste de estudiantes evaluados:

Se eliminan los registros de aquellos estudiantes evaluados cuyo valor de ajuste prximo o lejano sea inferior a
OSUPERIORA%STEPROCESOSELLEVAACABOSLOCONLOSESTUDIANTESQUERESPONDIERONPORLOMENOSUNTEM
de la prueba y las dos ltimas preguntas del cuadernillo asignado. El resultado es una nueva base de datos slo
con los registros de los estudiantes que se utilizan para la estimacin de los parmetros de los tems, bloques y
pruebas.

Tabla 1.
,%#452!.MERODEESTUDIANTES PORPAS SEGNPROCESODEDEPURACIN

DEPURACIN
N
Pas N No Alcanzadas N Desajuste N Final %
Inicial
Argentina   1580 4220  
Brasil 5001    70,9
Chile    4892  
Colombia 5851     
Costa Rica      
Cuba      
Ecuador     70,1
El Salvador    4752  
Estado Nuevo Len 4998
'UATEMALA 5157    70,9
Mxico     72,1
Nicaragua  90 1202  78,9
Panam   1249  71,8
Paraguay   1142   
Per 4504 175 994  74,0
Rep. Dominicana   1244 2792  
Uruguay 5989 278 1475  70,7
TOTAL 90471 2530 21497 61446 67,9

CAPTULO 5 PROCESAMIENTO DE DATOS 265


$ELTOTALDEPASESCONINFORMACINPARALAESTIMACINDEINDICADORES PARTICIPANCONMSDELDESUS
estudiantes evaluados.
2EPBLICA$OMINICANA 'UATEMALA 0ARAGUAY 5RUGUAY Y!RGENTINASONLOS
pases con ms prdida de registros de informacin por no alcanzar los 2 ltimos tems.
#UBA 2EPBLICA$OMINICANA Y#OSTA2ICA SONLOSPASESCONUNAPRDIDAMAYORAL
29% de sus registros por desajuste, a partir de los datos de poblacin luego de la primera depuracin.
Luego de la depuracin realizada, el nmero de estudiantes por bloque y por cuadernillo cuya informacin se
UTILIZAPARALAESTIMACINDEINDICADORESSEENCUENTRAENLASTABLASY

Tabla 2.
,%#452!.MERODEESTUDIANTESPORBLOQUE

Bloque N
1 
2 
 
4 21595
5 
 

4ABLA
,%#452!.MERODEESTUDIANTESPORCUADERNILLO

Cuadernillo N
1 
2 10199
 12100
4 
5 
 

266 REPORTE TCNICO


ANLISIS DE DATOS

A continuacin se presentan los indicadores para realizar el anlisis de tem, de bloque y de


prueba. Las tablas presentan informacin separada por bloques para facilitar los procesos de
anlisis por parte del equipo de expertos; no obstante, el procesamiento de datos se realiz
para la prueba como una totalidad.

INDICADORES POR TEM

Tabla 4a.
LECTURA 6. Indicadores por tem.
Bloque 1.

Ajuste Ajuste
Error de Correlacin
tem &ORMATO Dicultad Discrimin. Prximo Lejano N
Medicin punto-medida
(Int) (Outt)
$,")4 SMUR   1.02 0.25 0.98  19559
$,")4 SMUR   0.75  1.08 1.12 19559
$,")4 SMUR   1.09  0.97  19559
$,")4 SMUR  0.017 1.02 0.41 0.99 0.99 19559
$,")4 SMUR    0.5 0.89 0.87 19559
$,")4 SMUR -0.207  1.14 0.42  0.95 19559
$,")4 SMUR 1.155 0.017     19559
$,")4 SMUR   0.79   1.09 19559
$,")4 SMUR   1.04 0.41 0.99 0.99 19559
$,")4 SMUR 0.489    1.09 1.15 19559
$,")4 SMUR -2.028 0.021 1.1  0.91  19559
$,")4 SMUR -0.755  1.2   0.88 19559
$,")4 SMUR 0.498  0.97  1.01 1.01 19559
$,")4 SMUR  0.021 1.01  0.99  19559
$,")4 SMUR -0.075   0.4 0.98 0.99 19559
$,")4 SMUR   0.82  1.05  19559

CAPTULO 5 PROCESAMIENTO DE DATOS 267


Tabla 4b.
LECTURA 6. Indicadores por tem.
Bloque 2.

Ajuste Ajuste
Error de Correlacin
tem &ORMATO Dicultad Discrimin. Prximo Lejano N
Medicin punto-medida
(Int) (Outt)
$,")4 SMUR  0.025 1.1  0.91 0.7 
$,")4 SMUR  0.042    0.54 
$,")4 SMUR    0.27   
$,")4 SMUR   1.04 0.25  0.71 
$,")4 SMUR -1.209 0.019 0.95   1.04 
$,")4 SMUR  0.019 1.04  0.98 0.94 
$,")4 SMUR  0.027 1.08  0.92 0.72 
$,")4 SMUR  0.017 0.45 0.24 1.15  
$,")4 SMUR 0.271 0.017 1.08 0.42 0.97 0.98 
$,")4 SMUR -1.451 0.02 0.91 0.27 1.05 1.08 
$,")4 SMUR  0.017 1.18  0.95 0.95 
$,")4 SMUR  0.019 0.85 0.28 1.07 1.09 
$,")4 SMUR  0.017 0.87   1.07 
$,")4 SMUR 1.174 0.02 1.15 0.48 0.9  
$,")4 SMUR  0.018 0.78  1.07 1.11 
$,")4 SMUR 0.208 0.017 0.42 0.24 1.17 1.25 

268 REPORTE TCNICO


Tabla 4c.
LECTURA 6. Indicadores por tem.
"LOQUE

Ajuste Ajuste
Error de Correlacin
tem &ORMATO Dicultad Discrimin. Prximo Lejano N
Medicin punto-medida
(Int) (Outt)
$,")4 SMUR -1.152 0.018   1.01 1.05 
$,")4 SMUR  0.02    0.85 
$,")4 SMUR  0.018 1.11  0.95 0.9 
$,")4 SMUR  0.019 1.08  0.95  
$,")4 SMUR  0.018   1.04 1.04 
$,")4 SMUR  0.019  0.41 0.97  
$,")4 SMUR -0.847 0.017 1  1 1 
$,")4 SMUR  0.019  0.42  0.95 
$,")4 SMUR 0.901 0.017 1.01 0.4 0.99 0.99 
$,")4 SMUR     1.05 1.07 
$,")4 SMUR    0.44  0.95 
$,")4 SMUR 1.05 0.018 1.12   0.89 
$,")4 SMUR -0.001  1.22 0.45 0.94  
$,")4 SMUR -1.424 0.019  0.4 0.92  
$,")4 SMUR  0.017 0.78  1.09 1.11 
$,")4 SMUR  0.017 1.14 0.41 0.95  

CAPTULO 5 PROCESAMIENTO DE DATOS 269


Tabla 4d.
LECTURA 6. Indicadores por tem.
Bloque 4.

Ajuste Ajuste
Error de Correlacin
tem &ORMATO Dicultad Discrimin. Prximo Lejano N
Medicin punto-medida
(Int) (Outt)
$,")4 SMUR -1.507 0.017 1.01  0.99 0.97 21554
$,")4 SMUR  0.015 1.15  0.95 0.94 21554
$,")4 SMUR 0.718   0.27 1.1 1.11 21554
$,")4 SMUR  0.015 0.79 0.29 1.08 1.11 21554
$,")4 SMUR  0.015 1.21   0.91 21554
$,")4 SMUR -0.505 0.015 0.72 0.28 1.08 1.11 21554
$,")4 SMUR 0.287 0.015  0.48 0.9 0.89 21554
$,")4 SMUR -1.518 0.017 1.07   0.9 21554
$,")4 SMUR -1.414 0.017 0.94 0.27  1.08 21554
$,")4 SMUR  0.015   1.04 1.07 21554
$,")4 SMUR 0.417 0.015 1.18 0.44 0.94  21554
$,")4 SMUR  0.015 0.89  1.04  21554
$,")4 SMUR  0.015   1.02  21554
$,")4 SMUR  0.015 0.9  1.04  21554
$,")4 SMUR  0.015 0.5   1.2 21554
$,")4 SMUR -0.079 0.015 1.22  0.94  21554

270 REPORTE TCNICO


Tabla 4e.
LECTURA 6. Indicadores por tem.
Bloque 5.

Ajuste Ajuste
Error de Correlacin
tem &ORMATO Dicultad Discrimin. Prximo Lejano N
Medicin punto-medida
(Int) (Outt)
$,")4 SMUR -2.871  1.07    
$,")4 SMUR 1.18   0.27 1.09 1.08 
$,")4 SMUR  0.014   1.04 1.05 
$,")4 SMUR  0.014 0.81   1.07 
$,")4 SMUR  0.018 1.1   0.81 
$,")4 SMUR -1.425 0.017 1.12   0.85 
$,")4 SMUR -0.515 0.014 1.09  0.98 0.95 
$,")4 SMUR  0.015  0.44 0.92 0.89 
$,")4 SMUR -0.477 0.014 1.11  0.97 0.95 
$,")4 SMUR  0.014 0.95  1.01 1.02 
$,")4 SMUR  0.015 1.07  0.98  
$,")4 SMUR  0.014 0.9   1.02 
$,")4 SMUR 0.729 0.015 0.72 0.25 1.11 1.15 
$,")4 SMUR -0.984 0.015   1 1.09 
$,")4 SMUR  0.014   1.01 1.01 
$,")4 SMUR  0.015 0.79 0.29 1.08 1.11 

CAPTULO 5 PROCESAMIENTO DE DATOS 271


Tabla 4f.
LECTURA 6. Indicadores por tem.
"LOQUE

Ajuste Ajuste
Error de Correlacin
tem &ORMATO Dicultad Discrimin. Prximo Lejano N
Medicin punto-medida
(Int) (Outt)
$,")4 SMUR 0.074 0.014  0.4 0.99 0.99 
$,")4 SMUR -0.82 0.015     
$,")4 SMUR  0.014 1  1 1 
$,")4 SMUR 0.555 0.014 1.15 0.45 0.94  
$,")4 SMUR 0.022 0.014 1.1 0.41 0.97 0.97 
$,")4 SMUR  0.014 1.08 0.42 0.98 0.97 
$,")4 SMUR -0.088 0.014 0.51 0.25 1.12  
$,")4 SMUR -0.194 0.014 0.7  1.08 1.12 
$,")4 SMUR  0.014 0.95  1.01 1.02 
$,")4 SMUR -1 0.015 1.05  0.98  
$,")4 SMUR  0.015 0.94   1.02 
$,")4 SMUR  0.014 1.48 0.51  0.81 
$,")4 SMUR -0.81 0.015   1.08 1.2 
$,")4 SMUR  0.014    0.91 
$,")4 SMUR 0.457 0.014  0.45 0.95  
$,")4 SMUR  0.017 1.09   0.87 

272 REPORTE TCNICO


INDICADORES POR OPCIN

Tabla 5a.
LECTURA 6. Indicadores por opcin.
Bloque 1.

Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad
1  0.01 0.99 0.25 17948
2 -0.87 0.04 0.72 -0.12 
  0.04 0.88 -0.09 
$,")4 1
4   0.87  
Multimarca  0.18  -0.08 57
Omisin -0.74  0.78 -0.12 
1 -0.42 0.02 0.85 -0.14 
2  0.01 1.15  8114
 -0.19 0.02 1.2 -0.07 
$,")4 2
4 -0.15 0.01 1.12 -0.17 7807
Multimarca -1.15 0.12 0.58 -0.1 
Omisin    -0.07 208
1 -0.21 0.01 1.02 -0.21 
2  0.01 0.97  7547
  0.02 0.81 -0.14 
$,")4 2
4  0.02 0.88  1850
Multimarca    -0.08 101
Omisin     811
1  0.02 0.82 -0.15 
2  0.02 0.59 -0.18 1105
 -0.12 0.01   8818
$,")4 4
4  0.01 1.01 0.41 
Multimarca  0.04  -0.12 
Omisin -0.55 0.08 0.77  
1 -0.45 0.01 0.77  
2  0.01 0.89 -0.24 
 -0.17 0.02 1.14 -0.07 
$,")4 4
4  0.01  0.5 8424
Multimarca -1.02 0.08  -0.11 205
Omisin -0.41  1.02 -0.05 227

CAPTULO 5 PROCESAMIENTO DE DATOS 273


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad
1 -0.28 0.01 1.01 -0.2 5005
2 -0.49 0.02 0.91 -0.14 1289
 0.44 0.01 0.98 0.42 10747
$,")4 
4 -0.57 0.01  -0.22 
Multimarca -1.77 0.18  -0.1 
Omisin -0.71 0.05  -0.1 
1  0.01 0.9 -0.18 5584
2 -0.04 0.01 1.22  5924
  0.02 0.82 -0.14 2090
$,")4 4
4  0.01   5482
Multimarca  0.14  -0.07 
Omisin -0.48 0.05 0.74 -0.08 
1 0.42 0.01 1.14  
2 -0.15 0.01 1.18 -0.1 
  0.01 1.01 -0.14 
$,")4 1
4  0.01 0.9 -0.15 2918
Multimarca -0.99 0.12  -0.08 121
Omisin -0.49 0.04 0.87 -0.08 459
1  0.01 0.99 -0.22 
2 -0.48 0.01  -0.22 2778
 0.52 0.01 1 0.41 8515
$,")4 
4  0.01 1.21 -0.05 2748
Multimarca  0.19 1.12 -0.07 78
Omisin -0.5  0.89  
1 0 0.01 1.55 -0.04 
2  0.01 1.09  7914
 -0.4 0.02  -0.17 
$,")4 2
4 -0.59 0.02  -0.19 
Multimarca  0.1  -0.09 
Omisin -0.75  0.57  512
1 -0.91   -0.17 
2  0.02  -0.18 772
 -0.75 0.02  -0.21 1257
$,")4 4
4 0.21 0.01 0.94  
Multimarca  0.12 0.4 -0.12 
Omisin -0.82 0.09 0.74 -0.05 

274 REPORTE TCNICO


Promedio
Opcin Opciones de Error de Ajuste
tem de Correlacin N de Respuesta
correcta respuesta Medicin (Outt)
habilidad
1  0.01 0.94  12929
2 -0.57 0.02 0.8 -0.18 1497
 -0.48 0.01 0.89 -0.28 
$,")4 1
4   0.71 -0.15 719
Multimarca -1.9  0.45 -0.09 
Omisin -0.84   -0.09 201
1  0.01   
2  0.01 1.02  
 -0.42 0.02 0.81  2122
$,")4 2
4 -0.01 0.01 1.28 -0.04 
Multimarca  0.14  -0.11 91
Omisin  0.07   
1 -0.07 0.01 1.08 -0.07 4570
2 0.89 0.02   
  0.01 0.78  
$,")4 2
4  0.01 1.01 -0.07 8021
Multimarca -1.59  0.27 -0.12 
Omisin -0.47 0.07 0.72 -0.05 188
1 -0.28 0.01 1.07 -0.17 4095
2 -0.42 0.01 0.91 -0.24 
    -0.1 1104
$,")4 4
4 0.44 0.01 0.98 0.4 
Multimarca -1.49 0.12  -0.12 
Omisin -0.48 0.07  -0.05 
1 -0.15 0.01 1.14 -0.14 
2  0.02 1.14 -0.09 
 0.44 0.01 1.07  8812
$,")4 
4  0.02  -0.2 2559
Multimarca -1.58 0.14  -0.12 99
Omisin  0.05 0.89 -0.05 252

CAPTULO 5 PROCESAMIENTO DE DATOS 275


Tabla 5b.
LECTURA 6. Indicadores por opcin.
Bloque 2.

Opcin Opciones de Promedio de Error de Ajuste


tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1 -1.02 0.02  -0.24 982


2  0.01 0.94  14125
  0.07 0.97 -0.05 115
$,")4 2
4 -1.02   -0.22 811
Multimarca    -0.09 21
Omisin -0.98 0.12 0.71 -0.05 47
1  0.04 0.54  288
2   0.44 -0.08 
  0.05 0.52  
$,")4 4
4 0.05 0.01   15487
Multimarca    -0.09 12
Omisin -1.28 0.15  -0.05 
1 -1.05   -0.17 474
2  0.01  0.27 15271
 -1.51 0.11 0.47 -0.09 
$,")4 2
4  0.05 0.5  
Multimarca -2.18  0.45 -0.1 
Omisin     
1   0.74 -0.19 701
2 -1.29 0.07 0.54 -0.11 
  0.01 0.97 0.25 15127
$,")4 
4 -1.25 0.1  -0.08 77
Multimarca  0.77  -0.1 11
Omisin -1.2 0.1   49
1 -0.54    
2 0.19 0.01   11758
  0.02 0.95 -0.15 
$,")4 2
4 -0.49 0.02 1.09 -0.18 2057
Multimarca  0.07 1.07 -0.08 
Omisin  0.1 0.87 -0.04 

276 REPORTE TCNICO


Opcin Opciones de Promedio de Error de Ajuste
tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1 -0.9  0.71  581


2 -0.55 0.04 1.07 -0.09 449
 0.2 0.01 0.99  
$,")4 
4 -0.58 0.01 0.95  2894
Multimarca  0.17  -0.09 84
Omisin -0.54 0.12   54
1 -1.05    807
2 -0.82  0.82 -0.15 
 0.11 0.01 0.95  
$,")4 
4 -1.28 0.05 0.52 -0.14 201
Multimarca   0.21 -0.09 11
Omisin -1.02 0.15   55
1 -0.4  1.11 -0.1 
2 0.22 0.01 1.22 0.24 
   0.88 -0.08 227
$,")4 2
4 -0.24 0.01 1.29  5548
Multimarca  0.21 0.77 -0.07 58
Omisin  0.11 0.98  128
1 -0.47 0.01 0.87  5258
2 -0.21 0.01 1.2 -0.09 
  0.04 0.79 -0.1 488
$,")4 4
4 0.49 0.01 0.97 0.42 
Multimarca -1.49 0.22 0.49 -0.08 
Omisin  0.08 0.89 -0.05 150
1   1  
2 0.14 0.01 1.05 0.27 
 -0.4 0.02 1.2 -0.12 1528
$,")4 2
4 -0.58 0.02 1.01 -0.15 1094
Multimarca -2.18   -0.09 
Omisin -0.45 0.05 1.17  285
1  0.01 1.05 -0.27 
2 0.41 0.01   
 -0.74 0.07 0.81 -0.07 
$,")4 2
4 -0.99 0.02 0.52 -0.25 1050
Multimarca  0.05 0.95 -0.09 
Omisin -0.52 0.08 1.14 -0.05 

CAPTULO 5 PROCESAMIENTO DE DATOS 277


Opcin Opciones de Promedio de Error de Ajuste
tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1 0.18 0.01 1.07 0.28 11410


2  0.02 1.19 -0.11 
 -0.41 0.02 1.21 -0.12 
$,")4 1
4  0.02 0.98 -0.17 
Multimarca  0.25  -0.07 
Omisin -0.7 0.08  -0.07 
1  0.02 0.79  2050
2   0.74  784
  0.01   8704
$,")4 
4 -0.21 0.01  -0.12 4214
Multimarca  0.21 0.79 -0.07 58
Omisin -0.59  0.9 -0.08 291
1  0.01 0.91 -0.15 4598
2 -0.22 0.01 0.97 -0.14 
  0.02 0.58 -0.22 
$,")4 4
4  0.02 0.84 0.48 4297
Multimarca -1.47 0.21 0.45 -0.08 58
Omisin   0.71 -0.07 221
1  0.02  -0.15 
2  0.01   
 -0.45 0.02 0.88 -0.15 1778
$,")4 2
4 -0.15 0.01 1.24 -0.09 5151
Multimarca  0.24  -0.08 55
Omisin  0.05 0.7 -0.09 
1 0.27 0.01 1.24 0.24 
2 -0.48 0.02 0.94 -0.17 2091
  0.02 1.19 -0.09 
$,")4 1
4 -0.02 0.01 1.57 -0.01 
Multimarca    -0.09 241
Omisin  0.05 0.79 -0.11 

278 REPORTE TCNICO


Tabla 5c.
LECTURA 6. Indicadores por opcin.
"LOQUE

Opcin Opciones de Promedio de Error de Ajuste


tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1 0.17 0.01 1.01  


2  0.02 1.19 -0.12 
 -0.54 0.04 1.2 -0.1 
$,")4 1
4 -0.59 0.02 0.98 -0.22 
Multimarca -0.9 0.1 0.89 -0.08 
Omisin  0.08 1.05  175
1  0.01 0.98  15099
2 -0.71   -0.14 
 -0.82  0.78 -0.17 
$,")4 1
4  0.02  -0.21 
Multimarca -1.57 0.19  -0.09 59
Omisin -0.85 0.11 0.88  114
1  0.01 0.89 -0.27 
2 0.22 0.01 0.97  
  0.04 0.9 -0.11 519
$,")4 2
4  0.02  -0.17 
Multimarca  0.24  -0.08 41
Omisin -0.98 0.07  -0.09 180
1  0.02 0.74 -0.24 
2  0.01   14572
 -0.57 0.04 1.05 -0.1 
$,")4 2
4  0.02 0.88 -0.19 
Multimarca -1.88 0.28 0.49 -0.08 
Omisin -0.87 0.08 0.84 -0.07 
1  0.01 1.04  
2 -0.75  0.79  880
  0.02 1  
$,")4 1
4  0.02 1.22 -0.11 1848
Multimarca -2.14   -0.07 22
Omisin -0.59 0.04 1.04 -0.1 

CAPTULO 5 PROCESAMIENTO DE DATOS 279


Opcin Opciones de Promedio de Error de Ajuste
tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1 -0.22 0.01 0.99 -0.15 7244


2 0.72 0.02 0.95 0.41 4272
 -0.44 0.02 0.79 -0.18 2927
$,")4 2
4 -0.14 0.01 1.02 -0.05 
Multimarca -1.21 0.18 0.52 -0.07 71
Omisin -0.48  0.78  
1  0.02 1.24 -0.12 
2  0.02 0.94 -0.18 1890
  0.01 1.01  12145
$,")4 
4 -0.55 0.02 0.95  
Multimarca -0.54  0.94 -0.11 850
Omisin -0.72 0.05 0.84 -0.09 
1 -0.11 0.01  -0.07 
2 0.71 0.02 0.95 0.42 4577
 -0.51 0.01 0.74  
$,")4 2
4    -0.14 908
Multimarca   0.84  41
Omisin -0.78 0.08  -0.07 178
1 0.57 0.01 1 0.4 
2 -0.7 0.02 0.59  1994
 -0.09 0.02  -0.02 
$,")4 1
4 -0.24 0.01 1.01 -0.19 
Multimarca  0.14  -0.08 100
Omisin -0.81 0.08  -0.07 
1 -0.45 0.01  -0.25 
2  0.01 1.09  7740
   1.14 -0.07 
$,")4 2
4 -0.18 0.01 1.25 -0.08 4429
Multimarca -1.57 0.21 0.55 -0.09 59
Omisin -0.57 0.09 0.94 -0.05 181
1 -0.22 0.01 1.14 -0.11 4808
2 0.5 0.01 0.95 0.44 7441
 -0.49 0.01 0.81 -0.2 
$,")4 2
4  0.01  -0.22 
Multimarca  0.21 0.48 -0.09 
Omisin -0.5   -0.05 241

280 REPORTE TCNICO


Opcin Opciones de Promedio de Error de Ajuste
tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1  0.01 0.7  


2 0.7 0.02 0.88  5209
 -0.49   -0.1 
$,")4 2
4 -0.17 0.01 1.05 -0.12 7758
Multimarca -1.58   -0.07 
Omisin -0.52 0.04 0.8 -0.09 590
1 -0.44 0.01 0.89 -0.25 5059
2  0.01 0.97 0.45 8972
  0.01  -0.18 
$,")4 2
4    -0.15 1045
Multimarca -1.48 0.22 0.55 -0.08 54
Omisin -0.82 0.07 0.7 -0.08 185
1  0.02   2102
2 -0.75 0.02 0.82 -0.18 1120
    -0.14 
$,")4 4
4 0.19 0.01  0.4 14012
Multimarca  0.27 0.52 -0.08 42
Omisin -0.97 0.07  -0.08 149
1 -0.11 0.01   7201
2  0.02  -0.21 2180
  0.01 1.11  
$,")4 
4 -0.44 0.02 0.94 -0.14 1952
Multimarca -1.54 0.25 0.59 -0.08 54
Omisin  0.07 0.78 -0.07 195
1 -0.57 0.02 0.95 -0.19 2154
2 -0.57 0.02 0.95  
 0.27 0.01  0.41 11994
$,")4 
4  0.02 0.87 -0.22 
Multimarca -0.95 0.11  -0.07 107
Omisin  0.05 0.91 -0.08 

CAPTULO 5 PROCESAMIENTO DE DATOS 281


Tabla 5d.
LECTURA 6. Indicadores por opcin.
Bloque 4.

Opcin Opciones de Promedio de Error de Ajuste


tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1 0.12 0.01 0.99  


2 -0.78 0.02 0.74  
  0.02  -0.12 
$,")4 1
4 -0.52 0.02  -0.11 854
Multimarca  0.18  -0.08 
Omisin  0.07 0.8 -0.08 
1  0.01 0.92 -0.2 
2  0.01 0.94  
  0.01 1.09 -0.12 5147
$,")4 2
4 -0.59 0.01  -0.21 
Multimarca  0.2  -0.07 
Omisin   0.77 -0.07 241
1 -0.09 0.01 1.24 -0.05 
2  0.01 0.94  
 -0.41 0.02 0.85  1890
$,")4 4
4  0.01 1.12 0.27 
Multimarca   0.88  
Omisin  0.05  -0.07 225
1 -0.11 0.01   
2  0.01 0.98 -0.17 4570
  0.01  0.29 
$,")4 
4  0.02 1.04 -0.09 
Multimarca -0.77 0.15 1 -0.05 87
Omisin -0.55 0.05 0.78 -0.07 
1  0.01 0.98  5447
2 0.27 0.01 0.94  
 -0.8 0.02  -0.25 1702
$,")4 2
4   0.82 -0.1 474
Multimarca  0.22 0.41 -0.09 48
Omisin -0.8 0.05 0.75 -0.09 252

282 REPORTE TCNICO


Opcin Opciones de Promedio de Error de Ajuste
tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1 0.17 0.01 1.09 0.28 12897


2  0.01 1.05  2552
 -0.45 0.02 0.95 -0.15 
$,")4 1
4 -0.22 0.01  -0.09 
Multimarca -1.51   -0.08 54
Omisin  0.04 0.92 -0.08 
1  0.01 0.91  
2 0.47 0.01 0.89 0.48 9274
 -0.5 0.02 0.77 -0.15 1709
$,")4 2
4  0.01 0.9  
Multimarca -1.09 0.14  -0.08 95
Omisin -0.58  0.71 -0.09 
1 -0.78 0.01 0.72 -0.29 
2 0.14 0.01 0.97  
 -0.47  1.07 -0.08 594
$,")4 2
4  0.02 1.09 -0.11 
Multimarca -1.44 0.18  -0.09 
Omisin -0.71  0.88 -0.07 191
1 0.1 0.01 1.01 0.27 
2 -0.97   -0.15 
 -0.22 0.02 1.44 -0.07 
$,")4 1
4  0.02 0.82 -0.22 
Multimarca -1.57 0.24  -0.08 47
Omisin -0.71 0.1 0.84 -0.04 
1 0.27 0.01 1.08  10900
2 -0.02 0.01 1.52 0.01 
 -0.55 0.01 0.74 -0.27 
$,")4 1
4 -0.4 0.01 0.92  2895
Multimarca -1.82 0.25  -0.09 
Omisin -0.59 0.05 0.77  242
1 -0.58 0.01   
2  0.01 0.94 0.44 
 -0.21 0.01 1.05  
$,")4 2
4 -0.42 0.01  -0.15 2297
Multimarca  0.27 0.48 -0.08 
Omisin  0.05 0.74 -0.08 

CAPTULO 5 PROCESAMIENTO DE DATOS 283


Opcin Opciones de Promedio de Error de Ajuste
tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1 -0.58 0.01   


2 -0.79 0.02 0.57 -0.17 897
  0.01 1.05  7800
$,")4 
4 0.01 0.01   7944
Multimarca -1  0.9 -0.05 50
Omisin -0.74 0.05  -0.09 279
1  0.01 0.87 -0.24 4544
2  0.01   9792
  0.01   
$,")4 2
4  0.01 1.01 -0.12 
Multimarca -1.21 0.19  -0.07 
Omisin -0.59  0.78  
1 -0.24 0.01 1.08  5219
2  0.01 1.07  7509
 -0.19 0.01 1.08 -0.08 
$,")4 2
4  0.01  -0.15 4455
Multimarca -1.58 0.27  -0.07 42
Omisin -0.45 0.05 0.85 -0.05 297
1 -0.51 0.01 0.82 -0.19 
2  0.02  -0.21 
 0.2 0.01 1.14  9817
$,")4 
4 0.02 0.01  0.04 
Multimarca  0.18 0.57 -0.08 70
Omisin -0.57  0.84  192
1  0.01 0.92 -0.2 4402
2 -0.5 0.01 0.87 -0.21 
  0.01   10948
$,")4 
4  0.01 0.95 -0.15 2842
Multimarca  0.18 0.48 -0.09 
Omisin   0.77  

284 REPORTE TCNICO


Tabla 5e.
LECTURA 6. Indicadores por opcin.
Bloque 5.

Opcin Opciones de Promedio de Error de Ajuste


tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1   0.51 -0.18 477


2 0.09 0.01 0.95  
 -1   -0.12 
$,")4 2
4  0.02   
Multimarca -1.85  0.45 -0.09 42
Omisin -0.9 0.04  -0.1 
1 -0.52 0.01  -0.24 
2 -0.21 0.01 0.94 -0.15 
 0.19 0.01 1.57 0.12 
$,")4 4
4 0.42 0.01 1.08 0.27 
Multimarca -1.52 0.27 0.49 -0.07 
Omisin  0.02 0.78 -0.09 1448
1 -0.22 0.01  -0.18 7559
2 -0.44 0.02 0.9 -0.15 2022
 -0.2 0.01 1.17 -0.09 
$,")4 4
4  0.01 1.05  10458
Multimarca -0.7 0.12 0.97  125
Omisin -0.71 0.09  -0.04 
1 -0.17 0.01 1.12 -0.14 8070
2 -0.47 0.02 0.81 -0.17 2147
  0.01 1.08  10211
$,")4 
4 -0.24 0.02 1.08 -0.1 
Multimarca -1.12 0.24 1.14  
Omisin  0.05 0.91 -0.04 247
1  0.01 0.79  2525
2 0.18 0.01 0.95  19111
  0.02   
$,")4 2
4  0.02 0.84 -0.14 1001
Multimarca -1.71  0.48 -0.08 
Omisin   0.84  

CAPTULO 5 PROCESAMIENTO DE DATOS 285


Opcin Opciones de Promedio de Error de Ajuste
tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1  0.02 0.82 -0.21 


2 0.2 0.01 0.95  18222
 -0.57 0.02 0.89 -0.19 1800
$,")4 2
4 -0.74 0.02 0.7  878
Multimarca -1.91 0.29 0.41 -0.08 29
Omisin   0.82  
1  0.02  -0.22 1717
2 0.29 0.01 1  
  0.01 0.94 -0.17 
$,")4 2
4  0.01 0.99 -0.17 
Multimarca -1.11   -0.07 
Omisin   0.8  189
1  0.01  0.44 
2 -0.52 0.01   
 -0.47 0.01 0.9 -0.18 
$,")4 1
4    -0.12 582
Multimarca -0.84   -0.07 
Omisin -0.95 0.09 0.55  77
1  0.01 1.12 -0.12 
2 -0.51 0.02 0.87 -0.17 
 -0.5 0.01 0.82 -0.25 
$,")4 4
4  0.01 0.97  14099
Multimarca -1.42 0.19 0.55 -0.08 
Omisin  0.05 0.77 -0.08 
1 0.4 0.01 1.05  
2  0.01 1.21 -0.04 4975
  0.01  -0.24 2478
$,")4 1
4 -0.25 0.01 0.94 -0.17 
Multimarca -1.29  0.5 -0.08 
Omisin   0.71 -0.07 207
1  0.01 0.8 -0.24 2528
2 -0.57 0.01 0.79 -0.2 
 -0.21 0.01 1.22 -0.09 2728
$,")4 4
4 0.25 0.01 0.98  15555
Multimarca -1.51 0.21 0.52 -0.08 49
Omisin -0.42  1 -0.07 520

286 REPORTE TCNICO


Opcin Opciones de Promedio de Error de Ajuste
tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1 0.27 0.01 1.05  


2 -0.21 0.02 1.2 -0.07 1590
 -0.59 0.02 0.74 -0.2 1894
$,")4 1
4 -0.28 0.01 1.04 -0.18 5848
Multimarca  0.2  -0.07 55
Omisin -0.5 0.04  -0.08 442
1 -0.19 0.02  -0.08 2874
2 -0.12 0.01 1.12  
  0.02 1.1 -0.07 
$,")4 4
4  0.01 1.19 0.25 8182
Multimarca  0.22  -0.07 
Omisin -0.4 0.04 0.85  
1 -0.4 0.01 1.17 -0.21 4109
2 -0.7 0.02 0.78 -0.18 1149
 0.2 0.01 0.98  
$,")4 
4  0.02  -0.08 
Multimarca -1.51  0.81 -0.07 
Omisin  0.09 0.82 -0.05 89
1 0.29 0.01   
2 -0.21 0.01 1.17 -0.14 
  0.01  -0.22 
$,")4 1
4 -0.42 0.01  -0.15 2059
Multimarca   0.71 -0.08 
Omisin   0.78 -0.07 190
1 -0.45 0.01  -0.19 2915
2 -0.1 0.01 1.14 -0.07 
 -0.1 0.01 1.1 -0.07 
$,")4 4
4  0.01  0.29 
Multimarca -1.58 0.21 0.45 -0.08 52
Omisin -0.44 0.04 0.78 -0.07 452

CAPTULO 5 PROCESAMIENTO DE DATOS 287


Tabla 5f.
LECTURA 6. Indicadores por opcin.
"LOQUE

Opcin Opciones de Promedio de Error de Ajuste


tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1 -0.49 0.01 0.78  


2 0.04 0.01 1.44 -0.01 
 0.45 0.01 0.98 0.4 11711
$,")4 
4 -0.15 0.02 1.11 -0.05 1049
Multimarca -1.82  0.5 -0.07 
Omisin -0.41 0.04 0.92  
1 0.28 0.01   
2 -0.29 0.02 1.2  2411
 -0.58    
$,")4 1
4  0.01 0.98 -0.21 4112
Multimarca -1.91 0.27 0.44 -0.08 
Omisin -0.5  1.01  
1 0.45 0.01 1.01  11778
2 -0.49 0.01 0.8 -0.22 2897
  0.02 0.95  2152
$,")4 1
4 -0.18 0.01 1.09 -0.15 
Multimarca -1.72 0.22 0.42 -0.09 51
Omisin -0.48  0.82 -0.09 
1 -0.45 0.01 0.74 -0.27 4724
2 -0.24 0.01  -0.19 
  0.02 1.29 -0.04 2757
$,")4 4
4  0.01  0.45 
Multimarca  0.09  -0.09 188
Omisin  0.04 1.02 -0.04 515
1  0.01 0.92  5092
2  0.01 0.98 0.41 11974
 -0.5 0.01 0.77 -0.25 
$,")4 2
4  0.01 1.29 -0.04 2908
Multimarca   0.81 -0.07 52
Omisin -0.55 0.04  -0.08 

288 REPORTE TCNICO


Opcin Opciones de Promedio de Error de Ajuste
tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1  0.01  -0.25 


2  0.05 0.7 -0.09 
 0.52 0.01 0.99 0.42 
$,")4 
4 -0.18 0.01 1.04 -0.17 7028
Multimarca -0.99   -0.08 114
Omisin -0.58  0.72 -0.07 214
1 -0.41 0.01 0.88  4919
2 0.24 0.02  0.07 
  0.02 0.98 -0.14 2140
$,")4 4
4  0.01 1.09 0.25 12525
Multimarca -1.21  0.94  48
Omisin  0.05 1.09  
1  0.01 1.08  
2 -0.15 0.02  -0.09 
 -0.2   -0.05 
$,")4 1
4 -0.29 0.01   
Multimarca  0.2  -0.08 
Omisin  0.1   118
1 -0.24 0.02 1.09 -0.1 2270
2 0.4 0.01 1.05  12742
 -0.41 0.01 0.85  4171
$,")4 2
4 -0.22 0.01 1.11 -0.14 4285
Multimarca -1.09 0.1 0.58 -0.1 155
Omisin -0.45 0.08 0.95 -0.04 127
1 -0.7 0.02  -0.19 1250
2  0.01 0.77  2788
 0.29 0.01 0.99  
$,")4 
4 -0.21 0.01 1.24 -0.1 2707
Multimarca -1.24 0.19 0.79 -0.07 
Omisin -0.59 0.09  -0.04 88
1 0.28 0.01 1.02  
2 -0.29 0.02 1.14 -0.14 2748
  0.01 0.97 -0.19 
$,")4 1
4 -0.48 0.02 0.91 -0.15 
Multimarca -1.11  0.85 -0.08 88
Omisin -0.48 0.05   254

CAPTULO 5 PROCESAMIENTO DE DATOS 289


Opcin Opciones de Promedio de Error de Ajuste
tem Correlacin N de Respuesta
correcta respuesta habilidad Medicin (Outt)

1 -0.48 0.01 0.8  


2 0.48 0.01 0.87 0.51 
 -0.52 0.01 0.74  5482
$,")4 2
4 -0.55  0.82 -0.11 
Multimarca   0.54 -0.08 48
Omisin   0.75 -0.07 218
1  0.01 1.4 -0.11 
2  0.02 0.81 -0.2 1527
 -0.2 0.02  -0.08 
$,")4 4
4 0.24 0.01 1.05  
Multimarca -1.54  0.98 -0.07 
Omisin  0.07 0.77 -0.05 122
1  0.01 0.84 -0.27 5805
2  0.01  -0.21 
   0.88 -0.1 791
$,")4 4
4 0.5 0.01 0.94  12004
Multimarca  0.15 0.49 -0.1 92
Omisin -0.5 0.08 0.85 -0.04 128
1 -0.2 0.01 0.99 -0.24 10251
2  0.01  -0.21 
 -0.48 0.02 0.77  1159
$,")4 4
4 0.58 0.01 0.95 0.45 9818
Multimarca    -0.07 29
Omisin  0.07 0.7 -0.07 189
1 -0.21 0.01   14109
2 0.87 0.01   5011
 0.11 0.02 1.28 0.01 
$,")4 2
4 0.11 0.02 1.28 0.01 1794
Multimarca -1    
Omisin -0.18 0.04 0.91 -0.04 488

290 REPORTE TCNICO


MAPA DE DISTRIBUCIN DE HABILIDADES Y DIFICULTADES

4ABLA
,%#452!-APADEDISTRIBUCINDEHABILIDADESYDIlCULTADES

%STUDIANTES-!0/&)TEMS
<more>|<rare>
4 . +
. |
. |
. |
. |
|

. |
. |
. |
. |
. |
 $,")4
. T|T
\$,")4
.### |
\$,")4$,")4
\$,")4$,")4$,")4
3 $,")4
\3$,")4$,")4
\$,")4$,")4$,")4$,")4$,")4
$,")4$,")4
\$,")4$,")4$,")4$,")4$,")4
$,")4$,")4$,")4
\$,")4$,")4$,")4$,")4$,")4
$,")4$,")4$,")4$,")4$,")4
$,")4$,")4
\$,")4$,")4$,")4$,")4
- $,")4$,")4$,")4$,")4$,")4
$,")4$,")4$,")4
\$,")4$,")4$,")4$,")4$,")4
$,")4
\-$,")4$,")4$,")4$,")4
\$,")4$,")4$,")4
\$,")4$,")4
\$,")4$,")4$,")4$,")4$,")4

CAPTULO 5 PROCESAMIENTO DE DATOS 291


$,")4$,")4
3 $,")4$,")4
\$,")4$,")4$,")4$,")4$,")4
\$,")4$,")4
\3$,")4$,")4$,")4$,")4$,")4
\$,")4$,")4
4\$,")4
 $,")4
. |
\$,")4
\4$,")4
\$,")4
\$,")4

\$,")4
\$,")4
|
\$,")4
. |
-4 +
. |
|
|
|
|
-5 . +
<less>|<frequ>

#ADASMBOLOggEQUIVALEAESTUDIANTES%LPUNTO INDICAQUEHAYENTREYESTU-
diantes.

292 REPORTE TCNICO


02/-%$)/ $%36)!#).%34.$!296!,/2%3-8)-/9-.)-/$%$)&)#5,4!$%3$%4%-3

'RlCO
,%#452!0ROMEDIO DESVIACINESTNDARYVALORESMXIMOYMNIMODEDIlCULTADESDE
tems, por bloque.

1.40

1.20

B1
B2
1.00
B3
B4
B5
B6
0.80

0.60

0.40
-4.00 -3.00 -2.00 -1.00 0.00 1.00 2.00 3.00 4.00

P r o me d io d e d ific u lta d ite ms

CAPTULO 5 PROCESAMIENTO DE DATOS 293


FUNCIN DE INFORMACIN DE LA PRUEBA

'RlCO
,%#452!&UNCINDEINFORMACIN

Funcin de informacin de la prueba


Informacin

Medida

294 REPORTE TCNICO


VALOR DE DIFICULTAD DE TEMS POR PAS

Tabla 7a.
,%#452!6ALORDEDIlCULTADDECADATEMPORPAS
Bloque 1.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4    -2.778 -2.419  -1.957 -2.821   -2.827  -1.772 -2.492 -1.942 
$,")4 0.401   0.472 0.017  0.880 0.420   0.552 0.580  0.874  0.204
$,")4 0.279        1.275 0.070 0.945   0.874 1.515 
$,")4  1.521 0.024 0.959 0.508  1.288 0.789 1.255 0.248  0.989 1.271  1.447 
$,")4  -0.050 -0.180 0.218 -0.475  0.957  0.727   0.787  0.472 1.711 
$,")4   -0.180 -0.171  -1.459 0.179 0.499 0.510 -0.207 0.099   -0.012  
CAPTULO 5

$,")4 0.840  1.119 0.854 1.105 0.119 1.717 1.407  1.077   1.172 1.282  0.904
$,")4 0.054 0.290   0.084   0.252        0.144
$,")4     -0.194  0.515   -0.004      -0.057
$,")4   0.101 0.412 -0.019  0.709  0.988  0.810 0.772 1.070  1.201 
$,")4 -1.910        -1.489  -1.872 -2.044 -1.499 -1.774 -0.912 -2.142
$,")4 -1.089  -1.209   -1.754 0.018  0.004 -1.125      -1.219
$,")4   0.175  0.175   0.718  0.452 0.714 1.020 0.942  1.201 
$,")4 1.810 1.521 1.929 1.791 1.541 0.847 2.551 2.071   2.044   2.019  1.895
$,")4 -0.201   -0.275   0.528 0.015   0.219   0.220  
$,")4 0.290  0.124 0.104     0.599 0.292   0.478  0.894 
PROCESAMIENTO DE DATOS
295
296
REPORTE TCNICO

Tabla 7b.
,%#452!6ALORDEDIlCULTADDECADATEMPORPAS
Bloque 2.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4         -1.452  -1.747 -2.250    -2.901
$,")4     -5.099  -2.858  -2.555 -4.475      -4.924
$,")4     -4.072 -4.252   -2.950  -2.924    -2.199 
$,")4  -2.020    -5.110   -2.478    -2.747   
$,")4   -1.550 -1.407  -2.115 -0.554 -1.097   -0.979   -1.248  
$,")4  -1.972 -1.571 -1.444 -1.785  -0.708 -1.084 -0.875 -2.201  -1.122 -1.215  -0.555 -1.547
$,")4  -2.955 -2.749 -2.952 -2.905     -2.779   -2.141   -2.527
$,")4   -0.441    -0.208 -0.225 -0.082    -0.048 -0.258 -0.252 -0.858
$,")4 -0.177  -0.011    0.842  0.890  0.577  0.417 0.714 0.970 -0.090
$,")4  -2.070 -1.708    -1.180  -1.142 -1.290     -0.720 
$,")4 -0.411    -1.214 -2.222  0.251 0.728   0.108  -0.105 0.955 
$,")4 -0.905  -1.200 -1.050 -1.178  -0.570 -1.205  -1.072 -0.950 -0.898 -0.824   -1.289
$,")4 -0.172      0.220 -0.188  -0.415 -0.121  0.019 -0.120 0.510 
$,")4 0.441 0.977  0.919  -0.207 1.872  2.140 0.749  1.770  1.509 2.419 0.284
$,")4 0.171      0.747      0.759   
$,")4 0.201   0.255 0.187  0.522 0.092  0.400 0.015 0.257   0.255 0.082
Tabla 7c.
,%#452!6ALORDEDIlCULTADDECADATEMPORPAS
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4  -1.542  -1.182    -1.151  -1.052  -1.027  -1.020 -0.241 
$,")4  -2.101 -2.202  -2.484 -2.550     -1.574     
$,")4  -2.084  -1.424    -0.844    -0.807 -0.850 -1.025  -1.094
$,")4  -2.775 -1.842    -0.997    -1.101  -0.919 -1.885 -0.858 
$,")4 -1.519   -1.191  -1.758 -0.489 -0.918  -1.200    -0.850 -0.870 -1.781
$,")4 0.972 0.804 1.087    2.227      1.989   
CAPTULO 5

$,")4  -0.799  -1.102    -0.918  -1.125 -0.559   -1.009  -1.080
$,")4 0.887 -0.114  1.454 1.041  1.851  1.727  1.907     
$,")4 1.151   0.822 0.127 0.140   1.249    0.958   
$,")4  0.000 0.471 0.105 -0.121    0.547     0.191 1.101 -0.001
$,")4 0.540  0.120 0.018    0.725  0.044 0.725   0.758 1.050 
$,")4  0.209 0.219   -0.229 1.708  1.758 0.877   1.559 1.274 2.204 
$,")4 0.004    -1.128    0.128 -0.180 0.557 0.020    -0.048
$,")4    -1.580   -0.929  -1.072  -1.224 -0.955    
$,")4 0.492  0.279 0.118    0.859  0.894 1.157 0.744  0.727  
$,")4 -1.408 -0.910   -2.009 -1.427    -0.949 -0.189   -0.575  
PROCESAMIENTO DE DATOS
297
298
REPORTE TCNICO

Tabla 7d.
,%#452!6ALORDEDIlCULTADDECADATEMPORPAS
Bloque 4.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 -1.480 -0.752 -2.040   -2.521 -1.008  -1.108 -2.028    -1.887  -1.589
$,")4 0.144  -0.057  -0.225 -0.578 1.081  0.985     0.518  
$,")4 0.578 1.748  0.599  0.792  0.549 0.787 0.570  0.844 0.959 0.592  
$,")4 0.272   0.519   0.875 0.887   0.754 1.042 1.027 0.702 1.108 
$,")4  -0.792 -0.941 -1.021   0.008  -0.201 -1.021 -0.292 -0.114 -0.894   -1.108
$,")4 -0.725  -0.771  -0.770 -1.017  -0.280   0.000 -0.510 0.112  -0.191 
$,")4   -0.229 0.179   1.004   -0.415  0.554 0.495  1.202 
$,")4   -1.854 -1.711 -2.227 -2.449   -1.278      -0.527 
$,")4 -1.250 -1.101       -1.582  -1.204  -0.792   
$,")4 0.024   -0.254  -0.488   0.147  0.419 0.084   0.211 -0.218
$,")4 0.210   0.252 -0.185  0.982  1.011 0.557   1.000   0.084
$,")4 0.527    0.027 0.928 0.911 0.711        
$,")4 0.112  -0.199  -0.109 -0.204 0.540 0.254  -0.125   0.559  0.750 
$,")4  0.544  0.522  -0.288 1.184 1.121    0.994 1.288 1.012  -0.110
$,")4       0.417       0.011  0.090
$,")4 -0.290 -0.780  0.022  -0.988 0.447 0.214     0.020 -0.050 0.497 
Tabla 7e.
,%#452!6ALORDEDIlCULTADDECADATEMPORPAS
Bloque 5.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4       -2.287    -2.895   -2.490  
$,")4    1.009 0.918 1.002    1.482  1.090 1.514 1.200 1.889 
$,")4   0.212  0.048   0.297  0.402   0.424 0.084  
$,")4 0.477  0.205 0.419  -0.585  0.415 0.594    0.420  0.751 
$,")4 -1.949 -1.902  -1.920 -1.887   -1.828  -1.722 -1.507 -1.491  -1.411 -0.722 -1.922
$,")4  -1.980  -1.405 -2.179    -1.227 -2.009 -1.241   -1.205  
CAPTULO 5

$,")4 -0.444 -0.709     -0.198 -0.241 -0.172 -0.792 -0.297  -0.170  0.107 -0.584
$,")4 -0.957 -0.522 -0.985  -1.044  -0.084  -0.550  -0.781     -1.125
$,")4    -0.401 -1.058  -0.144 -0.144   -0.489 -0.412 -0.154   -0.728
$,")4 0.202  0.292 0.402 -0.154 -0.285 0.879         
$,")4  -1.081   -1.729 -1.080 -0.278 -0.549 -0.442  -0.890  -0.925 -0.441  
$,")4   -0.422 -0.527  -0.778 0.182 -0.279 -0.154   -0.204  -0.157  
$,")4 0.942       0.742  1.024  0.700 0.910  0.499 0.740
$,")4 -0.789  -1.050     -0.917 -0.950   -1.000 -0.527 -0.977  -1.119
$,")4     -0.994 -0.982   -0.172    -0.101 -0.074  -0.510
$,")4 0.777  0.872 0.741 0.298 -0.117 1.088 0.894   0.947    0.972 
PROCESAMIENTO DE DATOS
299
300
REPORTE TCNICO

Tabla 7f.
,%#452!6ALORDEDIlCULTADDECADATEMPORPAS
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4   -0.571  -0.215  0.250 0.154  -0.028  0.520  -0.584 1.421 0.959
$,")4  -0.409  -1.052  -0.947 -0.587 -1.278 -1.222    -0.717 -1.025 -0.148 
$,")4 -0.188 0.119  0.058  -0.527 0.400   0.004      -0.155
$,")4 0.581 -0.209 0.059 0.211 0.222 -0.559  0.909    0.881  0.997  0.518
$,")4 -0.008 -0.292  -0.174 -1.041      0.427    0.725 0.048
$,")4 0.501 -0.024     1.117  0.755 0.211 0.407 0.775  1.014 1.081 
$,")4 -0.284 0.417  0.080  -0.014  -0.419 0.484  -0.201 0.257 0.199 -0.087  -0.299
$,")4   -0.254 -0.182    -0.282  -0.011 -0.208  -0.052 -0.151  
$,")4 -0.422 -0.490      0.215 0.299 0.197  0.204 -0.215 -0.209  -0.519
$,")4 -1.279 -2.000       -0.514 -1.849      -1.740
$,")4  -1.074 -1.087    -0.482 -0.919  -0.904 -0.554   -0.794 -0.554 -1.154
$,")4  -0.182      -0.081 0.402 -1.148   0.077 0.028  
$,")4   -0.870   -1.172     -0.728    -0.571 -1.071
$,")4 0.015  -0.152 -0.171 -1.059           
$,")4    0.745     1.459  0.700 0.892 0.479   -0.407
$,")4  1.554 1.218 1.758  1.208   2.844 0.715   1.457 1.710 2.897 
VALOR DE AJUSTE DE TEMS POR PAS
Tabla 8a.
,%#452!6ALORDEAJUSTEDECADATEMPORPAS
Bloque 1.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.74 0.88 0.75 0.84  0.54 0.89 0.80 0.97   0.87 0.82 0.84 0.97 0.77
$,")4 1.17  1.07 1.08 1.04   1.09 1.10 1.10 1.07 1.10 1.14 1.17 1.07 1.12
$,")4 0.97 0.95 0.98 0.99   1.00 1.05 1.08  1.02 1.05 0.95 0.99 1.00 
$,")4 1.04 1.05 0.97 1.00 0.98 0.90 0.97  0.99  0.99 0.97 0.88 1.01 1.02 1.01
$,")4 0.87 0.88 0.87 0.87 0.91   0.82 0.87  0.87 0.92 0.84 0.88 0.88 
$,")4 0.88 0.87 1.00 0.95 0.91 0.94 0.99  1.04 0.89 0.97 1.12 0.97 0.94 0.94 0.90
CAPTULO 5

$,")4 0.98 0.99  1.05  1.12 1.01 0.98 1.05 1.09  0.98 1.01 1.02 0.98 
$,")4 0.98 1.12  1.09 0.94 0.87 1.20 1.12 1.14 1.02 1.12 1.04  1.10 1.08 1.10
$,")4 0.97 1.10 0.97 0.97  1.09 0.97 0.98 0.98 0.95 0.98 1.07 1.01 0.97 1.00 0.99
$,")4 1.11 1.10 1.12 1.12 1.11 1.54  1.07  1.25  1.07 1.09  1.09 1.17
$,")4 0.70 0.80  0.74  0.54 0.85 0.78 0.81   0.81 0.79 0.70 0.89 
$,")4 0.90 0.84 0.91 0.89 0.87 0.74 0.94 0.88 0.91 0.82 0.95  0.95 0.97 0.95 0.87
$,")4  0.85  1.05 1.01 0.97  1.04 1.00 1.05 1.00 1.04 1.08  0.95 1.00
$,")4 1.08 0.89 0.97 0.92 1.00 0.87 0.85 0.95 0.95 1.10 0.99  1.00 0.91 0.92 1.10
$,")4 0.98 1.01 1.02 1.00 1.01 1.01  0.98 0.99 0.98 1.01 0.95  0.95 0.97 0.98
$,")4 1.08 1.09 1.04  1.00  1.10 1.02 1.01 1.09  1.11 1.00 1.02 1.12 1.14
PROCESAMIENTO DE DATOS
301
302
REPORTE TCNICO

Tabla 8b.
,%#452!6ALORDEAJUSTEDECADATEMPORPAS
Bloque 2.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4     0.71   0.72  0.70 0.87 0.81  0.71 0.80 
$,")4  0.48 0.45 0.49 0.45        0.54  0.74 0.49
$,")4 0.58  0.58   0.45    0.49     0.77 0.55
$,")4  0.72    0.49 0.92 0.72 0.71  0.82  0.72 0.70 0.78 0.57
$,")4 1.05 1.12  1.02 1.08 1.01  1.01  1.02 1.02 1.08 1.15 0.98 1.10 1.01
$,")4 1.02 0.88 0.95 0.98 0.88 0.94 0.95 0.94 0.89  0.95 1.00 0.97  1.10 
$,")4      0.59 0.78 0.85 0.72   0.78 0.78 0.75 0.90 
$,")4 1.18 1.22 1.17 1.14 1.12  1.20 1.24 1.20 1.10 1.17 1.21 1.25 1.21  1.09
$,")4 0.94 0.98  1.04 1.02 1.04  0.99 0.92 0.95 0.98 0.97 1.01 1.00 0.94 1.02
$,")4 1.07 0.98 1.10 1.02 1.00 1.01 1.10 1.04  1.09 1.07 1.11  1.14 1.00 1.08
$,")4 1.01 1.04 1.08 0.94 1.12 1.17 0.94 1.01 0.90  0.98 0.90 0.95 0.88  1.05
$,")4 1.11 0.92 1.08  1.18 0.98 1.07 1.01  1.04 1.08 1.01 1.14 1.12 1.09 0.98
$,")4 1.04 1.05 1.21 1.05 1.12  0.98 1.02 1.00 1.07   1.04 1.08 0.95 1.09
$,")4  0.81 0.89 0.85  0.95 0.90 0.97 0.94  0.99 0.99 0.95 0.94 0.88 0.81
$,")4 1.10 1.20 1.12 1.08 1.09 1.11 1.08 1.07 1.10  1.05 1.04 1.07 1.10  
$,")4 1.28  1.18 1.24  1.15 1.15 1.18 1.21 1.22 1.11 1.10 1.10 1.24 1.10 1.29
Tabla 8c.
,%#452!6ALORDEAJUSTEDECADATEMPORPAS
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 1.08 1.10  1.08 0.97 0.94 0.98 1.02 1.01  1.01 0.99 1.05 1.01 0.98 1.17
$,")4 0.82 0.72 0.81 0.79 0.78  0.90 0.98 0.89 0.84 0.94 0.88 0.89 0.80 1.00 0.81
$,")4  0.88 0.87  1.00 0.84 0.94 0.90 1.00  0.97   0.95 1.04 0.92
$,")4 0.85 0.71 0.89  0.81  0.99 0.94 0.92    0.81 0.92  0.91
$,")4 0.99 1.01 1.07 1.02 1.08   1.05 1.10  1.07 1.04 1.04 1.21 0.98 1.08
$,")4  0.90 0.99 0.99 0.99  1.18 1.09   0.99 1.10  1.00 0.94 0.92
CAPTULO 5

$,")4 0.97 0.97 0.95 1.02 1.01 0.89 1.04  1.00 1.07 0.99 1.09 1.04 1.00  0.97
$,")4 0.89 0.87 0.91 0.94 0.92 0.75 1.09 1.08  0.90 1.07 1.12 1.10 1.09 0.84 0.91
$,")4 1.05 0.94 1.00 0.97 1.00 0.90 0.98 1.01 1.01  1.01 0.97 1.02  1.04 1.05
$,")4 1.09 1.09 1.09 1.11 1.05 0.89 1.05 1.07  1.15  1.12  1.12 1.11 1.04
$,")4 1.02 0.94 0.94 0.90 0.95 0.89 0.95 0.95  0.97  1.01 0.95 0.98  1.04
$,")4 1.07 0.99 0.92 0.88 0.89  0.91 0.89 0.82 0.94 0.87 0.87 0.92 0.88  0.99
$,")4  0.87 0.88 0.98 0.85  1.02 0.91 0.94  0.99 0.88 0.97 0.94 1.00 0.92
$,")4 0.94 0.99  0.85 0.87 0.75  0.85   0.88 0.89 0.74 0.79 0.88 0.89
$,")4  0.89 1.27   1.15 1.09 1.11 1.12 1.29 1.11 1.07 1.12 1.15 1.08 1.15
$,")4 0.89 0.99 1.01   0.99 0.87 0.92 0.95 0.91 0.98 0.88 0.88 0.95  0.92
PROCESAMIENTO DE DATOS
303
304
REPORTE TCNICO

Tabla 8d.
,%#452!6ALORDEAJUSTEDECADATEMPORPAS
Bloque 4.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.90 1.01 0.91 0.92  0.84 0.97  0.97 0.95 0.99 1.02  0.95  0.92
$,")4 0.94 0.97 0.99 0.97 0.91 0.89  0.92 1.01 0.95   0.99 0.92 0.95 0.99
$,")4 1.11  1.12 1.17 1.07  1.00 1.10 1.02 1.19 1.05  1.02 1.00 0.95 
$,")4 1.11 1.24 1.22 1.09 1.09 0.90 1.05 1.15 1.07 1.15   1.10 1.08 1.01 1.10
$,")4   0.91 0.92 0.94 1.11 0.90 0.95 0.95 0.88   0.85 0.87 0.92 
$,")4  1.05 1.05  1.14 1.18   1.08 1.00 1.14 1.05  1.05  1.11
$,")4 0.92 0.85  0.82 0.91 0.97 0.94 0.90 0.95 0.84  0.90   0.99 0.87
$,")4  0.82 0.90  0.92 0.74 1.01 0.94  0.87 0.90  0.87 0.95 0.98 0.87
$,")4 1.11 0.94 1.18 1.18     1.10 1.19 1.04  1.01  0.95 0.98
$,")4  1.05 1.04 1.08 1.10  1.09  1.09 1.02   1.09 0.97  1.00
$,")4  1.01 0.91 0.91 0.95 0.90 0.90  1.00 0.95 0.99 0.97 0.84 0.97 1.00 0.99
$,")4 1.00 1.09 0.98 0.98 0.91   1.04 1.02 1.00 1.01 0.97 0.99 0.94 1.04 1.09
$,")4 1.02  0.99 1.01 1.04 1.08 1.00 1.01 1.00 1.04 1.02 1.04  1.05 1.05 0.99
$,")4  1.20 1.09 1.08 1.11 0.87    0.98 1.05 1.08 1.02 1.24 1.10 1.02
$,")4 1.14 1.10  1.18 1.25  1.07  1.07  1.08  1.12 1.07 1.01 1.15
$,")4  0.91 0.91 0.94 0.95 1.02 0.94 0.92 0.98 0.91 0.94 0.89 0.94 0.94  0.95
Tabla 8e.
,%#452!6ALORDEAJUSTEDECADATEMPORPAS
Bloque 5.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.59    0.45 0.49 0.72  0.75  0.71  0.70   
$,")4 1.09  1.11 1.07 1.14   1.04 0.97 1.14  1.01  1.04 0.87 1.15
$,")4  1.04 1.05 1.07 1.07 0.97 1.00   1.02 1.00 1.00 1.04 0.98 0.99 1.07
$,")4  1.09 1.02 1.08 0.97 1.02 1.10 1.08  1.12 1.01 1.12 1.05 1.00 1.02 1.11
$,")4 0.79 0.77 0.80 0.78 0.78 0.75 0.84 0.82 0.80 0.84 0.87 0.81 0.85 0.84 0.92 0.84
$,")4 0.85 0.98 0.87 0.92 0.79 0.77 0.89 0.84 0.91   0.84 0.89 0.87 0.90 0.91
CAPTULO 5

$,")4 0.98  0.92 0.94 0.92 0.84 0.97 0.99 1.02 0.87 0.95 0.97 0.98  1.02 0.90
$,")4 0.92 0.89 0.87 0.90 0.94 0.74  0.88 0.88 0.87 0.90 0.88   0.90 
$,")4   0.95  1.00 0.98 0.95  1.01 1.01 0.94 0.99 0.94 1.00  
$,")4 1.01  1.08 1.00  0.89 1.09 1.09 1.00   1.01 1.07 1.09  0.98
$,")4 0.90 0.92  1.01 0.89 0.91 0.97 0.99  0.97 0.98 0.97 0.92 0.98 0.97 0.85
$,")4 1.00 0.92 0.95 1.04 0.92   1.04 1.09 0.98 1.10 0.98 1.07 1.10 1.11 0.94
$,")4  1.07 1.07  1.04 1.24 1.02  1.11  1.08 1.22    1.20
$,")4 1.19 1.09 1.24 1.18  1.21 0.98  1.01 1.20 0.98 1.05 0.95 0.98 0.91 
$,")4 1.00 1.20 1.00 0.92 1.02 0.90 1.05 1.02 1.01 1.00 1.05     
$,")4 1.14 0.92 1.15  1.01 0.98  1.22 1.10 1.09 1.15  1.21  1.08 
PROCESAMIENTO DE DATOS
305
306
REPORTE TCNICO

Tabla 8f.
,%#452!6ALORDEAJUSTEDECADATEMPORPAS
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 1.05 0.97 1.05 1.01 1.04   0.97 0.99   0.97 0.97 1.01 0.92 0.98
$,")4 0.97 1.10 1.01 1.02 0.95 0.89 0.98 0.91 1.04 0.90 0.97  0.95 0.98 1.00 1.07
$,")4 1.04 0.99 0.94 1.01 1.00 0.92 1.05 1.05 1.05 0.99 1.00 0.97 0.92 1.08  0.91
$,")4    1.01 1.04 0.88 1.00  0.97 0.92 0.97 0.94 0.87  0.88 1.07
$,")4 1.05 1.07   1.04 0.99 0.98 0.98 1.00 0.92 0.99 1.02 0.98   1.01
$,")4   0.92 1.02 0.91 0.87 1.05  1.00 1.04 0.97 1.05 0.99 1.00 1.05 0.99
$,")4 1.17 1.10 1.12 1.18  1.72 0.98 1.20 0.97  1.11  1.12 1.12 1.01 1.20
$,")4 1.18 1.12 1.14 1.12 1.12 0.99 1.09 1.10 1.08  1.04 1.17  1.07 1.04 
$,")4 0.97 1.00 0.98 0.94 0.92 0.97 1.09 1.01 1.07 1.24 1.01 1.02 1.04  1.12 0.91
$,")4 0.88 0.82 0.88 1.02  1.01 0.95  0.99 0.89  0.91 1.02 1.05 0.97 0.95
$,")4  1.00 1.01 1.02 0.92 0.91 1.02 1.05 0.98 0.94 1.04 1.02 1.01   1.00
$,")4 0.81 0.80 0.80 0.82 0.78 0.71 0.91 0.84 0.90 0.78 0.92 0.82 0.91   0.77
$,")4  1.21     1.05 1.21 1.04  1.10 1.10 1.12 1.05 1.04 1.29
$,")4 0.89 0.89 0.95 0.95 1.00 0.87 0.97   0.85 0.99 0.88 0.94  0.98 0.85
$,")4 0.92 0.95 0.99  0.97 0.89 0.98 0.90 1.02 0.85 0.95 0.90 0.98  1.11 0.88
$,")4  0.94 0.89  0.97 0.94 0.88 1.02 0.99 0.82 1.07 1.17  0.82 0.91 0.79
VALOR DE DISCRIMINACIN DE TEMS POR PAS
Tabla 9a.
,%#452!6ALORDEDISCRIMINACINDECADATEMPORPAS
Bloque 1.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4  1.00 1.02 1.01 1.00 1.04 1.04  1.00 1.00 1.01 1.02 1.08 1.04 1.01 1.02
$,")4  0.79 0.87 0.84 0.90 0.94  0.79 0.72  0.81  0.70 0.75 0.80 
$,")4 1.08 1.10 1.07  0.98 1.15 1.00 0.95  1.15 0.98 0.94 1.08 1.00 1.01 1.11
$,")4  1.01 1.07 1.04 1.07 1.20 1.01  1.01 1.07 1.04 1.04 1.12  0.95 1.01
$,")4 1.29    1.25  1.14 1.57    1.17    
$,")4 1.19 1.25 0.99 1.15 1.19 1.02  1.12  1.22    1.18  1.07
CAPTULO 5

$,")4   0.90 0.89 0.94 0.70 0.97 1.01  0.90 0.90 1.02 0.98 0.98 0.99 1.05
$,")4 1.02  1.20 0.84 1.21  0.57 0.71 0.58  0.57   0.75  0.79
$,")4 1.10 0.81 1.10 1.07 1.25 0.88 1.08 1.07 1.04 1.17 1.08   1.08 1.04 1.05
$,")4  0.75  0.72   0.87 0.85 0.98 0.50 0.95 0.90 0.90 0.91 0.92 0.71
$,")4 1.14  1.10 1.07  1.07 1.18 1.07  1.10 1.07 1.05 1.14  1.17 1.11
$,")4 1.15  1.08 1.24 1.08  1.24 1.27  1.19 1.14 1.19  1.07 1.19 1.12
$,")4 0.87 1.25 0.97  0.97 1.05 0.94 0.92 0.99 0.91 1.01 0.94 0.87 0.89 1.04 0.99
$,")4 0.97  1.01 1.04 0.99 1.21 1.02 1.01 1.00 0.95 0.99 0.98 0.98  1.00 
$,")4 1.07 1.02 0.97 1.00 1.07  1.08 1.09 1.09  1.02 1.15 0.82  1.10 1.05
$,")4 0.81  0.84 0.78 1.00 0.88 0.78  0.94  0.81  0.99  0.78 
PROCESAMIENTO DE DATOS
307
308
REPORTE TCNICO

Tabla 9b.
,%#452!6ALORDEDISCRIMINACINDECADATEMPORPAS
Bloque 2.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 1.09 1.08 1.05 1.09 1.04 1.05 1.14 1.12 1.15 1.07 1.05 1.04 1.15 1.09  1.08
$,")4  1.11 1.04    1.08 1.04 1.10  1.04 1.07 1.09 1.05 1.05 
$,")4 1.05 1.07 1.04 1.04 1.07  1.07    1.07 1.05 1.05 1.04 1.07 
$,")4 1.04 1.10 1.02  1.02  1.02 1.04 1.07 1.02 1.05 1.05 1.05 1.05  1.05
$,")4  0.87 1.02 0.97 0.97 0.98 0.92 0.98 0.87 0.94   0.72 1.04 0.71 0.98
$,")4   0.99  1.07 0.99 1.12  1.19 1.04 1.11 1.01   0.78 0.98
$,")4 1.07 1.10  1.08 1.07 1.05 1.10 1.04 1.11 1.07 1.05 1.08 1.08 1.07 1.09 1.11
$,")4     0.70 0.44    0.78  0.52 0.29 0.47 0.54 0.82
$,")4 1.17 1.05 1.21  1.02 1.00 1.14  1.15 1.15 1.07  0.99 1.04  0.99
$,")4 0.94 0.97 0.91 0.95    0.98 0.80 0.88 0.94  0.95 0.74  0.90
$,")4 1.00 0.92 0.90 1.17 0.94 1.00 1.18 0.99 1.21 0.79 1.11  1.15  1.12 0.97
$,")4  1.00 0.91 0.87 0.75  0.85 0.98 0.77 0.94 0.90 0.97 0.80 0.81 0.81 0.98
$,")4 0.95 0.92  0.84  0.80 1.08 0.94 1.00   0.95 0.92  1.14 0.85
$,")4  1.25 1.22 1.21  1.08  1.02 1.02 1.11 1.01 1.01   1.02 1.47
$,")4 0.78  0.75 0.79 0.81   0.87 0.77 0.92 0.87 0.94 0.89 0.79  1.08
$,")4        0.42  0.57 0.52   0.41  
Tabla 9c.
,%#452!6ALORDEDISCRIMINACINDECADATEMPORPAS
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4  0.92 0.98 0.95 1.04 1.04 1.05 1.00 1.05 0.87 1.01 1.04 0.90  1.12 0.90
$,")4 1.14 1.10  1.07  1.09  1.01 1.09 1.05  1.08  1.21 0.98 1.07
$,")4 1.07 1.04 1.11 1.11 0.99  1.12 1.17 1.04  1.10 1.07 1.08  0.82 1.09
$,")4 1.08   1.04  1.07 1.00  1.11 1.07 1.09 1.04  1.04 1.11 1.04
$,")4 0.99 0.98   0.94 0.99  0.91 0.77 0.94 0.81 0.91 0.87  1.02 
$,")4  1.17 1.02 1.00 1.04 1.05  0.94  1.04 0.99 0.97  0.99 1.00 1.10
CAPTULO 5

$,")4 1.05  1.05 1.00 1.00 1.12 0.90 0.98 0.97 1.00  0.75 0.89  0.90 1.07
$,")4 1.17  1.09 1.08   0.94 0.95 0.95   0.91  0.95  1.18
$,")4 0.95  1.01 1.05 0.97 1.17 1.02 1.00 0.97 1.08 0.97 1.04 0.98  0.99 0.94
$,")4 0.84 0.71 0.81 0.71 0.82 1.20  0.85 0.94 0.71 0.91   0.71 0.88 0.90
$,")4 1.01  1.19  1.11 1.17 1.05 1.09 1.19 1.12 1.08 1.04 1.11 1.02 1.04 0.92
$,")4 0.98 1.02 1.21 1.09   1.05  1.10  1.10 1.10 1.05 1.09 1.04 1.01
$,")4    1.10 1.17 1.10 0.98   1.21 1.07 1.41 1.10 1.21  1.22
$,")4  1.02 1.10 1.10  1.10 1.17  1.22 1.09  1.22 1.27  1.55 1.05
$,")4 0.71 1.27 0.25 0.88 0.57  0.85 0.85 0.82  0.87  0.85  0.90 0.72
$,")4 1.11  1.04 1.08 1.01 1.01  1.24 1.14  1.08  1.20   1.07
PROCESAMIENTO DE DATOS
309
310
REPORTE TCNICO

Tabla 9d.
,%#452!6ALORDEDISCRIMINACINDECADATEMPORPAS
Bloque 4.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 1.05 0.94 1.04 1.07 0.97 1.02  1.04  1.01 1.01   1.01  1.04
$,")4 1.17 1.08 1.07 1.11 1.28 1.19  1.19 0.98  1.24 1.14  1.19 1.10 
$,")4 0.77 0.77 0.72  0.79  0.95 0.72  0.57 0.85 0.85 0.94 0.97 1.04 0.59
$,")4 0.71 0.58 0.57 0.74 0.72 1.22 0.90  0.88 0.74 0.88 0.84 0.84  0.97 0.75
$,")4 1.24 1.18 1.15   0.88  1.18 1.19 1.17  1.24 1.25  1.28 1.20
$,")4 0.84 0.90 0.90 0.85 0.75 0.81 0.57 0.51  1.00  0.87 0.15 0.84 0.22 0.72
$,")4 1.29 1.40 1.50   1.09 1.12  1.11   1.25 1.21   
$,")4 1.04 1.10 1.05 1.01  1.07 0.99 1.05 1.07 1.07  1.05 1.27 1.04 1.07 1.05
$,")4 0.90 1.07 0.91 0.91 0.95 1.04 1.00 0.91 0.97 0.88 0.99  0.99 0.99  1.02
$,")4 0.85 0.89 0.87 0.78 0.88  0.80 1.15    0.90 0.75 1.10  1.01
$,")4  0.99  1.28 1.19 1.22  1.22  1.10 1.02 1.10 1.22 1.07 1.01 1.05
$,")4 0.99  1.05  1.28 0.49  0.94 0.94 1.00 0.98 1.07 1.05 1.15 0.98 
$,")4 0.98 0.87 1.04    1.01 1.02  0.92 0.92 0.92 0.95 0.94 0.90 1.04
$,")4 0.95 0.51 0.72 0.85 0.90 1.24 0.92  0.87 1.01 0.90 0.88 0.97 0.74 0.91 0.95
$,")4  0.77 0.49 0.55  0.14 0.79   0.59   0.59 0.74 0.97 0.55
$,")4 1.21 1.14  1.21 1.09 1.01 1.21 1.27 1.12 1.25 1.22  1.20 1.20 0.98 
Tabla 9e.
,%#452!6ALORDEDISCRIMINACINDECADATEMPORPAS
Bloque 5.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 1.08 1.05 1.05 1.04 1.08 1.05 1.08 1.07 1.07 1.04 1.05 1.07 1.08 1.08  1.04
$,")4 0.81 0.80 0.80 0.87 0.74  0.95 0.92 0.98 0.85 0.94 0.90 0.95  1.04 0.75
$,")4 0.84 0.91  0.74 0.79 1.09 0.99 0.79 0.91  1.01 0.98   1.00 0.82
$,")4 0.74 0.75 0.91 0.79 1.08 0.87 0.79  0.85 0.75 0.97 0.58 0.92 1.01 0.91 0.71
$,")4 1.09 1.09 1.07 1.09 1.09  1.20 1.08 1.15 1.07 1.08 1.14  1.12 1.18 
$,")4 1.07  1.07  1.07 1.07 1.15 1.10 1.09 1.11    1.14 1.48 1.08
CAPTULO 5

$,")4 0.98 1.08  1.15 1.07 1.10 1.07 1.05 0.91 1.20 1.19  1.02  0.92 
$,")4 1.12 1.29 1.19 1.17 1.07  1.25 1.25  1.24  1.29  1.29 1.52 1.18
$,")4  1.11  1.20 1.01 1.01 1.18 1.12 0.95  1.19 1.07 1.19 1.01 1.14 1.14
$,")4 0.95 0.85 0.79 0.99 1.21 1.20 0.87 0.81  0.78 0.87 0.98 0.87 0.82 0.88 1.04
$,")4 1.19  1.12 0.97 1.05 1.08 1.08      1.11 1.04 1.19 1.19
$,")4 0.97 1.10 1.12 0.87  1.09  0.84  1.01  0.99 0.75  0.50 1.12
$,")4 0.75 0.80 0.85 0.75 0.87  0.95 0.95  0.78 0.84 0.57  0.78 0.85 
$,")4 0.75 0.99    0.92 1.12 0.97 1.04 0.87 1.09  1.15  1.47 0.75
$,")4 1.01 0.54 1.01 1.21 1.00 1.15 0.85  0.95 1.00 0.77 1.11 0.78 0.91 0.70 
$,")4 0.78 1.18  0.78 1.02 0.99 0.81  0.84 0.77 0.77     0.92
PROCESAMIENTO DE DATOS
311
312
REPORTE TCNICO

Tabla 9f.
,%#452!6ALORDEDISCRIMINACINDECADATEMPORPAS
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.90 1.07 0.98 1.00 0.88 1.09 1.24 1.07 1.07  1.14 1.08 1.15 0.99 1.09 
$,")4 1.02 0.72 0.94 0.99  1.09 1.01 1.04   1.08  1.11 1.05 0.98 0.78
$,")4 0.92   0.98 1.05  0.84  0.84 1.02 0.99 1.07 1.25 0.71 0.90 1.25
$,")4  1.25 1.22 0.98 0.89 1.19  1.07 1.04 1.15 1.04 1.14   1.14 
$,")4 0.91 0.88 1.11  1.00 1.04 1.10 1.07 1.04 1.17  0.97 1.05 1.28  1.00
$,")4  1.11 1.22  1.18 1.15 0.95 0.90 0.99 0.90 1.10 0.91 1.02 1.00 0.98 1.01
$,")4 0.75 0.80 0.75 0.49  -0.48 1.07 0.55 1.14 0.50  0.90   0.92 0.57
$,")4  0.80  0.70    0.75   0.84   0.75 0.82 0.77
$,")4 1.08 0.94 1.08 1.15 1.11 1.02 0.80 1.00 0.79    0.91 0.87 0.72 1.17
$,")4 1.08   0.99  0.94 1.17 1.08 1.04 1.04 1.09 1.15 0.90 0.88 1.12 1.01
$,")4  1.01    1.09 0.90 0.92 1.07 1.02  0.94 0.98 0.95  0.97
$,")4  1.50  1.40 1.18 1.10  1.57    1.59  1.54 1.14 1.27
$,")4 0.79 0.57 0.59  0.71  0.88 0.78 1.00 0.92  0.95 0.70 0.92  
$,")4 1.29  1.15 1.17 1.00  1.07  1.21  1.04  1.18   
$,")4 1.19 1.10  1.09 1.09 1.17  1.27 1.00 1.27 1.11 1.18  1.17 0.95 
$,")4 1.25 1.05 1.11 1.01 1.05 1.10 1.02 0.99 1.00  0.98 0.97 1.11 1.11 1.00 1.42
PROPORCIN DE RESPUESTAS CORRECTAS DE CADA TEM POR PAS
Tabla 10a.
,%#452!0ORCENTAJEDERESPUESTASCORRECTASDECADATEMPORPAS
Bloque 1.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.94 0.91 0.94 0.92 0.90 0.97 0.85  0.89 0.95  0.90  0.91  0.94
$,")4 0.42   0.40 0.49 0.57  0.41  0.44   0.44   0.47
$,")4 0.45 0.49 0.44  0.45 0.70  0.27 0.25 0.50     0.20 0.44
$,")4  0.22 0.51   0.45 0.24  0.25  0.24  0.25  0.21 
$,")4 0.44 0.51 0.55 0.45 0.59 0.55    0.42    0.41 0.18 0.52
$,")4   0.55 0.54  0.78   0.40 0.55 0.47 0.52 0.42 0.52 0.42 0.77
CAPTULO 5

$,")4  0.29 0.29  0.27 0.50 0.18  0.17  0.27 0.20 0.27  0.15 
$,")4 0.49 0.44 0.49  0.47 0.59  0.45 0.40 0.45  0.47  0.44 0.42 0.48
$,")4 0.47 0.42 0.48      0.27 0.51   0.41 0.40  0.52
$,")4 0.45 0.44 0.49 0.41 0.49 0.45    0.45   0.29 0.44 0.25 0.52
$,")4 0.84 0.90 0.89 0.89 0.95 0.95  0.87 0.80 0.89 0.85 0.87 0.79 0.84 0.70 0.87
$,")4 0.72  0.75  0.81 0.82 0.49  0.51   0.58    0.74
$,")4 0.42  0.47 0.44 0.45  0.25   0.42     0.25 
$,")4 0.19 0.22 0.17 0.18 0.20  0.09 0.14 0.11 0.18   0.11 0.15 0.10 0.18
$,")4 0.55 0.58 0.57   0.70  0.50  0.52 0.45 0.48 0.44 0.47  
$,")4 0.45 0.57 0.49 0.48 0.50   0.42  0.45   0.40   0.47
PROCESAMIENTO DE DATOS
313
314
REPORTE TCNICO

Tabla 10b.
,%#452!0ORCENTAJEDERESPUESTASCORRECTASDECADATEMPORPAS
Bloque 2.

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.91   0.90 0.95 0.95 0.81 0.85 0.78 0.91  0.87 0.80 0.88  
$,")4 0.98  0.99 0.97 0.99 0.99 0.92  0.91 0.98  0.95 0.94  0.92 0.99
$,")4   0.97  0.98 0.98 0.91 0.95 0.94 0.97 0.94 0.92  0.95 0.88 0.95
$,")4 0.97 0.85   0.98 0.99   0.90 0.97 0.89 0.94 0.92 0.94 0.89 0.97
$,")4 0.75 0.72 0.78 0.77  0.85  0.71  0.77 0.71 0.70  0.75 0.59 
$,")4 0.74 0.84 0.79 0.78 0.82 0.90  0.71  0.87  0.71    0.79
$,")4 0.88  0.92    0.85 0.91 0.87 0.92 0.90 0.87  0.89 0.77 0.90
$,")4 0.58 0.47 0.58    0.54  0.52  0.48  0.50   
$,")4  0.47 0.49 0.42    0.41  0.51  0.41 0.40   0.52
$,")4  0.85 0.81  0.79   0.79  0.74  0.79    0.77
$,")4 0.58   0.59 0.74     0.58   0.42 0.52  
$,")4  0.81  0.71  0.77   0.70 0.70 0.70     0.75
$,")4  0.57 0.59 0.57   0.44 0.52 0.50 0.58  0.51 0.48  0.40 0.57
$,")4 0.40          0.10 0.17 0.18 0.21 0.10 0.44
$,")4  0.42 0.42   0.47      0.40   0.28 0.44
$,")4 0.45   0.45 0.45 0.57    0.41 0.50  0.48 0.41 0.45 0.48
Tabla 10c.
,%#452!0ORCENTAJEDERESPUESTASCORRECTASDECADATEMPORPAS
"LOQUE

tem Argentina Brasil Chile Colombia Costa Rica Cuba Ecuador El Salvador 'UATEMALA Mxico Nicaragua Panam Paraguay Per Rep. Dom. Uruguay

$,")4 0.74 0.79    0.79  0.72  0.70  0.70   0.55 0.77
$,")4 0.79  0.87 0.87 0.90 0.89   0.78 0.87 0.81 0.79 0.82  0.75 0.82
$,")4 0.77   0.77 0.89 0.85    0.79     0.50 0.71
$,")4 0.80 0.92  0.82 0.91 0.91 0.70 0.77  0.84  0.74    0.85
$,")4 0.78 0.85 0.80  0.81 0.80    0.72  0.70    0.82
$,")4 0.29  0.28 0.25   0.12 0.19 0.18  0.11 0.14 0.14  0.10 
CAPTULO 5

$,")4   0.75 0.72 0.77 0.70 0.59   0.71  0.58   0.41 0.71
$,")4  0.52  0.22 0.29   0.19 0.17  0.15 0.20 0.17 0.19 0.10 
$,")4  0.45   0.47 0.47 0.24 0.29 0.24  0.24 0.25  0.27 0.18 
$,")4  0.50  0.47 0.52     0.41 0.40   0.44 0.27 0.49
$,")4  0.42 0.47 0.49   0.27  0.29 0.48     0.28 0.42
$,")4  0.45 0.44 0.24 0.42 0.54 0.18  0.17  0.20 0.22 0.20  0.12 0.24
$,")4 0.48 0.58  0.57 0.72   0.48  0.52  0.48  0.42  0.50
$,"