38 Como Ud. habra podido observar los esquemas para identificar campos y areas de evaluacin educativa, tienen la posibilidad de ser miltiples y variados, dependiendo de la forma y el criterio con que se organicen los elementos 0 componentes del sector educativo que se pretenda evaluar. Las conceptualizaciones que sobre evaluacién ha estudiado, sus supuestos, funciones, problemitica, asi como los campos y areas donde ejerce su accién, nos permitirén profundizar sobre el proceso de evaluacién que a continuacién desarrollaremos. 2. EL PROCESO. DE EVALUACION: Seguramente coincidimos en considerar la necesidad de evaluar la actividad educativa y en sefalar que debe ser un proceso dindmico, integral, continuo, flexible y sistematico en el que pueden observarse diferentes fases. La evaluacién de un programa educativo, por ejemplo, puede llevarse a cabo mediante un proceso de toma de decisiones a través del cual se planifica, se examina, se recogen datos y se informa sobre el valor © mérito del objeto evaluado en ese programa. Es ast que para llevar a cabo este proceso se articulan distintas fases 0 etapas por las que transcurre la actividad del evaluador. Si bien cada especialista tiene un enfoque particular del proceso de evaluacién, asi como de un plan espectfico para operacionalizar dicho proceso, queremos sefialar el planteado por Chadwick (1976:314). El propone cuatro fases en este proceso como a continuacién apre- ciamos: PLANIFICACION DE LA EVALUACION RECOLECCION DE LA INFORMACION PROCESAMIENTO DE LA INFORMACION COMUNICACION Teese actor RESULTADOS Por su parte Danilo Ordofiez (1989) precisa también cuatro fases del proceso de evaluacién, que se habrén de seguir si se pretende producir cambios en los componentes de la accion educativa, que constituyen los objetos de evaluacién. A continuacién detallaremos estas fases y le ofreceremos las orientaciones necesarias para que pueda aplicarlas en su labor docente,39 1. DEFINICION DEL ENFOQUE DE EVALUACION 4, EVALUACION ———] bit proctso DE EVALUACION 2. ELABORACION DEL PLAN, DE EVALUACION RETROALIMENTACION 3, INSTRUMENTACION OEJECUCION = [>= ‘TOMA DE PRACTICA DEL PLAN, DECISIONES EDUCATIVA Pasaremos a analizar cada una de ellas. 2.1 FASE 1: DEFINIR EL ENFOQUE DE EVALUACION, Esta primera fase se refiere al establecimiento del modelo, enfoque 0 concepto de evaluacién que asumimos. También comprende el propésito o sentido de la evaluacién, es decir se determina cudles son los fines de la evaluacién que se va a'realizar. En esta fase, el evaluador podra formular los siguientes cuestionamientos que le ayudarén a definir un enfoque: 1. 2 Quién solicita la evaluaci6n ? 2 Para qué se solicita ? écon qué finalidad? 2 Qué se pretende evaluar ? 4. 2 Qué modelo o enfoque de evaluacién voy a utilizar? . 2 Es posible llevar a cabo la evaluacién ? Resueltas estas preguntas, el evaluador tomaré la decisi6n de realizar la evaluacién y continuar con el disefio de un Plan de evaluacién. 2.2 FASE 2: ELABORAR EL PLAN DE EVALUACION DEFINIR EL ENFOQUE DE | ELABORAR EL PLAN DE EVALUACION EVALUACION40 El proceso de evaluacién necesita de una cuidadosa planificacién que asegure la obtenci6n de una informacién valida y fiable que nos permita a su vez formular juicios de valor acertados acerca del objeto que se est evaluando. Esta planificacion se concreta en el disefio de un Plan de Evaluaci6n en el cual se establece, entre otros, cual serd el objeto de evaluacidn, qué aspectos y cudndo va a llevarse a cabo la evaluacién. Veamos qué pasos deberemos seguir para elaborar este plan: Especificar el objeto de la evaluacién ee Desctibir los aspectos a evaluar yo Decidir cuando obtener la informacién is — a Seleccionar las técnicas e instrumentos Especificar los criterios de organizacién de la informacién Indicar los usos de la informacion evaluativa Elaborar el Programa de Actividades pad Seguramente, Ud. recordar que estos pasos fueron presentados en el Curso “Didéctica de la Educacién Superior”, e hicimos una breve explicacién sobre cada uno, teniendo como objeto de evaluaci6n, el aprendizaje del alumno. Para una mayor comprensin, vamos a analizar cada uno de los siete pasos anteriormente mencionados:a“ a) Especificar el Objeto de Evaluaci6n: Este paso consiste en sefalar el componente de la accién educativa sobre el que recaeran los juicios valorativos. Cuando abordamos en el apartado anterior, los campos y areas de la evaluacién educativa, le alcanzamos distintos esquemas sobre los componentes del sistema educativo que pueden ser objeto de evaluaci6n. Entonces, en este paso Ud. debe seleccionar el area y los componentes que van a ser evaluados. La finalidad de alcanzarle distintos esquemas es para que Ud. pueda tener un abanico de posibilidades sobre qué evaluar en educacién. La seleccién del objeto depen- derd de sus necesidades profesionales o institucionales. b) Describir los aspectos a evaluar: Una vez definido el objeto de evaluacién debemos describirlo en detalle, para ello identificamos las categorias, criterios e indicadores que nos permitan evaluarlo. Para ejemplificar este paso, le ougerimos revisar el Anexo 2 “Evaluaci6n de la Educacién Superior”, donde s¢ presentan los siguientes campos de evaluacién: |. Desempetto escolar ILProceso educativo Il, Adminiotracién educativa IV. Impacto social \. Politica Educativa En este anexo observaré que, a partir de los campos de evaluacion antes mencionados se generan las categorias, que no son otra cosa que los componentes de la accién educativa, es decir, los objetos de evaluaci6n. Se dard cuenta, ademés, que los criterios constituyen los pardémetros de comparacién que permiten juzgar la informacién acopiada sobre el objeto de evaluacién. Por dltimo, notaré que los indicadores son las evidencias concretas de realidad que le ayudan a construir su juicio valorativo acerca del objeto de evaluaci6n. ©) Decidir cuando obtener informacién: Luego de haber definido las categorias, criterios e indicadores de evaluacién debe sefialar los momentos en los cudles se recogeré la informaci6n. La definicién de la frecuencia y el tiempo que nos dediquemos al objeto de la evaluacién, nos ayudard a precisar la cantidad de informacién que vamos a obtener y su variedad. Es cierto que resulta dificil definir cual sera el momento oportuno para la recoleccién de informacién. Sin embargo, se debe hacer el intento pues el criterio que tenga Ud. como profesor 0 evaluador sera definitivo.42 No dude que la recoleccién de datos, realizada en el “momento oportuno” le permitira recoger la informacion mas adecuada a sus fines. d) Seleccionar las técnicas e instrumentos a emplear de acuerdo a Ios criterios antes sefialados: Después de haber definido el momento en el que realizaré la recolecci6n de la informacion, es necesariovelegir los medios, es decir, las técnicas e instrumentos que le permitiran recoger mejor la informacién. Segtin Danilo Ordonez, las técnicas e instrumentos mas empleados en la evaluacién educacional son: TECNICAS DE EVALUACION INSTRUMENTOS DE EVALUACION . La Observacién . Pruebas basadas en objetivos - La Entrevista « Tests de habilidades | . La Construccién de cuestionarios . Gulas de observacién . Guias de entrevista En la segunda unidad didactica desarrollaremos estas técnicas e instrumentos de evaluaci6n, en cuanto a sus caracteristicas, ventajas y proceso de elaboracién 0 construc- cién. Entonces, en nuestro plan debemos elegir las técnicas e instrumentos mas pertinentes a nuestro enfoque y finalidad evaluativa. e) Especificar los criterios de organizacién de la informacion: Determinadas las técnicas ¢ instrumentos a utilizar en el proceso de evaluacién, debemos sefalar emo vamos a organizar la informaci6n para facilitar la descripcién, el andlisis'y la interpretacion de datos. La organizacién dependerd de los objetivos de evaluacién asi como de las habilidades y conocimientos técnicos que tenga el evaluador para encauzar y procesar dicha informacién. Por ejemplo; constituyen criterios de organizacién los aspectos positives y negativos de un curso, organizar los resultados de rendimiento distinguiendo los de un grupo A de los de un grupo B, o considerar la opinion de la mayoria vs. la de una minoria pero importante. Debe tener presente en este paso: 1. El enfoque de evaluacién que Ud. sustenta. 2. El objetivo de su evaluacién de tal modo que la interpretacion de los datos se relacione directamente con él. 3. La cantidad y variedad de informacién que obtendra.43 #) Indicar Jos usos de la Informaci6n Evaluativa: Es conveniente que sefalemos qué utilidad daremos a la informacién resultado de la evaluacién. €s decir, a quiénes alcanzaremos las conclusiones de la evaluacién y cual sera la finalidad de su uso (para introducir mejoras, reorientar lineamientos de politica, etc.). 8) Elaborar el Programa de Actividades EI Gltimo paso a seguir es definir el Programa de Actividades es decir, enumerar las actividades que necesitamos realizar para llevar a cabo la evaluaci6n. Estas pueden ser, entre otras: * Elaboracién de instrumentos. * Recoleccién de la informacién. * Procesamiento de los datos. * Organizaci6n de los datos. * Formulacién de conclusiones. Elaboracién del informe evaluativo. Al concluir con el programa de actividades estamos en condiciones de elaborar el "Plan de Evaluaci6n’. Este plan consta de los siguientes elementos que Ud. ya ha ido definiendo en cada uno de los pasos vistos anteriormente. Se trata de organizar lo trabajado siguiendo el esquema propuesto a continuacién: PLAN DE EVALUACION 1. Enfoque de evaluacién 2. Objeto de la evaluacién || 3. Criterios o bases de comparacién. 4. Frecuencia y Tiempo 5. Técnicas e instrumentos 6. Criterios de organizacién de la informacién 7. Usos de la informacién evaluativa | 8. Programa de actividades: ACTIVIDADES. aac | a) Elaboraciéin de instrumentos bj Recaleeci6n de la informacion ©) Procesamiento de datos d) Organizacién de datos ©) Formulacén de conclusiones £) Elaboracién del informe evaluativo | | |44 A modo de ejemplo, le presentamos en el ANEXO 3 dos Planes de Evaluacién claborados por participantes de la promocidn 94. Reviselos detenidamente identi- ficando sus elementos. Después proceda a responder las siguientes preguntas: éCudl ha sido el objeto de evaluacién en cada uno de los Planes de Evaluacién? iertamente, en el ejemplo 1, el objeto de ev el ejemplo 2, el objeto que se evalia es um ‘eapacitaciin on progtamacién curricular de nis wi to coms uyen los profesores del colegio “Fe y Alegria" N22. En Inns precisamente, un médulo multimedia para la edu a3 aos, En relacién a su institucién educativa o al programa educativo en el que participa Qué objeto de evaluacién seleccionaré Ud.? éFor qué? Continuemos con la siguiente fase del proceso de evaluacién. 2.3 FASE 3: EJECUTAR EL PLAN DE EVALUACION DEFINIR EL ENFO- ELABORAR EL PLAN QUE DE EVALUACION DE EVALUACION _____.. HECUTAR EL PLAN DE EVALUACION La ejecucién del plan corresponde a la etapa donde se realiza la instrumentacién y puesta en marcha del plan disenado. En esta fase usted debe elaborar los instrumentos de evaluacién; aplicarlos, organizar y analizar la informaci6n y por Ultimo, elaborar el informe de los resultados. Es el momento en que Ud. tiene que desarrollar cada una de las acciones sefialadas en el programa de actividades, segtin el cronograma que se haya previsto.45 A continuacién describiremos las actividades antes enumeradas: a) Elaboraci6n de los instrumentos de evaluacién: Inicie la elaboracién o construccién de los instrumentos que Ud. ha previsto utilizar para recoger informacién sobre el objeto de evaluacién. Es decir, debe elaborar las pruebas, la guia de observaci6n o guia de entrevista, etc. de acuerdo a los criterios técnico-pedagégicos correspondientes a cada instrumento. Estos criterios y recomendaciones para la elaboracin de los instrumentos estan a su disposici6n en la segunda unidad didactica. b) Recojo de informaci6n: £1 momento o situacién que provoca mayor conflicto durante la ejecucién del Plan es el de la recoleccién de datos. Usted puede encontrar cierta resistencia a colaborar en las personas que son objeto de evaluacién 0 que le sirven de fuente. Por ejemplo: si Ud. desea evaluar la calidad del personal docente que trabaja en el Instituto puede encontrar cierta desconfianza y falta de colaboracién entre sus colegas para aportarle informacién. Si est evaluando el proceso administrativo del Instituto, el personal administrativo puede mostrarse receloso e incluso dudar del valor y utilidad de la evaluaci6n que se esta realizando. Estas situaciones pueden ser superadas sise establece una buena comunicaci6n, se propicia un ambiente cooperativo, y si se maneja adecuadamente los instrumentos de evaluacién. ©) Organizaci6n y anilisis de la informaci6n: Luego de la recopilacién de los datos habri que organizar la informacién obtenida segin los criterios de organizacién que hemos determinado en el Plan y mediante procedimientos estadisticos . En este sentido, la informatica puede apoyar el procesamiento de la informacién recogida, creando una base dle datos por cédigos que permita ir almacenando y dando el tratamiento estadistico necesario. Dicha base puede ser disefiada por especialistas de acuerdo a las necesidades del proceso de evaluaci6n. El objetivo esencial de este analisis es sintetizar lo obtenido durante las fases anteriores del proceso de evaluacién dando respuesta a su propésito. El tipo de andlisis requerido dependerd tanto de la naturaleza de los datos como de las preguntas relevantes que hayan sido formuladas en la finalidad del proceo de evaluacién. d) Redaccién del Informe: Todo proceso de evaluacién conlleva a una fase final en la que los resultados obtenidos son transmitidos en forma oral o escrita a través de un informe. Este documento es de suma importancia porque recoge los resultados a los cuales hemos llegado, asi como las recomendaciones que pueden seguirse. En base al informe se tomardn las decisiones que se requieren en torno al objeto evaluado. Por tanto, este informe debe considerar los distintos sujetos implicados en el proceso evaluativo, por lo que el lenguaje que se utilice debe ser simple, sencillo, sin tecnicismos para favorecer la comprension.46 A continuacién le presentamos los apartados que pueden considerarse en un informe. Estos son una adaptacién de los propuestos por Ferndndez-Ballesteros (1992): PARTES DE UN INFORME EVALUATIVO, =Portada _ : En ésta, por lo general se indica el nombre del programa evaluado, quien solicit6 la evaluacién, a quién va dirigido, duracién de la evaluaci6n y la fecha de entrega. = Resumen; Se presenta los abjetivos de la evaluacién y una breve descripcién de la metodologia empleada, asf como los importantes hallazgos en funcién al propésito de la evaluacién. = Resultados : Se sefiala los resultados significativos encontrados, asf como otros resultados no relacionados pero de relevancia, y las semejanzas 0 diferencias con otros estudios. - Conclusiones y recomendaciones : Se exponen las conclusiones a las cuales se ha llegado y las recomendaciones que se crean necesarias. Le invitamos a leer el ANEXO 4, en el cual Ud. podra revisar un informe de evaluacién en relacién al ejemplo 1, del Plan de evaluacién referido a los docentes del C.E. "Fe y Alegria" N° 2. Es importante que Ud. analice la coherencia entre el Plan y el informe evaluativo, asi como la coherencia y significatividad de los resultados, conclusiones y recomendaciones propuestos en dicho informe. Como habré podido apreciar, la evaluaci6n tiene una importante funcién retroalimentadora, porque suministra informacién valida para ayudar a la adopcién de medidas que corrijan o refuercen lo encontrado en relacién al objeto de evaluaci6n. 2.4 FASE 4: EVALUAR EL PROCESO DE EVALUACION, | DEFINIR ELEN- + ELABORAR EL ——+ EJECUTAR EL ___,, EVALUAR EL | FOQUE DE PLAN DE PLAN DE | PROCESO DE © _ EVALUACION EVALUACION EVALUACION EEVELUSCIONS Cuando realizamos una evaluacién nos surgen preguntas como: éQuién garantizaré que la evaluacion esta bien hecha y que sus resultados son fiables? £Qué garantia hay respecto al anélisis del proceso evaluador seguido? éQué validez y confiabilidad tienen los instrumentos utilizados para la recogida de datos?47 Estas preguntas responden a la necesidad de evaluar el proceso de planificacién y ejecucién de la evaluacién con el fin de comprobar si esté cumpliendo su propésito. Segtin Casanova (1992:141) se trata de la metaevaluacién. Esta autora nos brinda pautas respecto a como evaluar el proceso de la evaluacién: + Podemos recoger la opinién de personas autorizadas respecto a nuestro Plan de Evaluacion ~ Igualmente, expertos o especialistas en el tema, pueden examinar los instrumentos de evaluacién que nos proponemos aplicar. - También podemos establecer una observacién continua de la ejecucién de la evaluacién, con registros adecuados, - Sera importante, asegurar que los datos que se ofrecen como resultados hayan sido analizados convenientemente. Es recomendable garantizar que el proceso de evaluacién responda a los criterios de utilidad, factibilidad, discresi6n y pertinencia, tal como lo sefiala Casanova (1992:142). Breve- mente nos referiremos a cada uno de ellos: 1.Utilidad: Exige que la evaluacién sirva a las necesidades de informacién de los destinatarios de la evaluacién y sea oportuna. Supone que la evaluacién se realice en un ambiente natural, y no de| laboratorio, y que se utilicen los recursos y el tiempo imprescindible para lograr sus propositos. 3. Discresién: Hace referencia a las repercusiones personales que la evaluacién suele o puede tener sobre las personas afectadas por ella, por lo cual se aconseja que se maneje de manera muy reservada la informacion evaluativa. 4. Pertinencia: implica la obtencién de informacién que realmente se pretendia recoger. Habiendo asegurado estos criterios podemos garantizar que el proceso de evaluacién ha cumplido su propésito. Para concluir, queremos destacar que si bien existen otras propuestas en torno al proceso de evaluacién, hemos desarrollado ésta porque consideramos que es un proceso sencillo pero con la rigurosidad cientifica que el caso merece. A continuacién abordaremos el estudio de la evaluacién de instituciones y programas educativos.