48 EVALUACION DE LAS INSTITUCIONES Y PROGRAMAS EDUCATIVOS Hasta el momento, hemos revisado los distintos conceptos y las funciones que cumple la evaluacién asi como los supuestos que de ella se desprende; asimismo, los problemas y posibilidades que nos presenta, y los campos y dreas en las que actiia. Con ese marco tedrico, reconocimos que la evaluacién es un proceso y analizamos las fases que comprende. A continuacién aplicaremos estos elementos tedricos y metodolégicos, en la evaluacién de instituciones y programas educativos. Fs decir, trataremos de dar respuesta a la pregunta: éCémo evaluar un programa o institucién educativa? Enesta oportunidad nos interesa profundizar en lo que significa evaluar la calidad del servicio que brinda una instituci6n 0 programa educativo. 3.1 CALIDAD DE LA EDUCACION Y DEL SERVICIO EDUCATIVO Para brindar un buen servicio educativo, la institucién como tal debe organizarse, de esta manera se garantiza el cumplimiento de sus fines. Por ello, analizaremos que’ implica la dimensién organizativa como parte de toda practica humana, conciente y sistematica, a) Dimensi6n organizativa de toda practica Cuando afirmamos que una actividad, para que sea eficaz, debe ser “organizada', significa que: La organizaci6n, en términos generales, debe obedecer a un proceso de ordenamiento sistemdtico de medios y procesos para el cumplimiento de una accién, que le permita determinar los roles de los sujetos que intervienen en dicha accién. Podemos afirmar que cuanto mas conciente es una accién, més organizada es ella. De ahi que al tener mayor conciencia en el por qué y el para qué de una accién, podemos decir que se dard un mejor control en: * La seleccién de los medios y procesos para llevarlo a cabo. * Elordenamiento y secuencia que deben asumir los medios y procesos, para poder arribar de la mejor manera, a la meta prevista. * La determinacion de las funciones que deben cumplir cada uno de los sujetos que participan en esa accién. Porello, la seleccién de los medios y procesos y las formas concretas que asume la articulacién de estos sujetos y elementos constituye la dimensién organizativa de cualquier practica 0 actividad. Esta organizacién resulta siendo una exigencia para garantizar la eficacia y eficiencia de dicha actividad.49 Tengamos presente que la organizacién no son los sujetos, ni los elementos por si mismos. La organizaci6n, de manera especttica, est referida a las funciones de los sujetos y al ordenamiento que se da a los procesos y medios seleccionados. Observe el siguiente gréfico que presenta las ideas expuestas. FINALIDAD * Resolver un PROBLEMA “ * Lograr un OBJETIVO o + Cumplir una MISION R c | fj . E A SELECCION J DE MEDIOS (RECURSOS) Y N DE LOS PROCESOS MAS E ADECUADOS \ oi Zz | | u « SENALAMIENTO DE LA c SECUENCIA Y c ORDENAMIENTO DE LOS \ MEDIOS Y PROCESOS t td ° ° | L N DETERMINACION DE LAS N FUNCIONES DE LOS SUJETOS QUE INTERVIENEN EN LA ACCION, b) Las Organizaciones Educacionales Las personas actuamos de manera colectiva, para alcanzar mejor algunas finalidades. Las organi- zaciones humanas, cuando se establecen de manera conciente y explicita, buscando cierta perma- nencia en el tiempo, constituyen instituciones. La finalidad de una institucién determina no solamente su naturaleza, sino también su organi- zaci6n. Por ejemplo, si una institucién asume como finalidad la investigaci6n cientifica, su organi- zaci6n debe favorecer la consecuci6n de esta finalidad. Es por ello que cuando un grupo de personas se reine para brindar un servicio de cardcter educativo tiene una finalidad educacional; entonces, surge una instituci6n u organizacién educa- ional, como por ejemplo: un centro educativo o una universidad. Por lo tanto, las organizaciones educacionales son todas aquellas instituciones que tienen como una de sus finalidades, el desarrollo de servicios educacionales.50 Planteada asi, la organizaci6n seré un soporte necesario para el logro de las finalidades educacionales de una institucién. Y por ello, cuando evaluamos la actividad educativa, necesaria- mente la misma organizacién se convierte en objeto de evaluacién. ©) Calidad y Servicio Educativo La calidad, en términos amplios, se refiere a la adecuacién del servicio o producto al usuario. Mientras mas adecuado sea el producto al usuario, se dird que es de mejor calidad. éCudl es la idea que usted tiene sobre calidad de la educacién? Después de haber expresado su propio concepto o idea, lo invitamos a leer el ANEXO 5 “La calidad de la Educacién: ejes para su definicién y evaluacién" en el cual Inés Aquerrondo, nos presenta una definicién sobre calidad de la educacién Si concluyé la lectura, reflexione en torno a ella, a partir de las siguientes pregun- tas: La autora afirma que el concepto calidad de la educacién es muy abarcante y de amplias posibilidades, que involucra una serie de caracteristicas. Describa breve- mente estas caracteristicas en torno al concepto de calidad. Use Is complejo y totalizante, puede se apicado 4 fos distntox elementos de un sistema educative. Varia sey la realidad social e historia de un determinado lugar o pais conereto. Porenite defini Ia imagen-abjetivo para la wanslormuciin de la educaci. Sine como patrén de referencia pra decisiones en tomo a la eficacia y eficiencia del servicio. habs setalad que el concept calidad5 En el contexto de la lectura, écémo se concibe un sistema educativo eficiente? {4 autora seals que un sistema educatiso es eficienle cuando optimiza los meds que dispone pare brindar una eeducacion de calidad a toda la poblaciin Isto requiere que se establezcan definiciones pedagogicas concretas sobre que ‘es mejor edueacion, qué es calidad y, en ilina islaneia, qué es calidad de la educacign, 2 Qué comentario le merece la siguiente cita: “Cuando hay congruencia 0 consistencia entre estos ejes fundamentales (ideoldgicos, politicos, pedagogicos, etc.) y la organizacién (0 Ia apariencia fenoménica) del aparato educativo, no se percibe inconsistencia, y por ende, no se cuestiona la ‘calidad’ de la educacién. En realidad, lo que pasa es que hay consistencia entre el Proyecto Politico General vigente en la sociedad, y el Proyecto Educativo que opera. Es este ajuste, lo que define la existencia de "ealidad'." Su comentario habe girado en torn ala dea que ls dimensiones yejesvana petit toma decisiones para mejorar la calidad de un sistema educativo, Pero estos ej fundamentals (ideokigicos, politicos, pedagogios, etc.) deben guardar comistencia con la organizacin del sistema educativo puesto que su desajuste se percibe como “alta de calidad’. Asimismo, ef Proyecto cdlucativo que se leva a cabo debe estar en cohereneia con el Proyecto politico nacicnal52 éFor qué la autora plantea que evaluar la calidad de un sistema educative requiere criterios basicos y globales? 1a autora destaca que en la evaluacion educatva debe manejarse criteres tisices y globes, para lograr ast transformaciin de la realidad edlicatnva, De otra manera, exile of rego de reducir la evaluacidi a una mesicin euyos resultados no tecogen la complejidad de los elementos educativos «ue s6lo se elienen 4 los wspectos : de lneelucae Como Ud. habrd podido reconocer en la lectura, la dimensién organizativa, es decir, la forma concreta cémo se organiza un sistema educativo debe estar en correspondencia con la dimension politico-ideolégico, De ahi que la organizacién educacional es uno de los factores determinantes de los resultados de una practica educacional. No es un "factor de Calidad Educativa’, sino es factor en el "mejoramiento de la Calidad Educativa’. Explicando un poco més esta idea, toda actividad tiene “calidad”, en la medida que sus resultados pueden compararse con los resultados de actividades de similar naturaleza. Por ello, de lo que se trata no es de “generar calidad” sino “desarrollar una mejor calidad”. En el quehacer cotidiano toda préctica educacional conlleva una organizaci6n para lograr una alidad y, por ende, para obtener resultados de calidad. Es asi que podemos decir que los diversos componentes de la organizacién educativa influyen en una educacién de calidad. Por ejemplo la organizacion d personal (maestros, educandos, padres de familia) trabajo técnico-pedagégico, ~ recursos materiales e infraestructura, trabajo administrativo, distribucién del tiempo, ete. Esto no significa que la organizacién sea un simple “medio” para arribar a inalidades determinadas. in se_da en coherencia con una concepcién, con una misién y con los rasgos53 particulares de una realidad. Por eso, para promover una prictica educativa 'democratica" no se puede usar una organizacién ‘vertical’. Siendo asi, la basqueda de la calidad educativa supone el mejoramiento del soporte organi- zacional, que debe ser de calidad, en la medida que es més eficiente y més pertinente a la realidad y al marco teérico que se busca. En el siguiente punto abordaremos cémo estas instituciones y programas educativos pueden ser evaluados. 3.2 QUE EVALUAR EN LAS INSTITUCIONES Y PROGRAMAS EDUCATIVOS? Como hemos mencionado, la organizacién de una institucién y, en general, de un sistema ediucativo es un factor del mejoramiento en la calidad educacional. Este reconocimiento determina la necesidad de considerarlo como objeto de evaluacién. Recordard usted que en el apartado “Camposy Areas de la Evaluacién Educacional” mencionamos algunos componentes susceptibles a ser evaluados. continuacién deseamos precisar las dimensio- nes que podemos evaluar en relacién a dichos componentes. Nos referimos a las dimensiones de pertinencia, eficacia, eficiencia e impacto. a. Evaluacién de pertinencia.- Se trata de explicitar si la tarea, actividad, proyecto 0 programa educacional que se evalia ha sido la mas adecuada para resolver los problemas, lograr objetivos-metas o cumplir una misi6n. b. Evaluacién de eficacia.- Se busca establecer el nivel de cumplimiento de objetivos y de metas previstos para una tarea, actividad, proyecto o programa, en un periodo de tiempo y en condiciones determinadas. c. Evaluacién de eficiencia.- Aqui se analiza, de manera desagregada y en su conjunto, los recursos y procesos que se han utilizado o se vienen utilizando. Se establece hasta qué punto ellos han sido y son favorables 0 desfavorables para el cumplimiento de los objetivos-metas. d. Evaluacién de impacto.- Es decir, los efectos positivos o negatives derivados de la accién y del nivel de logro de los objetivos-metas. En actividades sociales, generalmente se evaliia la capacidad de generalizaci6n de una practica (aplicabilidad en circunstan- cias similares), asi como la institucionalizacién que se deriva Por ejemplo: Si estoy evaluando algunos materiales educativos, buscaré determinar si ellos pueden ser utilizados en otros espacios y si es posible que sean parte de una estrategia oficial més institucionalizada Ademés de estas dimensiones podemos sefialar otra que también consideramos importante. e. Evaluacién de la intervencién de los sujetos.- En educacién, como en toda prictica social, la forma como intervienen los sujetos marca definitivamente la orientaci6n de la acci6n. Por ello, importa evaluar cémo intervienen cada uno de los sujetos en el proceso educativo.54 Por ejemplo: Si en una practica educativa conereta, los educandos son asumidos como objetos 0 como sujetos de aprendizaje. Luego de haber comprendido la importancia de la organizacién educativa para el me- joramiento de la calidad, le presentaremos algunas propuestas que pueden orientar su quehacer como experto evaluador de instituciones y programas educativos. 3.3 PROPUESTA DE ESQUEMAS PARA EVALUAR LA CALIDAD DE LAS INSTI- TUCIONES O PROGRAMAS EDUCATIVOS Hemos reconocido la importancia de conocer la condicién actual de la calidad del servicio educativo de una institucién o de los programas que se ofrecen para que se constituya en un factor eficiente y pertinente a los objetivos institucionales. En este apartado deseamos presentar, a modo de sugerencia, cuatro propuestas de evaluacién. Estas son: * Evaluacién para mejorar la calidad educativa de una institucién, propuesta por Sigfredo Chiroque. * Evaluacién del Programa de Profesionalizacién Docente de la Universidad Nacional Mayor de San Marcos. * Evaluacién del Programa de Profesionalizacién Docente en zonas rurales andinas. * Evaluaci6n de un Organismo no Gubernamental (ONG). 3.3.1 Una propuesta de evaluaci6n para mejorar la calidad educativa Para el mejoramiento de la calidad educativa en una Institucién Educacional, como un centro educativo, se proponen seis puntos centrales para la evaluacién: ~ Evaluacién del entorno general + Factores enddgenos y exdgenos ~ Caracteristicas generales del centro educativo ~ Pentinencia y niveles de la ensefianza-aprendizaje + Evaluacién del Impacto ~ Fortalezas, Oportunidades, Debilidades y Amenazas 1) Evaluaci6n del entorno general del centro educativo. Se trata de explicitar las caracteristicas socio-econémico-culturales de la comunidad, pero con la finalidad de poder determinar periles, objetivos y contenidos curriculares ‘pertinentes’. Es decir, evaluar la pertinencia de lo que se viene trabajando en el centro educativo y mas especiticamente, el curriculo que se viene utilizando. 2) Evaluacién de cada uno de los factores endégenos y ex6genos que determinan y/o condi- cionan la calidad educacional.55 Se trata de precisar los elementos internos y externos a la instituci6n educacional que se evalda y como ellos estin determinando la calidad educativa. De esta manera, se podran buscar mecanismos de control. Observe el siguiente cuadro donde se detallan los factores ex6genos y endégenos de la calidad educativa. FACTORES ENDOGENOS Y EXOGENOS DE LA CALIDAD EDUCATIVA FACTORES EXOGENOS, N 01. Tamafio del PRESUPUESTO General de la Repl para Educacidn 02. Nivel NUTRICIONAL de los educandos. 03. Influencia de los MEDIOS DE COMUNICACION (radio, TV). 04, Situiacin SOCIO-ECONOMICA de la familia (acom- pafiamionto de padres, facilidades en el hogar, etc.) eh 05. Desarrollo de CIENCIA Y TECNOLOGIA del pais D (sive para contenidosy medios de ensehansa) 06. MODELO EDUCATIVO vigento, segin correlacién de fuerzas 07. MODELO SOCIO-ECONOMICO predominant, SS FACTORES ENDOGENOS ome< reo o>o 01, Impariir CONTENIDOS EDUCATIVOS personal y social mente "significalives 02, Adecuado TRABAJO CURRICULAR: allo nivel de en- sefancayaprentizae —>> 03. INFRAESTRUCTURA y MATERIALES DIDACTICOS del docente. 04, TEXTOS para el educando, 05. ACTITUDES POSITIVAS DEL DOCENTE, junto con MANEFJO DE ADECUADAS METODOLOGIAS Y CON- TENIDOS, 1 06. Use racional del TIEMPO por los educandos y los docen- tos 07, Formacivin pata la LECTURA COMPRENSIVA y el RA: A ZONAMIENTO VERBAL y cl RAZONAMIENTO, MATEMATICO. 008. TAREAS racionales en casa, con ayuda de padres, 09, Adecuada ADMINISTRACION escolar. 4 >ancom <56 3) Evaluaci6n de las caracteristicas generales del centro educativo, para determinar su “eficacia' y “eficiencia" respecto a los objetivos y metas institucionales. 4) Evaluaci6n de la pertinencia y niveles de la ensefianza y de aprendizaje. Se trata de explicitar hasta qué fase de ensefanza o de aprendizaje se ha llegado en la institucién educacional. De esta manera, un juicio de valor sobre esta situacin permitiré establecer metas adecuadas para el mejoramiento en la calidad educativa. En el siguiente cuadro Ud. podra reconocer segiin la profundidad en el objeto de ensefianza, hasta qué nivel o niveles puede alcanzarse en el aprendizaje. NIVELES DE ENSENANZA Y APRENDIZAJE PROFUNDIDAD NIVELES DEL APRENDIZAJE EN EL OBJETO DE ENSENANZA Y REPRO- ‘COMPREN) ANALISIS/ | APLICA- VALORA- | GENERA- APRENDIZAJE DUCCION| SION | SINTESIS | CION CION | LIZACION j baTos 1 2 3 ° HECHOS 2 | CONCEPTOS 1 2 3 4 5 6 oO | | CATEGORIAS. | 3 1 2 3 4 5 6 PROCEDIMIENTOS * | 1 | 2 | 3 4 5 6 REGLAS | | 5 1 | 2 3 4] 5 6 PRINCIPIOS 6 1 2 3 4 | 5 6 TEORIAS 7 | CONCEPCIONES ¥ ENFOQUES 1 2 3 4 5 6 FILOSOFICOS87 Hay urgencia en evaluar: ~ El nivel de profundidad de la ensefianza en cada asignatura y si ese nivel es el adecuado. ~ El nivel de aprendizaje que buscamos se logre en cada asignatura. Deberiamos establecer las dificultades que tenemos y, fundamentalmente, evaluar los procesos que son factores favorables 0 desfavorables para conseguir lo previsto. ~ El nivel de logro que se va obteniendo en cuanto a niveles de aprendizaje por parte de los educandos. Habria que establecer en qué niveles hay mayores dificultades y por qué. Por ejemplo, en los centros educativos es importante sefialar las metas sobre los niveles de ensefianza y aprendizaje a lograrse en el ao, y asi después de la evaluacién hacer los correctivos para el ano venidero. 5) Evaluacin de impactos que se logran, es decir, los efectos que realmente se dan en los egresados, en los padres de familia, comunidad y docentes, a partir de la labor de la institucién educativa. 6) Evaluacién de Fortalezas y Oportunidades, Debilidades y Amenazas (FODA) para poder proyectar mejor la practica educativa institucional. La técnica del FODA explicita las Fortalezas, Oportunidades, Debilidades y Amenazas. Es decir, los factores positivos y favorables (internos y externos) y los factores negativos y desfavo- rables (internos y externos) presentes en una determinada practica educativa institucional. INTERNOS | EXTERNOS INTERNOS — EXTERNOS La aplicaci6n de la técnica del FODA permite aprovechar al maximo las ventajas que se tienen y buscar relativizar al maximo las desventajas. De esta manera, la institucién podra construir un futuro posible - deseable con un mayor conocimiento de los factores positivos y negativos, internos y externos.58 3.3.2 Esquema de Evaluacién del Programa de Profesionalizacién docente de la Universidad Nacional Mayor de San Marcos Para evaluar el trabajo anual (1995) del Programa de Profesionalizacién Docente de la Universidad Nacional Mayor de San Marcos, la Facultad de Educacién de esta universidad asumis el siguiente esquema: UNIVERSIDAD NACIONAL MAYOR DE SAN MARCOS PROGRAMA DE PROFESIONALIZACION DOCENTE RESUMEN EJECUTIVO, PRESENTACION i 1, OBJETIVOS DE LA EVALUACION 2. EFICACIA DEL PROGRAMA 2.1 Pertinencia del Programa 2.2 Pertinencia de las Sedes 2.3 Cumplimiento de metas académicas 1995 2.3.1 Metas previstas 2.3.2 Cumplimiento de metas: Admisién 1995 2.3.3 Cumplimiento de metas sobre Plan de Estudios. 2.3.4 Cumpli 2.3.5 Cumplimiento de metas sobre evaluacién del aprendizaje. 2.3.6 Cumplimiento de metas sobre el sistema de tutoria. 2.3.7 Cumplimiento de metas sobre Sistema de investigaci6n. 2.3.8 Cumplimiento de metas sobre el desarrollo del sistema. liento de metas sobre materiales autoinstructivos. | 2.4 Balance cualitativo 2.4.1 Tendencia de retencién y desercién. 2.4.2 Rendimiento de los alumnos 2.4.3 Resultados segiin criterio de evaluacién3. EFICIENCIA DEL PROGRAMA 3.1 Estrategia académica asumida 3.1.1 Regimen mixto 3.1.2 Las especialidades. 3.1.3 Evaluacién de los materiales autoinstructivos 3.1.4 Funcionamiento del sistema de tutoria. 3.1.5 Funcionamiento del sistema de evaluacién 3.1.6 Funcionamiento del sistema de investigaci6n. 3.2 Organizacién académico-administrativa 3.2.1 Equipo de trabajo. 3.2.2 Aspecto organizativo. 3.3 Estrategia de autofinanciamiento 3.3.1 Ingresos-egresos del alumno. | i | i i | | i | 3.2 Flujo de pagos y egresos 4. IMPACTO DEL PROGRAMA 4.1 Impacto del PPD en sus alumnos. 4.1.1 Nivel de aprendizaje. 4.1.2 Expectativas respecto al Programa de Profesionalizacion Docente. Impacto al interior de la Facultad 4.2.1 Expectativa 4.2.2 Critica 4.2.3 Aceptacién: pasiva y activa 5. EL CONTEXTO EN LA DINAMICA DEL PROGRAMA 5.1 Aspectos favorables e internos al Programa: Fortalezas. 5.2 Aspectos favorables y extemos al Programa: Oportunidades. 5.3 Aspectos desfavorables e internos al Programa:Debilidades. 5.4 Aspectos desfavorables y externos al Programa: Amenazas. CONCLUSIONES RECOMENDACIONES, ANEXOS. Este esquema evaliia en forma desagragada distintos componentes del programa en funcién a las dimensiones de eficacia, eficiencia, impacto y los resultados de la técnica del FODA. Resulta una buena alternativa para programas diseniados,60 3.3.3 Evaluacién del Programa de Profesionalizacién Docente de Areas Rurales Andinas En este esquema se evaltia en relacién a los sujetos y los procesos que intervienen en este programa. A su vez, respecto a cada nivel se formula los objetivos que se pretende lograr con la evaluacién y se determina el foco de evaluacién respectivo. SISTEMA DE EVALUACION DEL PROGRAMA DE PROFESIONALIZACION A MAESTROS SIN TITULO PEDAGOGICO EN ZONAS RURALES ANDINAS OBJETIVO GENERAL: Brindar informacién sobre todos los componentes del programa de| profesionalizaci6n para ver su adecuacién a los objetivos, su implementacién y desarrollo de tal modo que permita la toma de decisiones y la retroalimentacion permanente. NIVELES, OBJETIVOS FOCO DE EVALUACION 1. Identificar el nivel de logro de abjetivos de aprendizaje por parte del participant cn ci6n a los propuestos en cl Programa de Pi fesionaligacién, co 2. Descubrir los niveles de participacién que va Parlicipacion asumiendo ef maestro dentro del Programa. 3. Describir el descable impacto de la Profesio- Impacto en la Comunidad nalizacién cn la Comunidad donde labora el docente. Rendimiento Oamecu 1. Determinar la manera como el Curriculo ex: Marco Doctrinario, Objetives, presa los lineamientos tedricos y doctrinarios Perfil y Sistema Modular del Programa de Profesionalizacion (coheren- Curricular, Cc __ cia externa) | 2. Analizar como la caracterizacion del contex- Demandas, Objetivos y Perfiles, | toy del participante se plasman y sirven de. bage al curiculo de Profesionalizacién (cohe- rencia externa) R R 3, Describir las caracteristicas y estructura del Sistema Modular Curricular: | Sistema Modular curricular ¢ identificar las Objetivos, Contenidos, | oO R posibilidades y limitaciones de su aplicacién Actividades, Evaluacion. | en el area de influencia | C14. Caracterizar y analizar cl Sistoma de Educa Caracteristicas del Sistema de | cidn a Distancia como estrategia de desarrollo Educacién a Distancia: E del Curricula del Programa de Profesionali-. Descripcién y andlisis del | zacion, funcionamiento. | $Y 3: Determinar de qué manera la fase presencial Presencial: a tanciapropiamente dicha permiten cl. Edtategia de ensenanca, | desarrollo, + Material de apoyo. oO sa apoy' | A Distancia: | so - Materiales Instructiv | « Sistema de Distribucién de materiales instruccionales. Interaccidn didactica,NIVELES OBJETIVOS 61 FOCO DE EVALUACIO! 1. Caracterizar el sistema organizativo del Pro- Sisterna Organizativo. TO. | desarrolla el Programa de Profesionalizacién SQS- permite generar un proceso de TE atilosostenimiento, que tienda a mantenerse sin | Ni- __ elapoyo extemo tanto en términos de personal MIEN| como de financiamiento. TO lara grama de Profesionalizacion. NIS- | 2. Analizar cémo la organizaci6n, funciona- | Organizacién [TRA miento y responsabilidad del equipo con- Funcionamiento ION, tribuye a la adecuada marcha del Programa. | Responsabilidad | | |AU- | Determinar de qué manera la forma cémo se |. Equipo Humano “Apoyo de Autoridades y Comu- nidad. . Generacién de Recursos TRANS Determinar la posibilidad de transferencia del FEREN, programa de profesionalizacién a otros Cia | Contextos similares en base a criterios de interculturalidad, tecnologico, eficiencia externa y economia. Interculturalidad: Demanda, planteamientos doctrinarios, objetivos, perfiles, politicas, Ejes Teéricos, Ejes de Realidad, Guias de Accién, Tecnolégico: - Utilizacion de métodos y disefios. = Produccién de materiales. = Desarrollo del Sistema de Edu- cacién a Distancia. - Comprensién de organizacion y evaluaci6n (usuarios). « Peril ideal Eficiencia externa: « Promedio de rendimiento. + Actividades de produccién y promocién. Econémico: (Costo) - Material de aprendizaje. - Equipamiento y mantenimiento. Personal. 3.3.4, Evaluaci6n de un Programa ejecutado por un Organismo No Gubernamen- tal (ONG) Presentamos ahora, el disefio evaluativo ejecutado por un Organismo No Gubernamental (ONG). Se trata de la instituci6n CAPER que desarrolla proyectos sociales y educacionales con campesinos de la zona de Huacho.62 Ud. podré apreciar que la evaluacién se hace en funcién a la eficacia, eficiencia, impacto y la intervenci6n de los sujetos. Ademas utilzan la forma de pregunta que desean resolver a través de la evaluaci6n. | EVALUACION DE LOS PROGRAMAS DE CAPER - 1995 1. OBJETIVOS DE LA EVALUACION 1.1 OBJETIVO GENERAL Establecer, respecto a cada uno de los Programas de CAPER 1995: la eficacia, eficiencia, avances de impacto, potencialidad de generalizacién y participacién de los productores del campo, con la finalidad de profundizar y recrear la continuidad del trabajo. 1.2 OBJETIVOS ESPECIFICOS a. Establecer los niveles de cumplimiento de los objetivos y metas previstas. b, Determinar la pertinencia de los recursos y procesos empleados con los objetivos y metas previstos y ejecutados, c. Precisar el nivel de control de los problemas que se buscaban resolver con cada Programa, asi como los avances en su impacto: econémico, técnico, social y politico y, de manera particular, como medio en el desarrollo de calidad de vida. d, Sefialar hasta qué punto los Programas en marcha son generalizables. e. Explicitar los niveles de intervencién de los productores del campo en cada Programa. f. Contextualizar el desarrollo de los Programas, senalando los elementos -internos y externos al mismo- que han sido y son favorables y desfavorables para su _ ejecucién y continuidad. | | g. Delinear perspectivas institucionales para proseguir el trabajo, en el marco del desarrollo sostenible en la zona de intervenci6n. | | 2. ASPECTOS A EVALUAR : 2.1 EFICACIA DE LOS PROGRAMAS, PROYECTOS Y ORGANOS DE APOYO. iH * Analizando los objetivos de cada Programa, Organos de Apoyo y Proyectos especificos: 8Estos objetivos sirven para resolver los problemas y el devenir del desarrollo agropecuario (agroecol6gico)? | * sCada uno de los objetivos se tradujo en metas e indicadores de avance y de - impacto? | |" £Qué niveles de cumplimiento se han dado en los objetivos y metas previstas? * 2Los enfoques que se han utilizado: en el programa de crédito, en la organizacién de los productores, en la asistencia técnica, en las relaciones con organismos de cooperacién, del Estado y de la sociedad civil, y en los Organos de apoyo han _ sido los mas convenientes? j63 2.2 EFICIENCIA DE LOS PROGRAMAS, ORGANOS DE APOYO Y PROYECTOS ESPECIFICOS * bLos recursos econdmicos, logisticos y el personal han sido los mas adecuados para cumplir los objetivos y metas previstos y ejecutados en cada Programa, Organo de apoyo, Proyectos y en la institucién en general? 8La Direccion del Proyecto, del Programa y de la Institucién ha sido la mas adecuada? * Los procesos de planificacién, implementaci6n, ejecucién, monitoreo y evaluacién usados han sido y son los mas adecuados para cumplir los objetivos y metas previstos y ejecutados? | *2L.a organizacién de los productores del campo y de la insttuci6n ha sido la mas adecuada para cumplir los objetivos y metas? * tHubo un adecuado uso y administracién de los recursos? {Qué avances hubo en _ el proceso de autofinanciamiento institucional? * {Qué costo/beneficio se ha dado? * sCudl es el nivel y significado del aporte local? 2.3 IMPACTO DE LOS PROGRAMAS Y PROYECTOS ESPECIFICOS. * De qué manera y hasta qué nivel se han controlado los problemas que se querfan resolver con los Programas y Proyectos? * iDe qué manera y hasta qué nivel los Programas y los Proyectos han servido y sirve para el desarrollo de la calidad de vida de los productores del campo en la zona de trabajo? * sCudl es el real impacto econdmico, en lo técnico-productivo, social, politico e | ideoldgico de los Programas y Proyectos? Hasta qué punto las actividades de los Programas han devenido en politicas sociales? 2.4 GENERALIZACION DE LA EXPERIENCIA DEL PROGRAMA $ * 2Qué politica de generalizacién han tenido los Programas y Organos de Apoyo, y_ c6mo fue su cumplimiento? * sHasta qué punto varios elementos y propuestas institucionales han sido recogidos - por ONGS, instituciones de la Sociedad Civil y Politica? éCudles? | +2 Qué efectos no previstos se han dado? 2.5 INTERVENCION DE LOS PRODUCTORES DEL CAMPO | I i * Participacidn individual. * Funcién de los Comités, grupos. i * Nexo con el campesinado organizado.64 2.6 EL CONTEXTO EN LA DINAMICA DE CADA PROGRAMA, PROYECTO Y ORGANO. DE APOYO. | | | * Defi icién de Factores favorables internos y cémo se usaron (Fortalezas). * Definicién de Factores favorables externos y cémo se usaron (Oportunidades). * Definici6n de Factores desfavorables internos y cémo se usaron (Debilidades). * Definicién de Factores desfavorables externos y cémo se usaron (Amenazas). 2.7 PERSPECTIVAS DE CADA PROGRAMA, ORGANO INSTITUCIONAL Y PROYECTOS * iQué perspectivas tienen los Programas, los Proyectos y Organos de Apoyo? SQué | reajustes hacer? * {Qué sugerencias en cuanto a financiamiento y nuevos Proyectos? 3.4 ROL DE LA EVALUACION EN LA ORGANIZACION DE SISTEMAS EDUCATIVOS Por lo general, factores como la formaci6n y el desarrollo profesional de los docentes siempre fueron considerados para evaluar la calidad educativa; sin embargo, la evaluacién del sistema educativo ha tenido una reciente atencién. Cuando se intenta, en nuestros paises, evaluar una institucién educativa, de inmediato aflora la ideas de que esto.se hace por el marco neoliberal en boga (la evaluacién como instrumento politico-ideolégico), porque se desea realizar previstos recortes o reajustes institucionales (evaluacién como mascarada social), o porque simplemente esté de moda evaluar las institucio- nes (evaluacién por "novedad’) Lejos de las justificaciones anteriores y siguiendo a Alejandro Tiana (1995), queremos explicitar algunas razones y consecuencias de la evaluacién de las organizaciones educativas: * Cambio en los modos de administracién y control de los sistemas educativos Demanda social de informacion y rendicién de cuentas * Monitoreo en la gestion educacional * Mejoramiento de la calidad educativa a. Cambio en los modos de administracién y control de los sistemas educativos La sociedad civil y la sociedad politica estan atentos a los resultados de las instituciones educacionales. Se espera que ellas contribuyan a generar: sociedades abiertas, activas y con equidad; economias dindmicas y competitivas; sistemas politicos democraticos y pluralistas; y,65 en fin, personas equilibradas, tolerantes y socialmente integradas. En otras palabras, se replantea la misma intencionalidad de la practica educacional y aumenta la conciencia ciudadana para controlar si se dan las modificaciones exigidas. EI proceso anterior deviene en una doble exigencia fundamental: * La evaluacién de la pertinencia de las instituciones y practicas educacionales; y * La institucionalizacién del control de los sujetos respecto al quehacer educacional. La misma poblaci6n busca intervenir en los procesos evaluativos del sistema. b. Demanda social de informacién y rendicién de cuentas No solamente crece la conciencia ciudadana respecto a la utilidad del quehacer educacional, sino que las mismas concepciones sociales introducen el ‘factor educativo" como concrecién y determinacién del desarrollo humano. En ambos casos, se necesita contar con informacién mas precisa sobre los resultados y el proceso de las practicas educacionales. Por ello, se requiere tener al dia informacién sobre cémo marchan los sistemas educacionales. El Banco Mundial, por ejemplo, asume como uno de los "Indicadores de Desarrollo Humano" (IDH) la situacién educativa de un pais. Y al mismo tiempo postula que el ‘capital humano" (como factor de desarrollo) depende del nivel educacional. En ambos casos, la toma de decisiones de dicha institucién mundial supone tener informacién actualizada sobre los sistemas educativos de los pafses. Pero, el factor educativo no es el tinico que determina el desarrollo de los pueblos, también existen otros factores hacia los cuales deben derivarse los recursos escasos de nuestros paises. Una toma de decisiones de esta envergadura necesariamente requiere de informacion sobre cémo marchan los sistemas. Y esto solamente es posible, en la medida que se ejecutan evaluaciones del sistema. c. El monitoreo en la gesti6n educacional Los nuevos enfoques de planificacién para construir modelos futuros (imagen-objetivo), suponen que la administracién educacional ya no es un acto meramente rutinario y de medidas que se repiten. En tanto que se trabaja para cumplir una misién (en un futuro previsto), la administracién educacional pasa a constituirse en un proceso permanente de toma de decisio- nes, a partir de alternativas diversas. Se trata de ponerse frente a un barco y "monitorearlo’, tomando decisiones permanentes sobre el mejor rumbo y formas para concretizar una mision. La toma de decisiones supone informacién. Requiere procesos evaluativos permanentes que permitan monitorear mejor la practica educacional. Por eso, la informacién cuantitativa y Cualitativa que produce la evaluaci6n de los sistemas es una forma renovada de hacer politica € influir en los destinos de las practicas educacionales. d. Mejoramiento en la calidad educativa En relaci6n al mejoramiento en la calidad educativa, de manera especifica, la evaluaci6n cumple los siguientes roles:* Proporciona datos, andlisis e interpretaciones vilidas y fiables sobre la si- tuacién educacional actual. Se trata de una funcién diagnéstica pero para la toma de decisiones. Esta funcién diagnéstica se concretiza a nivel macro 0 a nivel micro, en el anilisis de resultados de una actividad o tarea educacional especifica. Sin embargo, conviene precisar que a nivel macro importa evaluar resultados, mientras que a nivel micro se pone el acento en evaluar procesos. Para hacer un andlisis mas exhaustivo existe la necesidad de precisar indicadores educativos relevantes y permanentes. Cada unidad de estudio deberia traducirse en un sistema de indicadores, de tal manera que sea posible: - Tener informacién relevante sobre el sistema - Hacer comparaciones a lo largo del tiempo y del espacio ~ Precisar tendencias del sistema ~ Llamar la atencién sobre los puntos criticos del sistema * Coadyuva a la conduccién de los procesos de cambio y de reforma educacional. Las innovaciones pedag6gicas y las transformaciones organizacionales del sistema educativo 0 de un centro educativo requieren un acompafiamiento permanente. Un prerrequisito para ello, es tener evaluaciones permanentes que determinen el logro de metas e impactos que se producen. * Ayuda a la valoracién de los resultados de la evaluacién. Ya no basta describir resultados. Importa dar un juicio de valor sobre ellos, en la medida que estos resultados se correlacionan con las finalidades previstas. Por ello, la evaluaci6n es un mecanismo que permite este necesario proceso valorativo que va mas all de la presentacién de datos 0 cuadros estadisticos. Se trata de ver hasta qué punto la prdctica educativa es significativa para el sujeto en su dimensién personal y social. Es decir, presentar cémo la accién educacional adquiere significancia para las personas involucradas y para el grupo social de pertenencia. Esperamos que esta unidad, le haya permitido revisar sus planteamientos te6ricos respecto a la evaluaci6n y reflexionar sobre la practica evaluativa que Ud. y su institucién llevan a cabo dentro del proceso educativo, con miras al mejoramiento de la calidad del servicio que se ofrece. Asimismo dependiendo de la instituci6n o programa educativo, esperamos que le sean de utilidad los esquemas de evaluacién presentados y avance en la seleccién y propuesta de esquemas evaluativos pertinentes para su realidad educativa. Le invitamos a resolver la Autoevaluacién, sdlo si Ud. esta seguro de haber comprendido los contenidos desarrollados en esta unidad.67 AUTOEVALUACION ements |, Lea los siguientes enunciados y las alternativas que se le presentan, marque con una X la respuesta correcta, 1. La concepci6n de evaluacién que pone énfasis en las variables que pueden ser medibles yen la utilizacién de instrumentos vAlidos y confiables se denomin. a) Juicio de expertos. b) Medicion. ©) Congruencia entre objetivos y logros. d) Proceso de delineamiento y uso de la informacién. €) Proceso de valoracién critica 2. La evaluacidn e6 el proceso a través del cual se obtiene informacién para introducir cambios y tomar decisiones respecto al objeto evaluado. Esta afirmacién corresponde a la concepcién de evaluacién como: a) Juicio de expertos. b) Medicién. ©) Congruencia entre objetivos y logros. 4) Proceso de delineamiento y uso de la informacion. ¢) Proceso de valoracién critica. 3. La evaluacién tiene relacién con la motivacién del individuo para aprender, pues a travéo de ella se reconoce si éste ha logrado o no un aprendizaje. En este sentido, la evaluacién cumple la funcién: a) Significado de la practica pedagégica y social. b) Social. c) Poder de control. 4d) Proyeccién psicoldgica e) Apoyo a la investigacién68 4. Establecer el propésito de la evaluacién corresponde a la fase del proceso de evaluacién denominada: a) Definicién del enfoque de evaluacién. b) Elaboracién del plan de evaluacién c) Ejecucién del plan. ) Evaluacién del proceso de evaluacién. e) Elaboraci6n del informe evaluativo. Il. Seffale si las siguientes afirmaciones son verdaderas (V) 0 faleas (F): a) Los elementos que permiten emitir un juicio valorativo son: el parametro de referencia y la informacién. ( ) b) La evaluacion puede ser concebida como el proceso por el cual se emiten juicios de valor para la toma de decisiones.(_) c) La evaluacién educativa debe contemplar el respeto por el ser humano.(_ ) d) En el proceso de evaluacién, el uso que daremos a los resultados se dertermina al momento de elaborar el informe evaluativo.( ) 2) La informacion que recogemos sobre el proceso mismo de la evaluci6n es denominada metaevaluacidn. (_ ) ) La funcién de poder de control ‘permite al evaluador construir categorias concep- tuales que dan significado a los aspectos que se van a evaluar.( ) g) La legitimacién es un aspecto de la funcién social de la evaluacién.( ) Ill. Complete los siguientes enunciados, 1. Las fases del proceso de evaluacién 901 b) a 6) ne 4)2. Determinar qué se pretende evaluar corresponde a la fase del proceso de evaluacién denominada educativo. 4. La buena organizacién de la institucién garantiza un buen 5. "La eficiencia es sinénimo de calidad", puede ser entendida como 6. Aun evaluador le interesa conocer si la actividad planteada ha sido Util para el logro de un objetivo. En este caso el evaluador ha puesto su atencién en la dimensién..