High Quality
Open the downloaded document, and select print from the file menu (PDF reader required).
18
ACCIONPEDAGÓGICA,Vol.9,Nos.1y2/2000
Enelpresenteartículoelautorplantealameta- evaluacióndelasescuelascomounprocesode valoracióndelasevaluaciones,denaturaleza cualitativa,quedarespuestaaaspectosinquie- tantescomoelaprendizaje,lamejora,elrigor,la transferenciaylaética.Dasignificativaimpor- tanciaaesteúltimo,puesconsideraque,ade- másdeserlametaevaluaciónunprocesotécni- co,contieneunadimensiónética,porlocualmen- cionadocecriteriosdecarácteraxiológico.Igual- mente,enformabreve,refierelamaneraderea- lizaresteproceso,desatacandoelprocesode negociación,laaplicacióndecriterios,eljuicio deexpertosylaopinióndelosprotagonistas.
Se está hablando y escribiendo mucho sobrela evaluación de los centros escolares, se estánhaciendomuchasevaluaciones,seestágeneran-do una cultura sobre la evaluación.Ante ese he-cho no hay que lanzar las campanas al vuelo,porque lo más importante no es hacer muchasevaluaciones, ni siquiera hacerlas bien. Lo másimportante es saber al servicio de qué personasydequévaloresseponen.Quierollamarlaaten-ción en estas líneas sobre la necesidad de anali-zar lo que sucede con las evaluaciones.Nobas-ta,pues,ponerlasenmarchaparaqueyanossin-tamossatisfechos.Lametaevaluación(oprocesodeevaluacióndelasevaluaciones)permitepregun-tarse,almenos,porestascincocuestiones:
1 Elaprendizaje
Esnecesarioaprenderdelasevaluacionesquese realizan.Todos podemos aprender: los patro-cinadores, los evaluadores, los evaluados. Perosolamente lo podremos hacer si reflexionamosdeformarigurosaydesapasionadasobrelospro-cesos y los resultados. No es razonable repetirlos errores de manera casi mecánica.En la evaluación que se pone en marcha porprescripciónlegalseproduceuncrucedemode-losverdaderamenteinquietante.Secorreelpeli-grodequelaevaluaciónnorespondaplenamenteni a uno ni a otro. Por una parte, se trata de unaevaluación de rendimiento de cuentas (accoun-tability) ya que la ordena el poder y la realiza laautoridadacadémica(inspectores).Porotrapar-te, se pretende hacer de ella una evaluación ne-gociada, consensuada, participativa y democrá-tica. Si se negocia, ¿se puede plantear la posibi-lidad de que los evaluadores sean agentes exter-nosalsistema?,¿sepuedesugerirqueseanotroslosmétodos?,¿sepuededecidirdesdelasescue-las qué hacer con los informes?...Es necesariopreguntarseporlaactituddelosprofesores y profesoras, por la artificializacióndel comportamiento cuando se hacen observa-ciones, por la calidad de la información cuandose hacen entrevistas, por la riqueza de los infor-mes elaborados, por la negociación de los mis-mos,porlacapacidaddetransformaciónqueestáteniendo la evaluación... Es necesario pregun-tarse por la preparación de los inspectores parahacer un tipo determinado de evaluación, por eltiempodequedisponen,porsushabilidadesparallevarlaa cabo... Es imprescindibleinterrogarseporlaactituddelprofesoradoantelaevaluación:por sus reticencias, por su colaboración, por sudisposición al cambio...¿Porquérepetirloserroresdeunaformairra-cional y perseverante? ¿Quién garantiza que los
Metaevaluacióndelasescuelas:
elcaminodelaprendizaje,delrigor,delamejoraydelaética
Palabrasclave:
Evaluación,metaevaluación,mejo- ra.
E V A L U A C I O N
D O S S I E R
Miguel Angel Santos Guerra
UniversidaddeMálaga,España
arrebol@uma.es
MiguelA.SantosGuerra/
Metaevaluacióndelasescuelas
19
ACCIONPEDAGÓGICA,Vol.9,Nos.1y2/2000
Theroleofmetaevaluationinschoolsasa processofassessmentoftheevaluation,ina qualitativeapproach,isreviewed;focusingon uneasyaspectssuchaslearning,improvement,rigor,transferandethics.Agreatersignificance isgiventothelattest,sinceitisconsideredthat themetaevaluationbesidesbeingatechnical processcontainsanethicaldimension.Thisis detailedintwelveaxiomaticcriteria.Theauthor alsoexplainsbrieflyhowtoachievetheprocess,outstandingthenegotiation,theapplicationof thesecriteria,thejudgementofexpertsandthe opinionoftheprotagonist.
buenos propósitos al realizarla no han produci-do efectos secundarios dañinos? ¿Quién puedeafirmar que está inmunizado contra la comisióndeerrores?Siasíhasido,¿noesrazonableyjus-toquesetratendeevitarenfuturasexperiencias?El aprendizaje no se produce solamente so-bre los fallos, errores o conflictos.También esimportanteanalizarydesentrañarlasexplicacio-nessobrelosaciertos,sobrelacolaboraciónabier-ta, sobre la reflexión rigurosa, sobre el conoci-mientoelaborado,sobreloscambiosefectivos...
2 Lamejora
Sé que la palabra mejora es casi infinita ensuscontenidossemánticos.¿Quéesmejora?Sinembargo es una pregunta capital. Hay que des-entrañar el significado de este concepto comohay que hacerlo con el de calidad. De lo contra-rio, no sólo se producirá confusión, sino tam-bién perversión. Cuando se realizan simplifica-ciones, suelen hacerse de manera interesada.Quienidentificacalidadconrendimientodealum-nos es porque está interesado en que así sea.La evaluación tiene que estar encaminada ala mejora de la práctica educativa. La evalua-ción es un garantía de la calidad para el centroeducativo (Casanova, 1992), siempre y cuandose realice, se oriente, se encamine a la mejora ynotantoalcontrol,alacomparación,alaclasifi-cación,alajerarquizaciónoaladiscriminación.Para que la mejora se produzca es necesarioque la disposición de los que intervienen en ellasea abierta y comprometida. Si no existe actitudautocríticayaperturaalaopiniónexternaesmuydifícil que cambie algo profundamente. Si noexisteunaactitudcomprometidaconlapráctica,es imposible que las transformaciones afecten azonas significativas. Los cambios, si se produ-cen, serán superficiales y anecdóticos. Hablo dedisposición positiva de todos los que intervie-nen en la evaluación.Esoatañe también a laAd-ministración.Silaevaluaciónmuestracarencias,deficiencias o errores en la gestión del sistemaeducativo,habrán de percibir los profesores queexiste disponibilidad para asumir las decisionesde mejora. Si no sucede así, el profesorado verála evaluación como un fenómeno de jerar-quización y de control.La mejora exige una negociación de los in-formes extensa y profunda. La negociación deinformes es la piedra angular de la evaluación(Santos Guerra, 1998), porque permite conocercon claridad y rigor qué es lo que sucede y porqué. De ese conocimiento pueden surgir las de-cisiones de cambio.
3 Elrigor
Una de las preocupaciones más importantesde la metaevaluación es la comprobación del ri-gor que ha tenido la evaluación. La evaluaciónquedefiendoesdenaturalezacualitativaporcon-siderar que no se puede captar fenómenos com-plejosdesdemétodoscuantitativos y,por consi-guiente,simplificados.No se deben aplicar a la utilización de meto-dología cualitativa los presupuestos de la vali-dez que se vienen aplicando en la investigaciónexperimental. Esa dependencia genera una dis-
Keywords:
evaluation,metaevaluation,impro- vement.
E V A L U A C I O N
D O S S I E R
MiguelA.SantosGuerra/
Metaevaluacióndelasescuelas
20
ACCIONPEDAGÓGICA,Vol.9,Nos.1y2/2000
torsión del modelo y no da respuesta a la verda-dera cuestión: ¿Cómo saber si la evaluación quese ha realizado refleja con rigor lo que sucedeen la escuela? Es preciso aplicar los criterios decredibilidadycomprobarenquémedidaesaeva-luación los cumple. Veamosalgunosejemplos:Si se han utilizado métodos diversos para ex-plorar el centro y se han triangulado las infor-maciones procedentes de ellos, habrá más rigorque si se ha utilizado un solo método. El proce-so de triangulación consiste en la contrastación,en la depuración de los datos. La informaciónprocedentededistintosmétodosnosiempredicelomismo.Nosetrataconlatriangulacióndeeli-minar las discrepancias, sino de explicarlas.Si se ha permanecido un tiempo largo en elcentro observando lo que en él sucede, habrámásgarantíasquesisolamentesehapermaneci-do en él un tiempo muy breve. Las pistas de re-visión permiten hacer una valoración sobre lanaturaleza, el sentido, la ética y el rigor de laevaluación.¿Existenesas pistas?
4 Latransferencia
La evaluación que se hace de una escuelapuede servir para el aprendizaje y el cambio deotras escuelas. El hecho de que cada escuela seadiferente no oculta las características comunesquelasdefinenatodas.Difundirlosinformesdelas evaluaciones (salvaguardando el anonimatode los protagonistas) puede ayudar a compren-der lo que sucede con las escuelas.Y puede ser-vir para que algunas reflexionen sobre los resul-tados habidos en otras.Para que la transferibilidadpueda producirsehayque partirdedescripcionesminuciosas.Lasafirmaciones de carácter genérico no aportaninformaciónrelevante.Decirqueuncentro"fun-cionabien",quetiene"climaexcelente",quetie-ne "magníficos resultados", no nos permite co-nocer nada. En la medida que los centros tengancaracterísticas y contextos más similares, latransferibilidad será más fácil. En efecto, es ra-zonable esperar que lo que sucede en un centroprivado se repita en otro de este mismo tipo. Esprobable que una escuela rural se parezca más aotradeestecarácterqueotrasituadaenunagranurbe. Y que un centro de grantamañoseaseme- je más a otro de estas características que a unaescuelaunitaria.Existe otra forma de establecer transfe-ribilidad, que se ha denominado "reader made",hecha por el lector del informe. Este se pregun-ta: ¿Pasará algo parecido en este otro centro?Quienleeuninformesobrelaevaluacióndeunaescuela y está en otra, puede preguntarse fácil-mente: ¿Pasará algo similar en la mía?
5 Laética
Me detendré algo más en este apartado porconsiderarlo esencial en la metaevaluación. Lametaevaluaciónnoesunprocesoexclusivamentetécnico. Como la misma evaluación, tiene unadimensión sustancialmente ética. Por eso, lametaevaluación no se centra exclusivamente enlabúsquedadecriteriosdecaráctermetodológicoo algorítmico, sino que se ha de centrar en suvertientemoral.En otro lugar (Santos Guerra, 1993) he he-choreferenciaalosabusosdelaevaluación.Losque en ese trabajo describo y denuncio han sidodescubiertos en la práctica de la evaluación enEspaña. No hablo, pues, de memoria. No es ne-cesario desarrollar el contenido de estos enun-ciados que hablan por sí solos:Convertir la evaluación en un elogio a quienla patrocina o la realiza.Elegirsesgadamenteparalaevaluaciónalgu-nas parcelas o experiencias que favorezcanuna realidad o una visión sobre la misma.Hacerunaevaluacióndediferentenaturalezayrigorpararealidadesigualmenteimportantes.Convertir la evaluación en un instrumentodedominación, control y opresión.Ponerlaevaluaciónalserviciodequienesmástienen o más pueden.Atribuir los resultados a causas más o menossupuestas através deprocesos atributivos ar-bitrarios.Encargar la evaluación a equipos o personassinindependenciaovalorparadecirlaverdad.Silenciar los resultados de la evaluación res-pecto a los evaluados o a otras audiencias.Seleccionar aquellos aspectos que permiten
E V A L U A C I O N
D O S S I E R
MiguelA.SantosGuerra/
Metaevaluacióndelasescuelas
Add a Comment