CMO SE EVALA LA CONVIVENCIA EN UN CENTRO?

Orlando Castro Trigueros Colegio Marista Castilla Palencia

Resumen: Cualquier proyecto de mejora de la Convivencia exige responder un interrogante fundamental: Cmo se evala la Convivencia en un Centro?. La respuesta a esta cuestin, implica tomar decisiones sobre un conjunto de problemas tericos, metodolgicos y prcticos, que son precisos analizar con detalle, ya que su resolucin no slo determina el modelo de evaluacin a utilizar, sino tambin la conveniencia del proceso. Esta comunicacin intenta ayudar a comprender las dificultades que encierra el diseo de todo proceso evaluativo sobre centros educativos. Lo hace mostrando nuestro propio modelo de evaluacin, construido a medida que fuimos resolviendo los problemas que se nos plantearon en el diseo y desarrollo del Proyecto de Mejora de la Convivencia en el Colegio Marista Castilla de Palencia. Somos conscientes de que por razones de contexto resulta de una cierta incoherencia hablar de modelos de aplicacin general, pero creemos que puede ser muy til y servir de referencia a otros Centros.

Introduccin:

La Evaluacin de la Convivencia en un Centro Educativo es un proceso que permitir que los miembros de una institucin tomen conciencia de la situacin de la Convivencia y contribuyan a su transformacin. Es un instrumento de reflexin, comprensin y dilogo que supone describir y comunicar lo que sucede dentro del mismo en relacin a la Convivencia.

Las familias, el profesorado y el alumnado de cada Centro Educativo deber decidir, para qu? quiere evaluar la Convivencia en un Centro, puesto que el proceso de Evaluacin estar en funcin del objetivo que persigamos en ese sentido. Esta es la razn por la que los supuestos de los que parten estos estudios no son transferibles de una institucin a otra ni las estrategias utilizadas tampoco pueden ser generalizables1. En nuestro caso son los mismos interesados los que sentimos la necesidad de conocer la realidad de la Convivencia en nuestro Colegio, a fin de tomar las decisiones pertinentes.

De una parte, intentaremos concretar los criterios de referencia que sirvieron para iniciar todo el proceso de construccin del proyecto, estudiando los establecidos en otros Centros. Nos posicionaremos en la aplicacin del marco terico elegido, que ayude a la comprensin de los distintos problemas que encierra el diseo de todo proceso evaluativo sobre centros educativos. Precisaremos igualmente los aspectos metodolgicos y organizativos que se usaron derivados del marco de referencia. Y por ltimo a modo de conclusiones intentaremos encarar de la mejor forma posible el final de este recorrido. ______________________
1. Vase Mario DE MIGUEL DIAZ. La evaluacin de los Centros Educativos, Honorio SALMERN PREZ (ed), Evaluacin Educativa, Teora, metodologa y aplicaciones en reas de conocimiento. Granada, Grupo Editorial Universitario, 1997, pp 151-174.

Referencias.

Revisando campaas, jornadas, libros y publicaciones ms actuales que han abordado este complejo problema se constaban dos posturas claras. Unos centros acometan con sus propios recursos humanos y materiales la mejora de la convivencia y otros preferan integrarse en uno de los variados Programas de Actuacin Educativa que funcionan en algunas Comunidades Autnomas. La revisin nos proporcion una visin amplia de los diferentes programas de intervencin educativa2 que pretendan contribuir a mejorar la convivencia en los Centros. Se decidi seguir el mismo esquema en cuanto a caractersticas y desarrollo del programa Convivir es Vivir de la Comunidad de Madrid. Adems pudimos contar con la ayuda de dos de los ponentes en el Curso que se ofrecieron a asesorarnos en todo momento, sus nombres Juan Carlos Torrego Seijo profesor de la Universidad de Alcal de Henares y Francisco Villegas Snchez, coordinador del Programa Convivir es Vivir con gran experiencia en la aplicacin de programas de mejora en la Comunidad de Madrid. Nuestra intermediaria sera Marisol Infante asesora en su momento del Centro de Profesores y Recursos de Palencia, actual CFIE. ______________________
2. CONVIVIR ES VIVIR, campaa dirigida por la Direccin Provincial del Ministerio de Educacin y Ciencia (MEC) y patrocinada por la Delegacin del Gobierno en Madrid. Se pone en marcha con el inicio del curso 1997. PROGRAMAS DE EDUCACIN PARA LA TOLERANCIA Y PREVENCIN DE LA VIOLENCIA EN LOS JVENES, dirigida por M Jos Daz-Aguado, Catedrtica de Psicologa Evolutiva de la Universidad Complutense de Madrid (UCM) y patrocinada por el M de Trabajo y Asuntos Sociales (Instituto de la Juventud), el Ministerio de Educacin y Cultura y la UCM, esta campaa es el resultado del trabajo de investigacin-accin realizado desde 1994 hasta 1997. INTERVENCIN EDUCATIVA CONTRA LA VIOLENCIA EN EL MBITO ESCOLAR, dirigida por el ICE de la Universidad Autnoma de Barcelona y la Federacin de Enseanza de CC.OO. PROGRAMA EDUCATIVO DE PREVENCIN DEL MALTRATO ENTRE COMPAEROS, organizado por la Consejera de Educacin de la Comunidad Autnoma de Andaluca (modelo SAVE 1998). EDUCACIN PARA LA CONVIVENCIA, programa dirigido por Cruz Roja Juventud. PROGRAMA DE EDUCACIN SOCIAL Y AFECTIVA EN EL AULA, dirigido por el Departamento de Psicologa del Desarrollo y de la Educacin de la Universidad de Mlaga. PROGRAMA PARA TRABAJAR LA TOLERANCIA Y EL RESPETO A LA DIVERSIDAD EN EDUCACIN SECUNDARIA OBLIGATORIA a propuesta de la Asociacin Secretariado General Gitano (ASGG), con la colaboracin y cofinanciacin de la Comisin Europea y UNICEF.

Los asesores fueron facilitadores y dinamizadores de todo el proceso de evaluacin de la Convivencia. Tuvimos como referencia su extensa experiencia. No queramos con esta decisin tener a unos asesores que actuasen a modo de expertos infalibles, su ayuda se convirti en un acompaamiento en la reflexin crtica sobre la Convivencia en nuestro Colegio y en la bsqueda de soluciones ms adecuadas para nuestro contexto, y circunstancias. El proceso que se iba a iniciar deba construirse de forma singular y peculiar en funcin de las necesidades, intereses y sentimientos especficos del Colegio Marista Castilla, con una secuenciacin de pasos que se aplicaran de forma independiente y exclusiva a la de otros centros. No podamos depender de lo que se haca en otros centros ya que nuestra realidad poda no adaptarse a la de ellos.

Marco terico.

De sobra es sabido que todo procedimiento evaluador (y el proyecto de mejora de la convivencia lo es) se apoya sobre un marco terico explcito. Existen distintas aproximaciones y enfoques a la hora de abordar el tema de evaluacin de centros educativos. Concretar algunos conceptos tericos fundamentales sobre investigacin evaluativa3 nos permitir identificar la realidad que pretendemos evaluar y el enfoque o perspectiva desde el cual vamos a obtener, procesar, analizar e interpretar la informacin sobre Convivencia en el Colegio, por ello previo a la fase del diseo metodolgico, se hace necesario clarificar el marco terico. ________________________
3. En este sentido destacamos el trabajo de Mario DE MIGUEL DIAZ. La evaluacin...

De Miguel4 reduce todo a dos grandes bloques, los que enfatizan los resultados y los que enfatizan los procesos internos, y aunque dicen que este agrupamiento puede resultar algo reduccionista, resulta til, sobre todo ante la dicotoma de planteamientos de orientacin

sumativa y formativa, y para captar las diferencias entre la investigacin centrada en la eficacia escolar y la centrada en su mejora.

Una vez valorados los modelos de Evaluacin de centros educativos el punto de vista desde el cual vamos a obtener, procesar, analizar e interpretar la informacin sobre Convivencia en el Colegio se convierte en nuestro Modelo evaluativo de convivencia en el colegio marista castilla.

En investigacin evaluativa se trabaja habitualmente en un contexto de caso especfico, de caso nico, al que debe adecuarse, con lo que resulta de una cierta incoherencia hablar de modelos de aplicacin general. Construimos nuestro propio modelo de evaluacin a medida que fuimos resolviendo los problemas que se nos plantearon en el diseo y desarrollo de nuestro Plan.

En el cuadro siguiente exponemos cules son las caractersticas de nuestro propio modelo:

______________________
4. Mario DE MIGUEL DIAZ y otros. Evaluacin para la calidad de los institutos de educacin secundaria. Madrid, Escuela Espaola, 1994

1. Entendemos una evaluacin de la Convivencia como construccin de conocimientos. La evaluacin no solo detecta lo que est ocurriendo, sino que nos pone en situacin de qu es lo que necesitamos para mejorar.

2. Una evaluacin de la Convivencia intentando satisfacer las exigencias de las audiencias internas como de las externas y de los enfoques centrados en la eficacia y los relativos a la mejora. Esto es lo que Muoz5 denomina Calidad Total, entendida sta como un compromiso explcito de toda la Comunidad Educativa en relacin a educar para la Convivencia. 3. Una gestin para la calidad implica que, en cada momento, se plantee como un objetivo prioritario alcanzar el nivel ptimo de calidad en el Colegio. Y consideramos que la Convivencia es un rasgo caracterstico de consecucin de calidad. La Convivencia debe de ser una filosofa en la manera de enfocar el trabajo diario dentro del Colegio debe de plantearse como un objetivo prioritario en cada momento. Nuestro objetivo prioritario es que la convivencia se convierta en Cultura de Centro. 4. Abordamos la evaluacin de la Convivencia desde la posibilidad de mejorar el Colegio, de incidir en la transformacin y el cambio del Centro Educativo. 5. Entendemos el Colegio Marista Castilla como una organizacin en proceso de desarrollo en el que resulta primordial centrar el anlisis sobre los factores internos y externos que facilitan o impiden el desarrollo de la Convivencia escolar. 6. Una evaluacin en la que se tenga en cuenta las opiniones de todos-as sin juzgarlas, recopilando informacin a lo largo de todo el proceso. Hemos intentado partir de una visin global de la Convivencia a travs de los diferentes componentes del Centro educativo, lo que obliga a tener en cuenta las opiniones, valores, creencias y actitudes de todos los implicados en el Colegio. Visin holstica de la evaluacin. 7. La evaluacin es concebida como un proceso de comprensin y valoracin de los procesos y de los resultados. 8. Evaluar para buscar la mejora de la escuela, teniendo como objetivo averiguar aquellos aspectos del Colegio que deben mejorar y cmo pueden hacerlo. 9. La evaluacin tiene, pues, una funcin de control (controlando la eficacia o consecucin de los objetivos), diagnstica (de lo que se considera problemtico) y de intervencin (con el fin de lograr la mejora). 10. Se trata de desarrollar un programa de accin, partiendo de la idea que todo-as los implicados en el colegio podemos introducir cambios con el fin de mejorar la organizacin y funcionamiento del Colegio en relacin a la Convivencia.
_______________________ 5. J. M. MUOZ , Evaluacin y gestin de la calidad de los centros educativos, Teresa GONZALEZ RAMIREZ (coord), Evaluacin y Gestin de la calidad educativa: Un enfoque metodolgico. Archidona (Mlaga), Ediciones aljibe, 2000.

Aspectos metodolgicos y organizativos: Procedimientos, Estrategias, Tcnicas evaluacin, Instrumentos, Fases.

de

Se hace necesario identificar las caractersticas del procedimiento que utilizamos para evaluar la convivencia en el Colegio Marista. Ya hemos sealado que, para nosotros, la mejora como objetivo, es una condicin definitoria de toda investigacin evaluativa, sea cual sea el enfoque empleado. Proponemos un proceso de autorreflexin, autoevaluacin o autorrevisin de la Convivencia, sin descartar la ayuda de los asesores externos para comprobar su eficacia, lo que se denomina en investigacin evaluativa: Evaluacin o Autoevaluacin institucional6,

procedimiento que se convertir en la columna vertebral de nuestra evaluacin de la Convivencia.

Con la evaluacin institucional es posible detectar los niveles, las funciones, las actitudes, las relaciones o comportamientos que ponen de manifiesto dificultades, problemas, conflictos e irregularidades en relacin a la Convivencia. El estudio de los mismos nos permitir, tras decidir un orden de prioridades, la toma de decisiones para mejorarla.

_________________________ 6. A. MEDINA y A. BLANCO. La investigacin-accin en la autoevaluacin institucional, del libro, Jos CARDONA ANDUJAR (coord), Metodologa Innovadora de evaluacin de Centros Educativo. Madrid, Ed. Sanz y Torres, 1994. Los autores comentan que la autoevaluacin se plantea como un recurso ptimo de profesionalizacin y formacin docente en el marco de la investigacin-accin. La autoevaluacin tiene el potencial de mejorar el comportamiento pedaggico tal vez ms eficaz y rpidamente que cualquier otra tcnica conocida. Cuenta con el mayor nivel al que se puede aspirar de participacin y compromiso. Fomenta la autocrtica y el desarrollo personal puesto que se articula bajo caractersticas semejantes a la investigacin accin y como consecuencia promueve el desarrollo de una formacin continua.

Las ventajas de este enfoque tienen que ver sobre todo con la validez y la fiabilidad de los datos aportados y con la total implicacin de toda la Comunidad Educativa (es importante que sea asumido por todas las audiencias que confluyen en el Centro Escolar). Moreno y Torrego7 restan

importancia a estas variables, ya que para ellos lo realmente til es tomar conciencia de la importancia de la Convivencia, movilizar al Colegio. Para ambos autores la autoevaluacin, un procedimiento sistemtico y serio, slo tiene sentido si sirve para percibidos por los miembros de la comunidad escolar. No obstante, creemos que esas dos premisas de Fiabilidad y Validez se dan de sobra en nuestro proyecto de autoevaluacin de la Convivencia puesto que al seguir las premisas de Blndez 8 constatamos lo siguiente: resolver problemas

Fiabilidad interna

Contrastamos los datos con personas que no pertenezcan directamente al equipo de investigacin (padres, alumnos y otros docentes) invitando a otros investigadores (nuestros asesores), mostrndoles toda la informacin, etc. Elegimos adecuadamente los mtodos de recogida y anlisis de datos. Reunimos y ofrecemos la mayor cantidad posible de datos de la investigacin para que nuestra evaluacin sea digna de confianza. Hemos utilizado la triangulacin, ofreciendo diferentes perspectivas de los hechos (investigador principal, profesorado, alumnado, padres, observador externo).

Fiabilidad externa

Validez interna

Validez externa

Hemos descrito de la forma ms completa y exacta, el modo en que se ha actuado, as como las variables que han ido apareciendo, etc.

___________________
7. Juan Carlos TORREGO y Juan Manuel MORENO, Convivencia y disciplina en la escuela : el aprendizaje de la democracia. Madrid, Ed. Alianza , 2003. 8. Julia BLNDEZ ANGEL, La investigacin-accin: un reto para el profesorado: Gua prctica para grupos de trabajo, seminarios y equipos de investigacin. Barcelona, Ed. INDE, 1996.

Tcnicas, instrumentos de evaluacin y tratamiento de la informacin.

Decidido el modelo as como el procedimiento , es necesario recabar informacin, es decir, seleccionar las tcnicas que vamos a utilizar para la recogida y registro de la informacin.

Independientemente del paradigma en que nos movamos, es muy difcil utilizar slo tcnicas de una determinada metodologa para afrontar la evaluacin educativa. Habr que tener en cuenta que la realidad en la que vamos a intervenir (Centro Educativo), es bastante compleja9 y no puede comprenderse en su totalidad apoyndonos en una nica forma de proceder.

Nuestro modelo intenta combinar una opcin cuantitativa y una cualitativa en la evaluacin de la Convivencia en el Colegio. La utilizacin de una evaluacin cuantitativa y cualitativa se justifica en la lnea de lo que dice Ruiz10 por las siguientes razones:

A nivel metodolgico, no puede justificarse una dicotoma paradigmtica. Una evaluacin de centros precisa de tcnicas de recogida de datos, todo ello con cierto nivel de estandarizacin y objetividad, es decir con una evaluacin cuantitativa.

La dimensin social y humana de un centro educativo hace difcil la cuantificacin de ciertos aspectos, por lo que se necesita una evaluacin cualitativa que complete la objetividad y la estandarizacin de la evaluacin cuantitativa.

_______________
9. Juan Carlos TORREGO y Juan Manuel MORENO, Convivencia y .... La Convivencia es un tema sobre el que funcionan y planean los prejuicios, las experiencias personales previas, los estereotipos, etc. Pero, al fin y al cabo, todos estos elementos son precisamente los que estn en la raz de los conflictos de convivencia, y un ejercicio de autoevaluacin parece ser la nica manera de que vayan emergiendo a la luz pblica, hacindose por tanto abordables y susceptibles de transformacin en el futuro. 10. Jos Mara RUIZ RUIZ, Cmo hacer una evaluacin de centros educativos, Madrid, Ed. Narcea, 1996.

Las tcnicas que utilizamos para la autoevaluacin de la Convivencia en el Colegio Marista Castilla se dividieron en dos grandes grupos, siguiendo a Torrego y Moreno11 : Inductivas y Deductivas (que responden, en trminos generales, a las dos modalidades bsicas y tradicionales de la indagacin).

Es en este momento donde la labor de los asesores externos fue crucial a la hora de recomendar categoras de problemas y conflictos de convivencia en base a su extensa experiencia. Es decir nos aprovechamos de la sistematizacin de categoras realizadas en los Centros Educativos de la Comunidad de Madrid para desde ese conjunto de categoras recoger informacin en nuestro Colegio.

El Conjunto de Problemas y Preguntas fue aplicado en un principio a grupos muestra de profesores-as (Grupo Coordinador de Mejora de la Convivencia), de padres y madres (escuela de padres-madres del Colegio y coordinada en su da por la Universidad Popular de Palencia) y grupo de alumnos-as (consejos de aula de todos los cursos de la E.S.O). Esto nos permiti contrastar la claridad de las preguntas, la pertinencia de los aspectos incluidos, la adecuacin de las categoras propuestas por los asesores. Queramos conocer nuestra realidad para que las representaciones tericas de los problemas, necesidades y sentimientos en relacin a la Convivencia, fuesen ms adecuadas a nuestro propio contexto. Confirmamos las diferencias de visin entre los distintos actores de la comunidad escolar (familias, profesorado, alumnado). Con estas variables construimos cuestionarios con preguntas cerradas y abiertas, que pudieran contestar todas los sectores implicados en la Convivencia en el Colegio. ___________________
11. Juan Carlos TORREGO y Juan Manuel MORENO, Convivencia y ...

Tratamiento y anlisis de la informacin.

Se han descrito las distintas tcnicas de obtencin de informacin. Ahora bien, es necesario analizar esta informacin y convertirla en relevante. A la hora de analizar y tratar de interpretar la informacin recogida a travs de los cuestionarios es fundamental la fase de triangulacin. En la construccin compartida de la realidad que pretende nuestra autoevaluacin fue indispensable este procedimiento. Tratamos de dar mayor validez a nuestra investigacin, buscando la coincidencia plena de las observaciones. La informacin recabada se utiliz para establecer contrastes desde las diferentes perspectivas. Fue una triangulacin de sujetos contrastando los diferentes puntos de vista de padres-madres, profesores-as y alumnos-as. Se utiliz para apreciar acuerdos o desacuerdos y para precisar elementos que permitieran decidir sobre la credibilidad de la informacin obtenida. Cuando llegamos a nuestros propios resultados quisimos contrastar la informacin obtenida con nuestros asesores (triangulacin con expertos), para determinar coincidencias o discrepancias. Queramos ratificar la informacin obtenida, o discrepar y discutir los resultados pudiendo aclararse los resultados o someterse a nuevos anlisis, segn el criterio de los expertos. Despus de triangular la informacin de las encuestas y de tener en cuenta la opinin externa de nuestros asesores, se convocaron numerosas reuniones para intentar reflexionar sobre la situacin de Convivencia en el Colegio y tratar de mejorarla. No se trataba nicamente de describir la Convivencia sino de reflexionar en torno a ella para cambiarla hacia mejor.

A partir de la problemtica evaluada en alumnos, padres y profesores, se redact la primera lista de Medidas y soluciones consensuadas dando forma al Plan de actuacin. Fases del proyecto.

Un proceso de autoevaluacin, como el que se ha propuesto, orientado hacia la mejora de la Convivencia, requiere ajustarse a una planificacin que lo sistematice y apoyarse en una mnima estructura organizativa. Desde estas consideraciones, Muoz12 recoge en relacin a las fases a utilizar en metodologa de evaluacin, las siguientes:

Nevo (1996)

1. Focalizar el problema de evaluacin. 2. Recoger y analizar datos empricos. 3. Comunicar los resultados a las audiencias 1.Definicin del plan o diseo de evaluacin. 2. Recogida sistemtica de datos. 3. Anlisis de los datos recogidos. 4. Valoracin de la informacin obtenida. 5. Redaccin de las conclusiones. 6. Toma de decisiones. 1.Fase de planificacin/negociacin. 2. Aplicacin/autorrevisin. 3. Valoracin. 4. Elaboracin de programas de mejora y formacin. 5. Fase de seguimiento, revisin y reinicio.

Casanova (1992)

De Miguel (1994)

Nuestro proyecto est apoyado en la estructura organizativa propuesta por Villegas y Torrego13: 1. Creacin de condiciones. 2. Revisin de la Convivencia. 3. Planificacin. 4. Desarrollo y Seguimiento del Plan. 5. Evaluacin y propuestas de mejora. _____________________
12. J. M. MUOZ , Evaluacin y gestin de la calidad de los centros educativos, del libro, Teresa GONZALEZ RAMIREZ (coord), Evaluacin y Gestin de la calidad educativa: Un enfoque metodolgico. Archidona (Mlaga), Ediciones aljibe, 2000. 13. Juan Carlos TORREGO y Juan Manuel MORENO, Convivencia y ...

Conclusiones

No existe un camino nico para llegar a conocer la realidad de la Convivencia, para interpretarla, para explorarla. Hemos tratado de exponer nuestro proceder, pero nuestro mtodo no es exportable, cada Centro ha de determinar su plan de evaluacin, a partir de sus propias necesidades, diseando un plan de evaluacin de acuerdo a sus posibilidades de gestin, organizacin, participacin y colaboracin.

La construccin de un proceso de evaluacin de la Convivencia exige enfrentarse a problemas metodolgicos, tericos y prcticos. Intentar dar respuesta con rigurosidad y seriedad a estas cuestiones sirve para diagnosticar -y hacerlo bien- la Convivencia en un Centro. Esto que parece difcil no lo es tanto14.

Lo verdaderamente importante es reflexionar y debatir en relacin a la Convivencia en el Centro, ya que mientras se dialoga se comprende y al comprender se mejora.

La mejora es explicar, discutir, opinar, contrastar, criticar, consensuar, tomar decisiones, llegar a acuerdos, comprometerse, corresponsabilizarse, vigilar el cumplimiento de las

responsabilidades, implicarse. Para entender: qu est sucediendo?, por qu est sucediendo?, qu debe transformarse?, cmo interpretar los hechos?, cmo disear alternativas de accin?... ______________________
14. Siempre y cuando tengamos en cuenta que percibimos subjetivamente la realidad. Siempre habr una proyeccin de ideologas, de valores, de estereotipos... Es imprescindible por este hecho tomar en consideracin otros puntos de vista distintos al propio.

Lo complicado es encontrar respuestas a estas preguntas que continuamente nos plantea la evaluacin. Y para ello es absolutamente necesario e imprescindible contar con la participacin de todos los sectores implicados en la Convivencia de un Centro Escolar.

Se ha intentado hacer la evaluacin y hacerla bien, pero por encima de ello, lo ms importante para nosotros era que sirviera para algo y para alguien. Que sirviera para comprender lo que se estaba haciendo para mejorarlo. Que sirviera para dar respuesta a los intereses, necesidades y sentimientos de padres-madres, profesores-as y alumnos-as. Reconociendo, apreciando y valorando lo que esas personas pensaban, hacan y sentan en relacin a la Convivencia.

Evaluar la convivencia no es una tarea fcil exenta de problemas, pero creemos que es una tarea necesaria, que redundara en beneficio15 de todos los que conviven en un Centro Escolar.

_______________________
15. En nuestro caso ha significado entender el Colegio Marista Castilla como un ECOSISTEMA, como un todo interrelacionado, en donde cualquier cambio o modificacin en uno de sus elementos, repercute, modifica o transforma el resto. De hecho en estos momentos evaluar la Convivencia ha despertado en nosotros-as la sensibilidad para intentar reflexionar, dialogar, comprender y mejorar otros aspectos de la realidad del Centro.