Miguel Ángel Santos Guerra. (1992). Aula de Innovación Educativa. [Versión electrónica]. Revista Aula de Innovación
Educativa 6
Evaluar los centros escolares: exigencia y necesidad
Miguel Ángel Santos Guerra
Hay que evaluar los centros escolares
Se está extendiendo una nueva ola pedagógica sobre las estrategias de acción y de cambio en las escuelas. De ella se hace eco el pensamiento oficial, de ella hablan los documentos de los especialistas, sobre ella inciden los cursos de formación...
Me refiero al llamado
paradigma de la colegialidad. Paradigma que conlleva la ruptura del individualismo, la planificación conjunta, la reflexión compartida, la coordinación intensa, la acción colegiada. El Centro aparece como la unidad funcional de planificación, trabajo, innovación y evaluación. Ahora bien, este nuevo enfoque exige un contexto que permita llevarlo a cabo, unas condiciones de trabajo que faciliten su desarrollo y unas motivaciones que actúen sobre los profesionales para que sus convicciones no se conviertan en una contradicción viva y en una paradoja crispante. Proponer que los centros articulen su vida sobre proyectos compartidos, exigir que la acción tenga coherencia y cohesión, exige tiempo, motivos, estrategias, espacios y dinámicas de participación diferentes a los basados en la acción individualista. No basta un discurso convincente. Es preciso crear condiciones para que sea viable.
En la escuela sólo se hace evaluación del rendimiento del alumnado. El sentido descendente de la evaluación como criterio de contraste, de comprobación, de selección y de control se realiza sobre el estamento más frágil, más desvalido y jerárquicamente mas débil. Una parte del resultado del alumno se debe a factores que no tienen sus raíces en su esfuerzo, en su capacidad o en su motivación. Parte de sus resultados se deben a la naturaleza y contenido de los aprendizajes, a las condiciones, a la intervención del profesor. Pero, en la escuela, sólo se evalúa a los alumnos (Santos Guerra, 1988). El sistema vive de la evaluación que realiza y precisamente encuentra en el fracaso de algunos alumnos la base de su éxito. De su éxito como institución clasificadora.
Resulta evidente que la evaluación institucional es una exigencia que ha de formularse a la escuela desde las instancias democráticas que la albergan (Simons, 1988) y una necesidad que proviene de los interrogantes sobre la calidad de los servicios que presta. La evaluación es una garantía de la calidad (Casanova, 1922). Las instituciones escolares, sin embargo, perviven sin esa exigencia que se pregunta por su éxito. Es más, ni siquiera existe la necesidad de precisar en qué consiste el éxito (Santos Guerra, 1990), ya que la circunscripción del buen resultado a las calificaciones de los alumnos es un planteamiento tan falso como simplista. Los resultados académicos no constituyen el único indicador de la calidad. A veces, lo es de una selección sesgada de los alumnos o de un criterio benevolente en las calificaciones. Aunque no fuera así, habría que preguntarse por muchas otras cosas: Qué se aprende mientras se aprende, qué otras cosas podrían aprenderse, para qué sirve lo que se aprende, cuándo se olvida... El currículum oculto (Torres Santomé, 1991) de las escuelas, los efectos secundarios que en ella se consiguen, los aprendizajes larvados que se instalan en las rutinas, en las
relaciones, en las normas, en los escenarios... son objeto de una evaluación rica y enriquecedora.
Tres caminos hacia la evaluación del centro
Un sendero descendente
La evaluación del Centro puede llegar por tres sendas diferentes. Una de carácter descendente, que proviene de la decisión de agentes externos (responsables políticos, inspecciones técnicas, instancias sociales...). El uso de bienes públicos debe llevar aparejada la exigencia de su buena utilización, lo cual requiere no solamente la pregunta por el gasto del dinero en las correspondientes partidas, sino la eficacia de ese gasto en la consecución de lo que se pretendía. Y otras preguntas relativas a valores sociales: si esos destinatarios son los realmente más necesitados de esos bienes, si esas pretensiones son precisamente las más justas, si esos resultados son satisfactorios dados los medios empleados.
Esta evaluación se ha realizado algunas veces en las escuelas, con escaso rigor y con dudosa eficacia. En primer lugar, porque se ha hecho a través de instrumentos poco sensibles a la complejidad de los fenómenos que se pretendía evaluar.
En segundo lugar, porque no ha contado con la opinión de todos los estamentos participantes. En tercer lugar porque los resultados de esa evaluación no se han utilizado para conseguir una mejora.
Al ser una evaluación impuesta, los centros han permanecido de espaldas a ella. Sencillamente, la han padecido, la han soportado. No se han sentido partícipes de ella. Sobre todo cuando, después de un tiempo, ni siquiera han tenido noticias de los resultados. La evaluación ha sido un añadido, un elemento externo, ajeno a la vida del Centro, desconectado de su dinámica interna. No se han percibido los efectos de la evaluación en la mejora de las estructuras, en la facilitación de medios, en la mejora de las condiciones de trabajo, en la potenciación de las estrategias de formación del profesorado... A lo sumo, ha constituido un apoyo para exigir algo a algunos profesores. Aunque necesaria socialmente, no se ha realizado de una manera que facilite su auténtica finalidad de análisis, comprensión y ayuda para la mejora de la calidad.
Un sendero ascendente
El Centro, por su propia iniciativa, puede poner en marcha procesos de autoevaluación institucional (Martín, 1988). Cuando no existen iniciativas externas, cuando no es fácil disponer de evaluadores ajenos o cuando no se cuenta con medios para poder contratarlos, se pueden poner en marcha procesos de autoreflexión. Los protagonistas tienen en sus manos las claves del significado de lo que sucede en la escuela.
La reflexión informal que se realiza casi incesantemente, puede adquirir sistematización, rigor y formalización a través de los informes. La canalización de la opinión y la búsqueda de referencias extraídas de la realidad, permiten articular un debate consistente sobre la calidad del trabajo en la institución escolar. Todos evalúan el Centro, de una manera informal.
Los padres y madres valoran los resultados, la disciplina, la satisfacción de sus hijos en la escuela. Los profesores emiten opiniones acerca de la organización, del conocimiento y del papel de la escuela en la sociedad. Los alumnos comentan entre sí qué es lo que sienten y piensan respecto a lo que hacen en la escuela. Pues bien, la autoevaluación eleva estas opiniones a un plano distinto: las hace más rigurosas, más colegiadas y más aprovechables.
"Las condiciones críticas para el éxito en la autoevaluación, comparada con la evaluación por parte de inspectores o
consejeros, son la confidencialidad garantizada, la oportunidad de formar una relación de confianza con un igual y, dentro del clima creado por estas dos condiciones, un intercambio honrado."
(Mortimore, 1986).
No resulta fructífera la obligación de hacer esta tarea autorreflexiva por mandato externo. La llamada Memoria de Centro, que debe presentarse al finalizar el curso, tiene un marcado carácter burocrático y es considerada un trámite exigido por la Administración al profesorado. El sendero que se obliga a recorrer por decreto acaba convirtiéndose en un laberinto.
Un sendero en espiral
El que proponemos como camino más deseable, es el que combina la iniciativa interna del Centro con la ayuda de
evaluadores externos. Los facilitadores externos gozan de mayor independencia al estar menos implicados en la acción. No son ellos los que han de emitir el juicio sobre la calidad del funcionamiento del Centro. No sustituyen a los protagonistas de la acción en su valoración y análisis de la misma. No son ellos los que van a conseguir una mejora de las prácticas, de las actitudes y de los discursos de los profesionales. Sencillamente, les ayudan a realizar el análisis en mejores condiciones.
Esta evaluación, que tiene su origen en la decisión de la comunidad educativa tiene muy fáciles, casi inevitables conexiones con la comprensión y la mejora. La evaluación es una concreción de la profesionalidad. Si existe un deseo de poner en marcha la evaluación es porque existe una preocupación por la actividad del Centro, por la calidad de su trabajo, por sus estrategias de mejora. ha pretensión de la evaluación se arraiga en una pregunta muy sencilla: ¿Cómo podemos mejorar lo que estamos haciendo?
Lo pueden conseguir solos, ciertamente. Pero existen peligros en la autoevaluación que corrige la evaluación externa, entendida como un modo de facilitar la comprensión de los protagonistas. Un peligro está en el fuerte compromiso de los participantes, que podría llevarles a calificar de bueno en la evaluación aquello que consideran previamente bueno. Otro peligro es el inconsciente deseo de confirmar las teorías previas, desde el que se haría hablar a la realidad para que subrayase las creencias y las cuestiones apriorísticas de los profesionales. Otro, no menor aunque de diferente tipo, es la escasez de tiempo de profesorado y alumnado.
La comisión de evaluación puede estar formada por un equipo integrado por expertos, ajenos al centro, que garanticen la imparcialidad y la perspectiva independiente y por miembros del propio Centro.
La evaluación: dialogo, comprensión y mejora
La evaluación de los centros es un proceso de análisis que se apoya en el diálogo. Un diálogo entre los participantes, entre éstos y los evaluadores y entre los evaluadores y la sociedad. El diálogo presupone que no todos tienen el mismo juicio sobre el funcionamiento, sobre la calidad y sobre lo que se pretende y se consigue en el Centro. El diálogo se articula sobre actitudes de respeto y opiniones frecuentemente discrepantes. La evaluación se convierte así en una plataforma de participación que compromete a los protagonistas en la acción del Centro y a toda la sociedad, interesada en los procesos de educación que tienen lugar en las escuelas.
"Gracias al debate siempre es posible hacer progresos en lo que se refiere a crear una comprensión mutua de los conceptos éticos y sus interrelaciones dentro de un ideal de la buena vida. Pero la naturaleza esencialmente indefinible de "lo bueno" significa que jamás es posible erradicar por completo la divergencia de comprensión",
dice John Elliott (1986).
La evaluación es un fenómeno de sión. La comprensión exige una lectura atenta e inteligente de la realidad. Y unos códigos que desvelen el significado. Para llegar al núcleo del significado hace falta penetrar en las capas más profundas de la realidad ya que éste no se encuentra en la superficie de las cosas. La comprensión se hace desde unas perspectivas determinadas de comprensión. Perspectivas que tienen que ver con los valores. Tanto los procesos como los resultados han de ser interpretados a través del prisma de los valores.
Diálogo y comprensión están encaminados a la mejora de la realidad educativa del Centro. No se evalúa por evaluar. No se evalúa para producir conocimiento sobre las escuelas. La evaluación tiene conexiones con el cambio y la mejora. No es fácil definir el concepto de mejora, ya que tiene que ver con la esencia del proceso educativo. El aumento de las calificaciones, por sí mismo, no es identificable con la mejora. Es preciso comprobar la naturaleza de los contenidos de aprendizaje, los procesos evaluadores que asignan la calificación y, sobre todo, analizar qué características tiene el proceso de enseñanza y aprendizaje, con todo lo que este proceso conlleva de aprendizajes implícitos y de efectos secundarios. En cualquier caso, la evaluación nos permitiría acercarnos con mayor precisión a un concepto más afinado y democrático de mejora.
La evaluación del Centro tiene mucho que ver con el perfeccionamiento de los profesores. Porque la evaluación permitirá a los profesionales conocer críticamente el alcance educativo de su acción. Y desde esa comprensión surgirá un perfeccionamiento ajustado a la situación y fácilmente dirigible al cambio y a la transformación.
Las conexiones de la evaluación con la mejora del Centro han de ser estudiadas con sumo cuidado. Para entender por qué vías se pueden establecer. Y para que se hagan efectivas esas. vías en la práctica. Los efectos benefactores de la evaluación pueden ser anulados con facilidad:
1. Descalificando el proceso mismo de evaluación como poco científico o poco significativo.
2. Atribuyendo los resultados de la evaluación a diversas causas que eximen de tenerlos en cuenta.
3. Manipulando las conclusiones que puedan extraerse del proceso de evaluación.
Hay quien se opone a que se realicen evaluaciones institucionales. Los argumentos pueden ser de muy diversa naturaleza.
Algunos hay que tenerlos en cuenta, porque la evaluación no está exenta de problemas ni de contraindicaciones. Rod McDonald y Ernest Roe dicen que estos objetores
"Señalan el temor que los evaluadores no sean competentes o considerados, o que utilicen un criterio equivocado, o que las revisiones cuesten dinero y no sirvan para ningún propósito útil e, incluso, que puedan hacer daño. Las asociaciones del profesorado
(se refieren los autores a Australia) también están preocupadas porque podrían utilizarse las evaluaciones para empeorar la situación de los docentes..." (McDonald y Roe, 1991.)
El hecho de que existan estos riesgos no ha de impedir que se pongan en marcha evaluaciones, sino que se tenga sumo cuidado para hacerlas provechosas.
Diálogo, comprensión y mejora no son tres fases diacrónicamente consecutivas en el marco de la evaluación, sino que interactúan de diversos modos. Mientras se dialoga, se comprende; al comprender, se mejora; la mejoría es conseguir un mayor nivel de diálogo.
Las características de la evaluación
Un problema con el que frecuentemente tropezamos cuando hablamos y escribimos sobre evaluación es la polisemia del término. De la evaluación basada en indicadores de rendimiento (De Miguel y Otros, 1991) que tiende a elaborar clasificaciones de centros a la evaluación interna entendida como investigación cualitativa existe una gama muy amplia de conceptos. Referirse a todos ellos con el mismo término es un modo de generar confusión.
Para entender lo que decimos cuando aquí hablamos de evaluación, señalaré sus principales características:
1. Tiene en cuenta el contexto. Es decir, analiza lo que sucede en un centro que ha tenido una historia irrepetible y tiene un
ethos cultural único. Se trata de una evaluación que parte de las peculiaridades diacrónicas y sincrónicas del Centro.
2. Está atenta a los procesos y no sólo a los resultados. Los procesos y los resultados no son excluyentes ni
necesariamente contradictorios. Pero no se basa en la medición de la efectividad o en el contraste de esos resultados numéricos con los de otros Centros. (Reynolds, 1985.)
3. Da voz a los participantes en condiciones de libertad. Tiene en cuenta la opinión de los miembros de la comunidad educativa porque son ellos los que disponen de las claves interpretativas de lo que sucede en el Centro. Son miembros de la comunidad educativa el profesorado, los padres y las madres, el alumnado y el personal no docente.
4. Usa métodos diversos y suficientemente sensibles para captar la complejidad de los fenómenos que se producen en la escuela. Métodos diversos porque cada uno de ellos ofrece unas posibilidades de captación fiel de la realidad. No siempre coincide la información obtenida en la observación directa con lo que los informantes manifiestan en una entrevista. No siempre se asemeja el contenido de los documentos programáticos con la realidad que los desarrolla. Métodos que tengan capacidad de recoger la compleja vida del Centro en la que se entremezclan motivos, expectativas, valores, intereses, conocimientos, relaciones...
5. Está atenta a los valores, no circunscribiendo su preocupación a la búsqueda de indicadores de carácter técnico. Y está
abierta avalores, no sólo en el contenido de la evaluación, sino en el mismo proceso evaluador.
6. No convierte la complejidad en simplificaciones abusivas, a través de números y estadísticas. No porque éstos no puedan ser utilizados, sino porque no deben ser el único referente que exprese una realidad tan compleja y dinámica como es la vida de la escuela. La simplificación hace más fácil la comprensión, pero también más errónea e injusta.
7. Se realiza a partir de una negociación en la que esté garantizada la defensa de los intereses de toda la comunidad y no los de grupos determinados. (Kemmis, 1988). Los intereses espurios pueden aparecer en el mismo hecho de solicitar la evaluación. De ahí la importancia de que los evaluadores externos tengan en cuenta quién solicita y por qué solicita la evaluación. Adelman (1984) insiste en la necesidad de mantener la independencia de la evaluación frente a los intereses particulares.
8. Tiene un carácter estructural, ya que se preocupa por el Centro como unidad funcional. Estavisión holística ha de tener lugar, aunque se esté evaluando algún aspecto parcial del Centro, ya que solamente se podrá comprender plenamente ese fenómeno desde las influencias de todos los demás factores.
9. Se expresa, a través de los informes, en un lenguaje accesible a los destinatarios. Ylos destinatarios son los miembros de la comunidad educativa en cuestión, pero también otros posibles lectores interesados en la calidad de los procesos educativos. En este sentido, es preciso conjugar la confidencialidad de los informes con el derecho a saber de los ciudadanos acerca de la educación (Pring, 1984).
10.Es educativa, al menos, en dos sentidos: el primero, porque se ocupa del valor educativo de la acción escolar. El
segundo, porque ella misma pretende ser educativa al impulsar el diálogo, la participación y la reflexión compartida sobre la mejora.
11.Pretende ser una plataforma de participación y diálogo sobre la enseñanza y la educación. La evaluación democrática implica a todos los estamentos y personas implicadas e interesadas y se convierte en una palestra de análisis y de discusión en busca del valor auténticamente educativo.
12.Está comprometida con la sociedad, no sólo con el centro evaluado. Con la sociedad, ya que tiene en cuenta los
intereses de quienes no pueden recibir esos bienes y de quienes los reciben de forma empobrecida.
Esta evaluación (Angulo, Contreras, Santos, 1991), que podría calificarse al mismo tiempo de externa e interna, en cuanto que intervienen agentes externos para facilitar el proceso de autorreflexión, está guiada por principios democráticos. Y desde est perspectiva, echa sus raíces en la participación de los integrantes y en su conocimiento por parte de otros sectores de la sociedad afectados o interesados por los fenómenos de la educación.
Por eso no afecta solamente al Centro que es evaluado, sino que permite generar un conocimiento sobre las escuelas y aplicar procesos de transferibilidad a otras instituciones educativas de las mismas características.
Dificultades y estrategias de superación
Amenazan este tipo de evaluación diversos factores: la rutina que impide interrogarse sobre el alcance y el significado de lo que se hace; el simplismo, que convierte en innecesarias las preguntas y en molestas las complejidades; el individualismo, que circunscribe la acción educativa a la propia disciplina y al aula; la comodidad, que elude las preocupaciones y los esfuerzos sostenidos; la aceleración, que convierte lo urgente en importante; los temores, que hacen concebir la evaluación más como una amenaza que como una ayuda; la complejidad de los procesos educativos, que hacen igualmente compleja su evaluación; la falta de experiencia en estas lides, que hace concebir como algo peligrosamente novedoso e innecesario un proceso de evaluación...
Cualquiera de estos obstáculos sería suficiente para que se silenciase la necesidad de poner en marcha estos procesos de reflexión colegiada. Cuanto más difícil de superar será la influencia de todos los factores actuando simultáneamente. De ahí la importancia de crear condiciones en los centros para que sea posible e incluso fácil demandar o tomar la iniciativa de realizar la evaluación. Las condiciones se refieren al tamaño de los centros, a la configuración de las plantillas, a los tiempos destinados a estas tareas, a la formación de los profesores para que puedan abordarlas, a la consideración académica y profesional de quienes las ponen en marcha, a la facilitación de medios para quienes toman esta iniciativa...
Es importante empezar por pequeñas experiencias, en las situaciones y condiciones reales, sin esperar los momentos y las condiciones ideales que acaso nunca lleguen. Ahora bien, la Administración debería garantizar a quienes emprendan acciones de esta naturaleza que, por lo menos, no se van a sentir perjudicados. Y se sentirán cuando la política de la formación y de la meritocracia subraye realmente la importancia de otro tipo de acciones formativas.
Si solamente se hace hincapié en el discurso teórico sobre la naturaleza de la evaluación, en la problemática metodológica que tiene aparejada, en las exigencias éticas que conlleva, se habrá conseguido, en el mejor de los casos, llevar a la convicción a los profesores de lo interesante o importante que sería llevar a cabo procesos de evaluación en los centros. No es suficiente. Es incluso peligroso.
Hemos hablado de: Educación Centro escolar Evaluación
Bibliografía
Adelman, C. (1984): Understudy. Evaluator Seeks Authors to Discuss Ethics. En Adelman, C. (Ed.): The politics and Ethics
of Evaluation. London Croom Helm.
Cardona Andújar, J. (1991): "Un nuevo modelo de evaluación de Centros educativos". En A Distancia. Madrid.
Casanova, M. A. (1992): La evaluación, garantía de la calidad del Centro Educativo. Zaragoza, Edelvives, 1992.
de Miguel, M., y Otros (1991): La evaluación de las Instituciones Universitarias. Madrid. Consejo de Universidades.
Elliott, J. (1986): "Autoevaluación, desarrollo profesional y responsabilidad". En Galton, M., y Moon, B.: Cambiar la escuela,
cambiar el currículum. Barcelona, Martínez Roca.
Esteban Frades, S., Bueno Losada, J. (1988): Claves para transformar y evaluar los Centros. Madrid. Editorial Popular.
Kemmis, S. (1986): Seven Principles for Programme Evaluation in Curriculum Development and Innovation. En House, E.R.
(Ed.): New Directions in Educational Evaluation. London. The Falmer Press.
Martín, E. (1988): "Profesión docente y autoevaluación institucional". Revista de Educación, n.º 258.
Mcdonald, R., y Roe, E. (1991): "Evaluación de los Departamentos". En DE Miguel, M. y Otros: La Evaluación de las
Instituciones Universitarias. Madrid. Consejo de Universidades.
Pring, R. (l.984): "Confidentiality and the rightto know". En Murphy, R. y Torrence, H. (1988): Evaluating Education: Issues
and Methods. London. Paul Chapman Publishing.
Reynolds, D.(Edit.) (1985): Studing School Effectiveness. London, The Falmer Press.
Sabirón Sierra, F. (1990): Evaluación de Centros Docentes. Zaragoza, Central de Ediciones.
Santos Guerra, M. A. (1988): "Patología general de la evaluación educativa". Infancia y Aprendizaje, n.º 41.
Santos Guerra, M. A. (1990): Hacer visible lo cotidiano. Teoría y práctica de la evaluación cualitativa de Centros Escolares.
Madrid, Akal. Simons, H. (1988): Getting to Know Schools in a Democracy. London, Falmer Press.
Torres Santomé, X. (1991): El currículum oculto. Madrid, Morata.
