Beruflich Dokumente
Kultur Dokumente
1 Iniciativas educativas
HEZKUNTZA, UNIBERTSITATE
ETA IKERKETA SAILA
DEPARTAMENTO DE EDUCACIN,
UNIVERSIDADES E INVESTIGACIN
Vitoria-Gasteiz, 2003
RUL, Jess
Autoevaluacin del centro educativo : taller de evaluacin, modelo de gestin
evaluativa GE-Rs / Jess Rul y Nlida Zaitegi. 1 ed. Vitoria-Gasteiz : Eusko
Jaurlaritzaren Argitalpen Zerbitzu Nagusia = Servicio Central de Publicaciones del
Gobierno Vasco, 2003
p. ; cm. (Hezkuntza ekimenak = Iniciativas educativas ; 1)
Contiene, adems, con portada y paginacin propias, texto contrapuesto en euskera:
Ikastetxearen autoebaluazioa
ISBN 84-457-2061-9
1. Centros docentes-Evaluacin. I. Zaitegi, Nlida. II. Euskadi. Departamento de
Educacin, Universidades e Investigacin. III. Ttulo. IV. Ttulo (euskera). V. Serie.
373.012
Internet www.euskadi.net
Edita Eusko Jaurlaritzaren Argitalpen Zerbitzu Nagusia
Servicio Central de Publicaciones del Gobierno Vasco
Donostia-San Sebastin, 1 01010 VITORIA-GASTEIZ
Autores Jess Rul y Nlida Zaitegi
Fotocomposicin
e impresin Itxaropena, S.A. - Araba kalea, 45 - 20800 Zarautz
ISBN 84-457-2061-9
Depsito Legal S.S. - 1.514/03
Presentacin
En este esfuerzo las escuelas estn a veces maniatadas por dos tipos de dependencia. En
primer lugar el sistema genera dependencia en los centros educativos. El continuo flujo de
nuevas tareas y las interrupciones permanentes les obligan a limitar o eliminar respuestas contextualizadas. Muchas veces las demandas son no slo inconsistentes y fragmentarias sino que hasta las buenas ideas son rpidamente sustituidas a favor de la ltima
moda. En segundo lugar estn las teoras y estrategias que proponen soluciones instantneas que hay que seguir para estar al da, cuando sabemos que no hay soluciones externas para cambiar las situaciones complejas en las que nos encontramos.
En esta direccin la Administracin Educativa del Gobierno Vasco apuesta por establecer
condiciones, generar entusiasmo y facilitar los procesos que posibiliten el aprendizaje
colectivo de los centros y su desarrollo institucional. Partimos del convencimiento de que
la mejora en los resultados de aprendizaje y en el funcionamiento de los centros est en
manos de los protagonistas de la accin docente y discente, alumnado, profesorado y
familias y de las unidades singulares de intervencin educativa, los centros escolares. La
innovacin y el desarrollo en los centros no es algo hecho por los expertos y aceptado
pasivamente por los que tienen que llevarlo a la prctica. Es algo pensado y aplicado por
los protagonistas, con el apoyo apropiado y dentro de las prioridades legtimamente establecidas por la poltica educativa de las Administraciones Educativas. El progreso de las
escuelas se sustenta en su capacidad interna de mejora. Esta cultura se manifiesta, entre
otros, en tres aspectos que funcionan de modo interrelacionado:
Los procesos cclicos de evaluacin, planificacin, implementacin e institucionalizacin de las mejoras planteadas.
Un conjunto de tcnicas y estrategias que se utilizan para poner en marcha los
procesos anteriores.
La capacidad y disponibilidad para trabajar de modo sostenido y en colaboracin.
La evaluacin es una actividad bsica, generadora de otros procesos de mejora. Busca una
percepcin ajustada de lo que se hace y de lo que se consigue. Potencialmente sirve como
mejora y para la mejora. Antes de empezar a caminar nos dice dnde estamos la situacin de partida. Supone la aplicacin de procesos y tcnicas, dentro de una orientacin
colectiva. La evaluacin implica recoger informacin de modo sistemtico. La tarea principal consiste en decidir qu informacin es necesaria y cmo se puede recoger. La toma
de decisiones basada en una informacin rigurosa supera con creces a aquella que se hace
con limitado conocimiento de la situacin. La informacin ayuda a la organizacin escolar a ser ms inteligente, a resolver sus problemas con mayor eficacia y satisfaccin. La
competencia individual se multiplica en un contexto social que permite y estimula que las
personas aprendan unas de otras y propicia la interaccin entre los profesionales, desarrollando la inteligencia colectiva. Las escuelas se convierten en organizaciones que dan
respuesta a sus problemas mediante la generacin y el uso de nuevos conocimientos. Las
buenas herramientas nos ayudan en este propsito. Las escuelas que aprenden se caracterizan por contar con un amplio repertorio de herramientas sencillas de evaluacin, por
saber seleccionar las ms pertinentes en cada momento y por hacer un uso adecuado de
las mismas.
Presento con satisfaccin en esta ocasin un instrumento sencillo y especfico de autoevaluacin para los centros educativos, TALLER DE EVALUACIN. El libro propone la transformacin de los centros educativos en organizaciones inteligentes, convirtiendo la informacin sistemtica sobre el propio centro en conocimiento colectivo. El modelo, que cuenta
con una rigurosa base conceptual, propone el recorrido por las distintas fases de la autoevaluacin aportando tcnicas y herramientas concretas. Acaba con ejemplificaciones
realizadas por los protagonistas de los centros escolares de Catalua y Euskadi. Cuando la
iniciativa es de la propia comunidad escolar, existen muchas posibilidades de partir en
buenas condiciones puesto que se convierte en una actividad deseada, asumida y beneficiosa.
Felicito a sus autores y agradezco de antemano su esfuerzo y dedicacin para la mejora y
calidad del sistema educativo vasco.
Octubre de 2003
Abel Ariznabarreta Zubero
Viceconsejero de Educacin
ndice
INTRODUCCIN
. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14
. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 21
55
74
79
92
EL DESARROLLO DE LA EVALUACIN . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 96
PRODUCCIN DE INFORMACIN EVALUATIVA . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 97
Concepto . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 97
Caractersticas . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 98
Estructura formal . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 101
JUICIOS DE VALOR E INFORME EVALUATIVO . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 105
Los juicios de valor . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 107
El informe evaluativo . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 110
LA METAEVALUACIN . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 118
FACTORES DEL ANLISIS METAEVALUATIVO . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 121
CONTEXTUALIZACIN DE LA EVALUACIN . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 123
Estrategia evaluativa situada en la zona conocida . . . . . . . . . . . . . . . . . . . . . . . . . . . . 126
Estrategia evaluativa situada entre la zona conocida y la desconocida . . . . . . . . . 127
Estrategia evaluativa situada en la zona desconocida . . . . . . . . . . . . . . . . . . . . . . . . 128
. . . . . . . . . . . . . . . . . . . . . . . . . . 144
Introduccin
15
c) Con relacin a la accin evaluativa: Adecuacin y proporcin de la accin evaluativa en su conjunto. Relacin eficiente entre las tres partes bsicas: estrategia objeto y objetivos, instrumentos informacin evaluativa, y juicios de
valor conocimiento aadido sobre el objeto.
Superacin de la desproporcin endmica de la mayora de los trabajos evaluativos entre
objetos muy amplios por ejemplo: la evaluacin del centro educativo como un todo, la
evaluacin de todo un sistema educativo, etc. y la precariedad instrumental que exhiben,
especialmente, para enjuiciar tales objetos.
Para ello, es necesario ir profundizando en tres factores:
a) Aprender el concepto y funcin de la evaluacin, al tiempo que se desarrollan
capacidades tcnicas (elaboracin y aplicacin de diseos evaluativos) y habilidades sociales (participacin en los procesos de informacin-conocimiento, compartir valores, etc.).
16
Introduccin
17
Evaluacin:
funcin y concepto
19
LA EVALUACIN SE BASA EN LA CAPACIDAD VALORATIVA HUMANA
La funcin evaluativa se fundamenta en la capacidad de las personas para juzgar hechos
y acontecimientos. Los humanos tenemos la capacidad de juzgar el valor que nos merece
el conjunto de acciones que se desarrollan en un proceso dado. Las valoraciones que constantemente hacemos en nuestra vida personal y profesional expresan esta capacidad. En
las valoraciones que expresamos intervienen muchos factores -explcitos e implcitoscomo por ejemplo la personalidad, los intereses, las motivaciones, las expectativas, la
A comienzos del siglo XXI encontramos tres posiciones bsicas sobre evaluacin:
a) el escepticismo que niega la posibilidad de la evaluacin; es decir, no es posible ir ms all del subjetivismo de la opinin, de ah la proliferacin de cuestionarios para recoger y estandarizar valoraciones
b) el acreditacionismo o elitismo. Esta prctica evaluativa (pseudoevaluativa) es utilizada profusamente por
instituciones y personas investidas de autoridad para acrecitar, homologar y sancionar. Sus juicios de valor
suelen justificarse mediante determinados estadsticos, ms o menos rigurosos pero simplistas, o el uso de
prcticas pretendidamente evaluativas como instrumentos para legitimar polticas e intereses. Se fundamenta en la consideracin de que la realidad de las cosas, su valor y adecuacin depende del criterio de
autoridad
c) el demarcacionismo que afirma la posibilidad de la evaluacin siempre que esta actividad se ajuste a determinados criterios racionales que hay que especificar a priori (demarcacin).
situacin del momento, etc. En consecuencia, estas valoraciones tienen una fuerte carga
de subjetividad, enmarcadas por factores personales, emocionales, situacionales, culturales, etc.
En las interacciones sociales como la comunicacin, el dilogo, la discusin, la crtica,
etc. se expresan valoraciones en forma de opiniones, creencias, suposiciones y mitos.
Muchas de las decisiones que se adoptan estn precedidas por valoraciones que vienen
a fundamentarlas o justificarlas. La ciencia sociolgica recoge y estandariza las opiniones de muestras ms o menos significativas de determinadas poblaciones sobre temas
diversos con la finalidad de conocer determinadas tendencias sociales sobre poltica,
cultura, costumbres, etc.
20
La funcin evaluativa parte de las valoraciones, pero va ms all. Hay evaluacin cuando
el juicio de valor emitido se fundamenta en datos y en informaciones rigurosas. La evaluacin es un proceso de transformacin de los juicios subjetivos en juicios de valor ajustados a la informacin objetivada disponible sobre un determinado tema o cuestin que
denominamos objeto de evaluacin.
As pues, el desarrollo de la funcin evaluativa expresa el salto cualitativo de la valoracin a la evaluacin. Esta puede ser individual y/o grupal. La primera es el juicio de valor
que expresa una persona cuando previamente ha buscado y obtenido informacin y datos,
por ejemplo, el mdico que antes de emitir un diagnstico -juicio de valor- obtiene informacin sobre el paciente -dilogo, observacin, analtica, etc.-, con el fin de que el diagnstico est fundamentado en la informacin. La segunda corresponde a los procesos de
intersubjetividad, es decir, cuando a travs del dilogo evaluativo, centrado en el estudio
y la caracterizacin de informaciones suministradas por el proceso evaluativo, diversas
personas pueden llegar a compartir juicios de valor.
En consecuencia, el tema central de la evaluacin es el valor que en cada caso concreto
atribuimos al conocimiento disponible a travs de la interpretacin de la informacin y la
comunicacin entre personas.
En resumen: la evaluacin est formada por el conocimiento de la realidad evaluada
(datos e informacin), por las opiniones (valoraciones), pero, sobre todo, por el juicio evaluativo ajustado y fundamentado en los datos objetivados y rigurosos (evaluacin).
21
Valorar es apreciar, determinar, expresar, e incluso, prever el valor de algo. Toda valoracin es un juicio subjetivo sobre alguna cosa, en el que interviene la experiencia previa, la
situacin y los intereses del sujeto que valora. Es una capacidad prctica que funciona
como un trampoln cognoscitivo que nos permite hacer nuestra la realidad valorada:
autoafirmacin, control de las situaciones, gua de la conducta, etc. La valoracin es un
sistema til y eficaz de conocimiento personal, pero la experiencia evidencia que muchas
valoraciones estn condicionadas por la inmediatez del momento, los intereses de quien
las expresa, la insuficiencia de informacin, el error, etc., constituyendo un modo precario y poco ptimo de conocimiento objetivado e interpersonal.
Medir es determinar la cantidad de una magnitud por comparacin con otra que se toma
como unidad.
22
La medicin supone una acotacin de la capacidad valorativa. En efecto, las diferencias de percepcin entre diversos sujetos sobre la cuantificacin de una determinada
magnitud hall feliz solucin con el establecimiento y adopcin de unidades de medida. Por ejemplo, dos personas estn discutiendo ante un muro intentando indicar el
nmero de metros que tiene. La respuesta al problema no pasa por la discusin (valoracin) sino por la medicin. Primero procede medir con un metro y valorar despus a
partir del dato.
Ahora bien, slo determinadas realidades son susceptibles de medicin. La determinacin
de unidades de medida puede hacerse, en unos casos, por convencin, como la adopcin
del metro para medir distancias y, en otros casos, mediante complejos procedimientos de
validacin y fiabilidad, de manera que la unidad de medida sea significativa respecto de
la realidad a medir, por ejemplo, la elaboracin de un test para medir la inteligencia.
Evaluar es atribuir valores a hechos, pero fundamentados en datos e informaciones. As
pues, la evaluacin es una valoracin cualificada por la informacin.
En consecuencia, evaluar supone la creacin o construccin de valores ajustados a los
datos e informaciones objetivadas sobre determinados objetos.
Resumiendo: la valoracin es una forma prctica de conocimiento, aunque subjetivo, parcial y proclive al error. La necesidad de objetivacin del conocimiento encuentra aproximaciones de solucin en la medicin y la evaluacin. La primera, para las realidades especficas susceptibles de medicin y, la segunda, ms general, para las realidades descriptibles, es decir, las realidades sobre las que se pueda generar informacin objetivable ms
all de la medicin.
SUBJETIVIDAD VALORACIN
OBJETIVACIN MEDICIN
EVALUACIN
EVALUACIN
MEDICIN
23
24
Demarcacin de la evaluacin
La evaluacin con los condicionantes y los descriptores indicados es una sistemtica cientfica en el mbito de las Ciencias Sociales que procura entender y comprender las realidades,
los hechos y los fenmenos evaluados a travs de un proceso metdico de comunicacin entre
individuos, desvelando un saber que resulta eficaz a la prctica.
Lo especfico de la evaluacin como Ciencia Social es:
a) la generacin de informacin objetivada sobre determinados objetos evaluables, esto
es descriptibles y,
b) la atribucin de juicios de valor ajustados a la informacin inmediata generada sobre
el objeto de evaluacin a partir del conocimiento disponible sobre el objeto (informacin mediata).
Ejemplos de evaluacin son el diagnstico sistemtico en Medicina o la probacin rigurosa de los
hechos en Derecho.
CUADRO 1. Demarcacin de la evaluacin como actividad cientfica.
As pues, proponemos que la evaluacin sea entendida y gestionada como un fenmeno de conocimiento no limitado a la medicin ni a la valoracin, y acotada con los descriptores siguientes de demarcacin epistmica:
25
FACTORES
INFORMACIN - CONOCIMIENTO
FENOMNICO MEDIATO
26
FENOMNICO INMEDIATO
AXIOLGICO INMEDIATO
DESARROLLO EVALUATIVO
-Conocimiento estratgico:
-Conocimiento evaluativo:
a) Objeto
b) Objetivos
Factores que
componen el
modelo
GE-Rs
- Conocimiento instrumental:
c) Instrumentos
d) Recursos
e) Produccin de informacin:
- Aplicacin de los instrumentos evaluativos.
- Procesamiento de la
informacin.
- Interpretacin de la
informacin.
f) Creacin de juicios de
valor e informes:
- Ponderacin de la
informacin individual
y/o intersubjetiva.
- Emisin de juicios de
valor ajustados a la
informacin.
- Expresin escrita de
los juicios de valor en
un informe.
- Formulacin de propuestas adecuadas al
objeto evaluado y al
contexto.
Plano formal
PLANIFICACIN
Previsin
Organizacin
EVALUACIN
Significacin
Valor y sentido
DESARROLLO
Accin intencional
Plano real
27
FUNCIONES ESPECFICAS
Incrementar el conocimiento prctico sobre la realidad evaluada
Dentro del proceso de gestin evaluativa se logra a travs de dos factores:
a) La elaboracin de diseos evaluativos a partir del conocimiento disponible proporcionado por la investigacin y/o la experiencia contrastada sobre el tema evaluado, especialmente los objetivos y los instrumentos de evaluacin.
b) La obtencin de informacin directa sobre la realidad evaluada mediante la aplicacin de los instrumentos de evaluacin contenidos en el diseo evaluativo, y el
posterior procesamiento de la informacin.
28
FUNCIONES DERIVADAS
Orientar la adopcin de decisiones personales y grupales a partir de la informacin
evaluativa
Como sabemos la evaluacin proporciona datos e informacin sobre la realidad evaluada;
aporta conocimiento sobre las acciones relacionadas con el objeto de evaluacin. Cuando
este conocimiento es utilizado como recurso para guiar las acciones sucesivas cumple una
funcin de retroalimentacin, es decir, de correccin (retroalimentacin negativa), o de
refuerzo (retroalimentacin positiva). La informacin evaluativa al evidenciar aspectos y
relaciones inditas, no inmediatamente evidentes en el horizonte de sucesos de los actores, puede inspirar estrategias de accin nuevas y ms efectivas. De esta manera la evaluacin deviene un potente recurso de orientacin de las decisiones personales e institucionales aportando significacin, valor y sentido.
29
El desarrollo de una cultura evaluativa en los centros, aunque lento como todos los procesos, requiere decididos apoyos externos. Uno de ellos es la formacin para desarrollar
capacidades de autoevaluacin dirigida a los equipos directivos y al profesorado, as como
el apoyo de consulta externa en relacin a aspectos especficos de la evaluacin a los que
puedan contribuir especialistas externos sin quitar el protagonismo a los agentes internos.
Apoyo externo que puede darse en forma de reuniones de coordinacin con otros centros
docentes para compartir experiencias y finalmente apoyo administrativo que permita
adquirir los recursos necesarios y disponer del tiempo suficiente para realizar la autoevaluacin. (San Fabin, J.L. 1996).
Para que la autoevaluacin contribuya al aprendizaje es preciso mantener una actitud
permanente de autocrtica. La prctica de una cooperacin crtica es la base de la autoevaluacin institucional. El proceso es exigente pero los cambios que se producen mediante un sistema de autoevaluacin tienen ms probabilidades de mantenerse que los inducidos desde fuera.
El desarrollo de procesos de gestin evaluativa supone un reto para las instituciones con
repercusiones personales. Las organizaciones de todo tipo que incorporan la evaluacin en
el funcionamiento interno se dan una oportunidad de autonoma en el anlisis y ponderacin de las tareas institucionales ms significativas, en la verificacin del desempeo de
las responsabilidades, as como en el nivel de logro de las metas propuestas.
QU EVALUACIN?
Muchas son las potencialidades de la evaluacin externa y el hecho de hacer referencia a
las ventajas de la evaluacin interna no significa optar nicamente por ella. Tomando
como referencia los movimientos de eficacia y mejora de la escuela y desde su complementariedad, la evaluacin tendra que conjugar por una parte la eficacia, dando cuenta
tanto de la eficiencia en los recursos como de la eficacia en el logro de los resultados; por
otra, la mejora, sirviendo como proceso de conocimiento y optimizacin de la propia
organizacin.
De esta forma, la necesidad para un centro sostenido con fondos pblicos de dar cuenta
de sus propios resultados se combina con rendirse cuenta a s misma de sus propios avances, para tener datos sobre sus puntos fuertes y dbiles que posibilite una toma de decisiones para la mejora institucional (Bolivar, 2001).
Por ello, la evaluacin interna, no ha de entenderse como antnimo de evaluacin externa, puesto que puede, y es deseable, darse una combinacin de ambas. Como seala David
31
Nevo (1997:167) Si la evaluacin de un centro es interna y externa a la vez, se convierte en un dilogo para la mejora en vez de acusaciones externas y defensiva interna.
Con el fin de optimizar ambos enfoques, ser necesario establecer un dilogo que produzca un mejor conocimiento de la institucin. La comunicacin que se ha de establecer
entre los evaluadores externos y la institucin demanda que sta haya realizado procesos
de evaluacin interna y pueda entablarse un dilogo rico y constructivo. De no ser as no
ser posible que la evaluacin externa pueda incidir significativamente en la mejora de la
institucin y ser percibida fundamentalmente como control.
La evaluacin tiene una funcin especfica de generacin de conocimiento prctico que
resulta necesario para la orientacin de las decisiones comunicativas y transformacionales
de las instituciones escolares, y que funciona como un recurso que retroalimenta las acciones evaluadas con informacin-conocimiento, aportando significacin, valor y sentido. Por
todo ello, es un recurso importante de creacin cultural y aprendizaje de las instituciones.
32
El profesorado encuentra en la evaluacin una excelente oportunidad de formacin y perfeccionamiento. El anlisis de la informacin, la reflexin que requiere el hacer un juicio
fundamentado lleva a la comprensin de la naturaleza y sentido de la prctica educativa
y permite construir conjuntamente las concepciones que sobre ella se manejan, lo que
lleva a su optimizacin.
Para que una evaluacin interna sea beneficiosa para el centro y el profesorado, el control del proceso evaluativo, y sobre todo la realizacin de los juicios de valor, ha de estar
en manos de las personas evaluadas que construyen as conocimiento compartido sobre
el objeto evaluado.
La combinacin de la evaluacin interna/externa que da lugar a un dilogo constructivo
posibilita una mayor comprensin mayor de la escuela.
Santos Guerra (1996) seala que ha de estar presidida por unas reglas ticas que garanticen el respeto a las personas, la confidencialidad de los informes, el anonimato de los
evaluados y la privacidad de los profesionales. Respeto para los que estn involucrados en
ella o pueden verse afectados por las consecuencias.
La realidad, los procesos que se dan en los centros son complejos, por ello se han de utilizar mtodos sensibles para captar la complejidad, diversos para garantizar el rigor y
adaptados a un contexto escolar concreto.
En todo caso, el centro que se autoevala ha de responsabilizarse de las consecuencias de
la evaluacin y de su uso para tomar las decisiones necesarias encaminadas hacia la mejora de la escuela.
La puesta en prctica de la evaluacin interna requiere algunas acciones concretas para
garantizar el xito de las mismas como dejar de quejarse de lo malas que son las evaluaciones y comenzar a ponerlas en prctica y mejorarlas. As mismo, dejar de ser receptores
pasivos de las descripciones y juicios de la evaluacin y participar activamente en ella,
aportando visiones y puntos de vista fundamentados.
Antes de iniciarla es necesario sensibilizar a la comunidad educativa, sobre todo al profesorado, sobre la necesidad y las potencialidades de la evaluacin para la mejora. Despus,
un contexto organizativo adecuado: Querer, actitudes abiertas, flexibles y positivas en
relacin con el proceso evaluativo que se pretende iniciar. Saber, formacin bsica para
abordarla con garantas de xito. Poder, recursos organizativos, humanos y materiales.
La fase de planificacin del proceso y del diseo evaluativo requieren un esfuerzo que se
rentabiliza posteriormente. Durante todo el tiempo en que se lleve a cabo la evaluacin
se ha de contar con espacios de participacin, reuniones evaluativas, para el anlisis de la
informacin y creacin de juicios de valor compartidos.
33
34
El modelo
autoevaluativo
GE-Rs
En este captulo se describe de una forma global el modelo evaluativo que se propone
especificando los factores que lo componen. Se trata, como veremos, de un modelo de
gestin evaluativa ordenada en las tres fases lgicas del proceso de gestin: planificacin,
desarrollo y metaevaluacin. Tambin se simboliza el modelo evaluativo mediante la utilizacin de una metfora: la de los tres espejos.
En los captulos siguientes se analizan con detalle estas tres fases del proceso de gestin
evaluativa con abundantes recursos y ejemplos en coherencia con la idea de taller que justifica esta obra.
Finalmente se ejemplifica el modelo mediante dos diseos evaluativos elaborados a partir
de objetos con una clara significacin en el mundo de la educacin, y siguiendo las pautas del modelo por lo que respecta a los aspectos formales y tecnolgicos.
37
DESCRIPCIN GENERAL DEL MODELO EVALUATIVO GE-Rs
El modelo autoevaluativo GE-Rs es un procedimiento sistemtico de gestin evaluativa
simplificado y adaptado a las peculiaridades de la evaluacin interna de las organizaciones.
Este procedimiento se ordena en tres fases:
a) Planificacin. Preparacin de la accin evaluativa que suele concretarse en un
diseo evaluativo que, normalmente, es previo al desarrollo evaluativo.
b) Desarrollo. Aplicacin de las previsiones evaluativas.
c) Metaevaluacin. Anlisis crtico de la evaluacin desarrollada.
gracin de dos elementos fundamentales: la ideacin estratgica, esto es, concretar las
intencionalidades evaluativas mediante la pregunta: Qu queremos evaluar?, y su correspondiente instrumentalizacin para obtener los datos e informaciones que satisfagan las
intencionalidades de la evaluacin. Las preguntas, Cmo lograremos las intencionalidades evaluativas?, y Con qu medios..? vendran a resumir las cuestiones fundamentales
de la instrumentalizacin evaluativa.
En consecuencia, podemos decir que la planificacin evaluativa est formada, bsicamente, por dos factores interrelacionados:
a) Estrategia evaluativa. Supone y comporta idear y relacionar dos elementos:
El objeto de evaluacin. Determinacin y concrecin del tema que ha de ser evaluado debido a su relevancia e inters.
Los objetivos de evaluacin. Formulacin de las metas evaluativas que se pretenden del objeto de evaluacin.
b) Instrumentacin evaluativa. Integra dos elementos:
38
Informacin
Hecho o fenmeno
relevante
OBJETIVOS
Cuestiones priorizadas
del objeto
INSTRUMENTOS
Dispositivos para
recoger informacin
RECURSOS
A.
Estrategia
evaluativa
B.
Instrumentacin
evaluativa:
39
FIGURA 1. Factores que componen el modelo de diseo autoevaluativo DE-Rs.
c) La oportunidad de la accin evaluativa con relacin a las necesidades institucionales y al clima de trabajo existente.
Asimismo, durante la planificacin habr que considerar el perfil de los evaluadores y
participantes. En cualquier caso es necesario garantizar la competencia de los evaluadores con relacin al tema evaluado y en la gestin evaluativa; habr que prever posibles asesoramientos especializados y procurar, especialmente, la representatividad de
los participantes en la evaluacin que proporcionen una informacin veraz, significativa y plural.
En el captulo tercero se estudia el proceso de elaboracin de diseos evaluativos; se
propone el modelo de diseo autoevaluativo DE-Rs, y se analizan con detalle y profusin de recursos los cuatro factores que lo componen en un formato prctico de taller.
En el captulo sexto se ofrecen ejemplos aplicados de planificacin evaluativa segn el
modelo DE-Rs.
EL DESARROLLO EVALUATIVO
El desarrollo de la evaluacin es la aplicacin, en tiempo y forma, de la planificacin evaluativa, previamente diseada, activando las funciones, habilidades e interacciones que
permitan lograr las intencionalidades evaluativas.
El desarrollo de la evaluacin variar segn la tipologa de la evaluacin, las personas
implicadas, etc. En cualquier caso, el desarrollo de la evaluacin ha de responder a requerimientos tcnicos y, tambin, sociales. Es decir, los procesos de aplicacin evaluativa han
de ser coherentes con las caractersticas tcnicas y metodolgicas de la planificacin y, al
mismo tiempo, ser sensibles a las caractersticas de las instituciones donde operan, as
como a los ritmos y caractersticas diferenciales de los grupos y de las personas. No hay
que olvidar que la evaluacin es un proceso de comunicacin, orientado a la generacin
de informacin rigurosa para la creacin de valores significativos, con relacin a objetos
cualitativamente relevantes con finalidades de ampliacin del conocimiento disponible, de
orientacin de las decisiones optimizadoras, y de participacin en valores compartidos.
Desde un punto de vista tcnico las operaciones bsicas del desarrollo de la accin evaluativa son:
40
Produccin de informacin evaluativa
Distinguimos tres momentos:
a. Aplicacin de los instrumentos de evaluacin en coherencia con las opciones metodolgicas adoptadas -explcita o implcitamente- en el diseo evaluativo. Recogida
de la informacin evaluativa.
b. Procesamiento de la informacin evaluativa, cualitativa y/o cuantitativa. Habr
que utilizar tcnicas cuantitativas, como estadsticos descriptivos, o tcnicas cualitativas, como matrices descriptivas, sistemas de categoras, etc., segn el carcter de cada instrumento. Sobre estas cuestiones remitimos al lector a la consulta
de la literatura especializada.
c. Resumen de la informacin evaluativa procesada en una sntesis, es decir, mediante un breve resumen descriptivo de los datos suministrados por los instrumentos
procesados, por ejemplo los resultados de pruebas, estadsticos, pautas de observacin, cuestionarios, interacciones, etc.
41
42
1.
Conocimiento
de la
informacin
generada sobre
el objeto de
evaluacin
2.
Expresin de
juicios de valor
ajustados a la
informacin
3.
Formulacin de
propuestas
razonables
y posibles
43
C.
Desarrollo
evaluativo:
PRODUCCIN
INFORMACIN EVALUATIVA
Aplicacin instrumentos
Procesamiento informacin
JUICIOS DE VALOR
E INFORME
La cuarta parte del libro contiene los elementos necesarios para aprender en forma de
taller a producir la informacin evaluativa a partir de los instumentos, a elaborar juicios de valor y a formalizar informes evaluativos.
LA METAEVALUACIN
La metaevaluacin es la crtica de la evaluacin desarrollada con el fin de identificar sus
puntos fuertes y dbiles.
44
Las acciones metaevaluativas son importantes para orientar la propia accin evaluativa
corrigiendo los posibles errores y desviaciones.
Se trata de mirar retrospectivamente la accin evaluativa desarrollada con el fin de enjuiciar sus aciertos y errores con una intencionalidad claramente retroalimentadora de ulteriores procesos evaluativos.
En toda accin metaevaluativa podemos distinguir los siguientes elementos:
Aspectos a considerar
Elementos susceptibles de anlisis y crtica del proceso de gestin evaluativa, incluyendo
tanto los tcnicos como los sociales. Se citan algunos:
a)
b)
c)
d)
Agentes metaevaluadores
Personas que se pronuncian sobre la avaluacin desarrollada en base a su implicacin,
conocimiento o inters. Pueden ser agentes internos al propio proceso evaluativo o externos. stos pueden ser pertenecientes a la misma institucin, pero no han participado
directamente en la accin evaluativa o externos a la misma.
a) Internos al proceso evaluativo: evaluadores y participantes.
b) Externos al proceso evaluativo: de la misma institucin, como directivos o profesionales, o ajenos a la institucin, como expertos en evaluacin o especialistas en
el tema evaluado.
45
Una determinada accin metaevaluativa puede abordar todos o algunos de los temas que
se proponen en funcin de criterios de oportunidad y de factibilidad.
En el quinto captulo se propone un sencillo procedimiento metaevaluativo que puede
aplicar la institucin que haya llevado a cabo un determinado proceso evaluativo.
Es una ficha que permite recoger determinadas informaciones sobre la accin evaluativa
desarrollada.
46
El espejo tiene la propiedad de reflejar los cuerpos, establecindose una relacin entre el
cuerpo reflejado y el reflejante. Pues bien, esta propiedad del espejo funciona en la metfora como smbolo de la relacin de contenido que debe haber entre el objeto -campo de
contenido- y los objetivos de evaluacin -metas de conocimiento del contenido-, de
manera que el objeto est contenido en los objetivos y a la inversa. Anlogamente, debe
haber una relacin de proporcin entre los instrumentos y los recursos asignados a la evaluacin. Finalmente se persigue una relacin de isomorfismo entre la informacin evaluativa y los juicios de valor.
Estas ideas se expresan grficamente en la figura siguiente. Aparecen los factores del modelo evaluativo separados por fragmentos de espejo en los que metafricamente se refleja la
relacin que hay entre ellos (contenido, proporcin e isomorfismo). Los elementos indicados
estn ordenados en las fases bsicas de la gestin evaluativa: planificacin y desarrollo.
QU EVALUAR?
OBJETO
* Estrategia
Evaluativa:
Conocimiento
Estratgico
DISEO
OBJETIVOS
EVALUATIVO
DE-Rs
CMO EVALUAR?
INSTRUMENTOS
* Instrumentacin
Evaluativa:
Conocimiento
Instrumental
RECURSOS
47
PRODUCCIN
INFORMACIN
ACCIN
EJECUCIN
EVALUACIN
* Creacin de
conocimiento
evaluativo
JUICIOS VALOR/
INFORMES
La planificacin evaluativa:
el modelo de diseo
autoevaluativo DE-Rs
n general las acciones de planificacin estn relacionadas con la activacin de funciones y competencias de previsin de acciones futuras, organizacin de los recursos necesarios y la adopcin de las decisiones que hagan efectiva la planificacin
como primera fase del proceso global de gestin en cualquier mbito o rea.
As pues, toda planificacin es una anticipacin del futuro que expresa la capacidad de
accin intencional humana. No obstante, la incertidumbre del presente y futuro debido la
cantidad y variedad de factores dinmicos intervinientes que no se pueden prever en las
planificaciones confiere un carcter aproximativo, tentativo y, ciertamente, inquietante a
las intenciones humanas planificadas.
Pese a ello, la necesidad de prever determinadas acciones relevantes mediante planificaciones se impone con fuerza en todos los mbitos de la accin intencional humana. Por
ejemplo, sera impensable construir una casa sin la planificacin previa que supone la elaboracin de planos, memoria tcnica, estudios del terreno, estudio de costes, etc., aunque,
de entrada, se sabe que durante la construccin de realizarn modificaciones, se introduciran innovaciones, de ajustarn presupuestos, etc. sto no invalida la planificacin inicial
sino que la refuerza.
En consecuencia, la cuestin est no tanto en si procede o no planificar determinadas
actuaciones relevantes o complejas sino en ajustar las previsiones planificadas a unos
parmetros humanos y tcnicos en cada mbito de actividad como el productivo, el social,
la investigacin, etc. y dentro de ellos en cada rea especfica en funcin de sus caractersticas singulares.
El valor de la planificacin no est ya en la relacin de correspondiencia completa entre
planificacin y accin, que como hemos comentado no es realista, sino en su funcionalidad dentro del proceso global de gestin.
Los dos indicadores bsicos de funcionalidad de la planificacin sn:
a) El grado de probabilidad de la planificacin. En cada rea de actividad existe una
experiencia de planificacin y de su contribucin al desarrollo de las acciones. Con
el tiempo las acciones de planificacin y de desarrollo de habrn ido ajustando a
travs de los procesos de retroalimentacin hasta llegar a un grado aceptable de
probabilidad que justifica la inversin de recursos en las tareas planificadoras.
b) La relacin costes/beneficios. Se trata de considerar el valor que aporta la planificacin al desarrollo de las acciones y a los resultados que finalmente se logran. En
diferentes reas de actividad existen investigaciones que aducen datos que vienen
a medir o ponderar esta relacin. En las reas de intervencin social resulta ms
49
50
51
c) El liderazgo institucional es un factor de logro para la gestin autoevaluativa.
Algunos elementos de esta relacin son:
La creacin de las condiciones organizativas para que emerja la cultura autoevaluativa. En concreto, incentivar la capacitacin de profesionales en el concepto y
las tecnologas de evaluacin, dedicar energas institucionales (recursos) al desarrollo de acciones autoevaluativas, incentivar las relaciones entre determinadas
actuaciones institucionales y la informacin derivada de las mismas, favorecer el
intercambio de experiencias y la comunicacin entre profesionales, potenciar un
discurso que permita el desarrollo de valores compartidos sobre la evaluacin, etc.
Promover acciones autoevaluativas vinculadas a la gestin anual de proyectos. En
especial se subraya, el nombramiento de equipos de evaluacin competentes, la
facilitacin para que se elaboren diseos evaluativos, as como su implementacin.
Utilizar la informacin que proporciona la autoevaluacin como recurso realimentador de la gestin institucional.
Facilitar las relaciones entre la evaluacin interna y la externa como factor de
contraste y complementacin.
Las elaboraciones de planificacin, normalmente, se concretan en documentos. stos dependiendo del tema de que se trate adoptan unas formas u otras. Por ejemplo, no presenta el
mismo formato una planificacin econmica que una planificacin arquitectnica.
As, en toda planificacin, podemos distinguir entre los contenidos y los formatos o tecnologas a travs de las cuales se expresan aquellos. Resulta evidente que el elemento fundamental son los contenidos, pero su expresin en un formato adecuado y conveniente
resulta importante para su comprensin. Podemos decir que los contenidos de una planificacin se comunican mejor gracias a su adecuacin a un formato convenido que todos
los planificadores de una misma especialidad utilizan.
El consenso sobre unos contenidos y unas tecnologas, que resultan operativas a la prctica, es un claro exponente de consolidacin profesional de cualquier rea de actividad.
Los contenidos de la planificacin autoevaluativa, fijados en el modelo GE-Rs, se concretan en los cuatro factores que conocemos. Procede ahora proponer un modelo formal
que los exprese mediante una tecnologa sencilla, prctica y til. Es el modelo DE-Rs formado por dos fichas: la ficha sntesis, como veremos, permite consignar todos los factores del diseo, y la ficha de instrumento de evaluacin contiene el texto de los distintos instrumentos.
OBJETO
OBJETIVOS
INSTRUMENTOS
Nm. (Objetivo)
Tipo
Descripcin
1()
2()
53
3()
4()
5()
RECURSOS
A. Personales:
a. Evaluadores:
b. Participantes:
Instr. 1: ______________________________________________________________
Instr. 2: ______________________________________________________________
Instr. 3: ______________________________________________________________
B. Materiales:
a. Bienes: _____________________________________________________________
b. Servicios: ___________________________________________________________
A. FICHA SNTESIS: FS-00.
54
B. FICHA
DE INSTRUMENTO DE
EVALUACIN: FI-___.
OBJETO DE EVALUACIN
El estudio del objeto de evaluacin requiere del anlisis de un conjunto de factores que
sean comunes con los otros que componen el diseo. Estos son: el concepto, las caractersticas, y el modelo formal.
El objeto de evaluacin como primer factor del diseo tiene unas caractersticas singulares que requieren ser estudiadas especficamente. En concreto, los criterios para identificar objetos relevantes de evaluacin. En este apartado consideraremos todos estos elementos.
55
Concepto
Es el tema -o conjunto de temas interrelacionados- seleccionado para ser evaluado debido a su relevancia, evaluabilidad, practicidad y concrecin.
Caractersticas
Se resumen en las cuatro que se describen a continuacin.
a) Relevante: Cualitativamente significativo. La relevancia se puede concretar
mediante la identificacin de informaciones significativas del funcionamiento institucional. Las denominamos ndulos de informacin cualitativa (NIC.). Esto es,
rasgos significativos que la experiencia lcida y contrastada identifica en el cmulo de acciones que se desarrollan en toda actividad profesional.
Estos NIC., estn interralacionados constituyendo redes de sentido que se diferencian del resto de acciones que cotidianamente se llevan a cabo.
56
Estructura formal
57
Integra los siguientes elementos:
Tema.
Descriptores de concrecin.
Descriptores de ubicacin.
Tema (relevante, evaluable,
contextualizado.
Descriptores
de concreccin.
Descriptores de ubicacin
(tiempo, espacio, organizacin).
Ejemplos:
Relacionados con la red de NICs:
i01-Los objetivos de gestin....del Plan anual... del centro Ed. ...curso 98/99
i02-El programa de estudios.....del centro educativo......................curso 99-00
i06-El clima institucional..........del centro educativo...................curso 99-00
i03-Los equipos docentes......departamentales del centro ed..........curso 00-01
i07-La direccin.....................de la institucin educativa..............curso 00-01
i08-La relacin entre la gestin de los recursos y curriculum........curso 01-02
Otros:
n01-El gusto por la lectura........de los alumnos de 1. ESO........ curso 99/00
n02-El gasto de inversin........ del presupuesto............................. curso 00/01
n03-El clima de trabajo............en las aulas de 1. ESO................ curso 99/00
n04-Metodol. Lectoescritoras.....en P5 y 1. de Primaria............ curso 00/01
1. Identificacin de temas relevantes
Evaluar cualquier hecho o fenmeno supone considerarlo desde el punto de vista de la
informacin-conocimiento, es decir, lo que se sabe o se puede conocer de l. Considerado
as, todo hecho o fenmeno est formado por complejas redes de informacin. La pretensin de abarcarlo todo es cuando menos ingenuo.
La identificacin de determinadas informaciones que sean ms relevantes que otras es
una necesidad de la gestin evaluativa. La idea es concentrar la accin evaluativa en las
cuestiones ms relevantes y significativas, pero cmo saber cules son?, Cmo pueden
identificarse?. A continuacin proponemos un modelo y unas estrategias para la identificacin de informaciones relevantes del centro educativo.
58
NIC
()
IC. ( )
59
DESCRIPCIN (3)
REFERENCIAS (4)
(1)
(2)
(3)
(4)
Identificacin de la investigacin (autor y ao de publicacin), y en el caso de NICs, identificacin de la institucin educativa o profesionales que lo proponen (institucin,
autor/es, ao)
Ejemplo:
60
01
Rosenhine,
1983
02
Estndares
Excel. EUA
4. Breve descripcin del modelo de reas de gestin del centro educativo AG5+3
El modelo que proponemos ofrece una perspectiva que descubre las unidades globales de
estructura y funcionamiento del centro educativo que son significativas a la prctica. (Rul,
1990)1. Estas aglutinan elementos y relaciones en un proceso de especializacin creciente con el fin de responder mejor a las finalidades globales de la organizacin. Las unidades estructurales del sistema escolar (rganos y recursos) -en la prctica cotidiana de los
centros educativos- s`integran en reas funcionales de gestin o mbitos de funcionamiento especializado. La consideracin atenta de la realidad escolar permite identificar
las siguientes reas o mbitos de gestin: 5 reas internas (sistema escolar), y 3 rees
externas (entorno).
RUL, J. (1990): El Projecte de Gesti del centre educatiu: Generalitat de Catalunya, Departament dEnsenyament, Barcelona, pgs. 37-56.
61
CENTRO EDUCATIVO
(interior)
CENTRO EDUCATIVO
(relacin con el
entorno)
Esta clasificacin de reas de gestin obedece, como todas, a una representacin racional
de la realidad escolar con una doble finalidad, a) tener una mejor comprensin de la realidad representada y, b) disponer de un modelo instrumental que facilite la gestin (planificacin, desarrollo y evaluacin).
rea 1 (A1): Organizacin-Gestin general
62
rea formada por los rganos de gobierno, unipersonales y colegiados, y de coordinacin general donde se desarrolla la estrategia global del centro educativo:
Proyecto de centro, articulacin de las expectativas, formacin del equipo humano, cultivo de la cultura organizativa interna.
La funcin bsica es la consecucin de los objetivos institucionales por medio
de la mejora de la calidad y nivel competencial de los alumnos.
Las funciones especficas son: sistemas de coordinacin, control, participacin,
toma de decisiones, relaciones institucionales y de promocin del centro, relaciones humanas, direccin de personal, direccin tcnico-pedaggica, direccin
administrativa y econmica, sistemas de supervisin, evaluacin institucional,
polticas de comunicacin, canales y circuitos de comunicacin-informacin, etc.
Es el rea donde se teje la cultura escolar y el sentido de pertenencia; los valores
y las expectativas que inspiran las conductas profesionales de los directivos, de los
docentes con incidencia en la vida escolar y extraescolar.
En consecuencia, es el mbito que proyecta el prestigio de la institucin estrechamente relacionado con la consecucin de los objetivos institucionales.
63
64
65
66
rea del marco natural y social formado por el: a) medio natural mediato a escala creciente de regin, pas, continente, planeta, etc. y, b) medio socio-cultural
mediato con, i) las instituciones sociales a escala creciente: ciudad, corporacin,
nacin, estado, entidades supranacionales y supraestatales, planetarias, ii) los
conocimientos y perspectivas histricas, jurdicas, cientficas, espirituales, econmicas, tecnolgicas, militares, sanitarias, artsticas, educativas, ticas, religiosas,
etc. y, iii) la comunicacin y las tecnologas (mass media), etc.
La funcin bsica es la relacin entre el centro educativo y el entorno mediato.
Las funciones especficas son: conocimiento y comprensin del entorno mediato
(a travs de las reas curriculares especficas) y las interrelaciones mediatas a travs de viajes, participacin en programas internacionales (por ejemplo: proteccin
de las selvas tropicales, conservacin de especies en peligro de extincin, salvaguarda de los derechos humanos, etc.), comprensin intertnica y multicultural.
Es el rea general o contexto global que afecta en cada momento histrico a la
educacin: inters social en la educacin, expectativas globales, oportunidades,
intercambios, conocimiento disponible, centros de inters colectivo, valores dominantes, etc.
El esquema que presentamos a continuacin expresa grficamente las reas de
gestin del centro educativo. Es como una especie de marco o plano til para
representar los rganos de la estructura organizativa y los escenarios especficos del funcionamiento del centro educativo. Puede ser til en tareas organizati-
vas, por ejemplo, la elaboracin del organigrama, y en tareas valorativas (diagnsticas) como identificar puntos fuertes y dbiles del funcionamiento escolar en
un periodo determinado, para analizar la distribucin de los recursos (tiempo,
rganos, funciones), el estudio de los costes, as como la eficiencia organizativa.
Tambin se puede utilizar este plano, simplificado en las cuatro reas internas fundamentales, para representar las redes de informacin-conocimiento del centro
educativo, con la finalidad de identificar informaciones significativas de estructura y funcionamiento escolar.
La determinacin de informaciones significativas en las redes permite relacionar,
como veremos, los puntos fuertes/dbiles identificados por la diagnosis interna
con los ndulos de informacin cualitativa (NICs.) seleccionados: internos experienciales, y/o contrastados por la investigacin educativa. Esta relacin es interesante desde la perspectiva del conocimiento de la propia realidad, as como para
las tareas de gestin, por ejemplo, en tareas de priorizacin, de toma de decisiones de planificacin, observacin y evaluacin.
67
GESTIN
ECONMICA Y
ADMINISTRATIVA
A-4 GESTIN
ECONMICA Y
ADMINISTRATIVA
(Planificacin, ejecucin y evaluacin)
GESTIN
(Desarrollo E/A)
CURRICULAR
(Planificacin y evaluacin)
A-3 PLANIFICACIN Y
EVALUACIN
CURRICULAR
(Trabajo profesional de los
docentes: programacin
preparacin clases y
evaluacin)
68
rea de Lengua/s
Actividades complementarias
y extraescolares
rea de Tecnologa
rea de Matemticas
EQUIPOS DOCENTES
C-II
Grupos-clase
(socializacin-afectiv.)
Procesos EnseanzaAprendizaje
Recursos EnseanzaAprendizaje
Alumnos
(carrera individual)
Grupos-clase
(socializacin-afectiv.)
Procesos EnseanzaAprendizaje
Recursos EnseanzaAprendizaje
Alumnos
(carrera individual)
Cultura. Valores
Gestin Inmovilizado
(edificio: mantenimiento y conservacin)
Gestin Recursos: inventariables y fungibles (mobiliario, recursos, adquisicin,
conservacin, reparaciones)
Gestin financiera
(presupuestacin, contabilizacin)
Gestin Servicios
(comedor, transporte, actividades, etc.)
GESTIN ADMINISTRATIVA
C-I
Grupos-clase
(socializacin-afectiv.)
Procesos EnseanzaAprendizaje
Recursos EnseanzaAprendizaje
Alumnos
(carrera individual)
Grupos-clase
(socializacin-afectiv.)
Procesos EnseanzaAprendizaje
Recursos EnseanzaAprendizaje
Alumnos
(carrera individual)
GESTIN ECONMICA
Informacin-Comunicacin. Relaciones
69
70
(accin, desarrollo, interacciones)
ADMINISTRATIVA
(planificacin-evaluacin)
Relaciones
con
organismos
externos
Capacidad
de apertura
al medio
Prestigio
de la
institucin
Direccin
de la
institucin
Consecucin
de los
objetivos
Adquisicin
de
recursos
Investigacin
y
consulta
71
Calidad y
nivel del
profesorado
Programa
de estudios
Clima del
centro
Calidad y
nivel de los
estudiantes
Yorke, 1987
02 i 02
Yorke, 1987
03 i 03
Yorke, 1987
04 i 04
Yorke, 1987
05 i 05
Yorke, 1987
06 i 06
Yorke, 1987
07 i 07
Yorke, 1987
08 i 08
Yorke, 1987
09 i 09
Yorke, 1987
10 i 10
Yorke, 1987
11
Las relaciones con organismos externos inciden directamente en la capacidad de apertura al medio.
Yorke, 1987
72
i 11
Nota: Esta investigacin ha sido desarrollada en la cultura administrativa anglosajona de la educacin. Algunas relaciones etn afectadas por las peculiaridades de este sistema de educacin, especialmente las relaciones entre la direccin y el profesorado.
PROGRAMA DE ESTUDIOS
(i 04)
INVESTIGACIN Y CONSULTA
(investigacin-accin) (i 03)
CALIDAD Y NIVEL
PROFESORES (i 05)
CALIDAD Y NIVEL
DE LOS ESTUDIANTES (i 02)
ADQUISICIN Y GESTIN DE
LOS RECURSOS (i 08)
CAPACIDAD DE APERTURA
AL MEDIO (i 10)
73
OBJETIVOS DE EVALUACIN
Una vez determinado el objeto de evaluacin procede considerar el enfoque metodolgico ms adecuado, en funcin de las caractersticas de propio objeto y de los fines de la
evaluacin. stos suelen concretarse en objetivos de evaluacin que como veremos pueden ser de tipologa diversa segn las intencionalidades de la accin evaluativa.
La concrecin de estos objetivos con relacin a un determinado objeto puede hacerse
mediante procedimientos diversos, pero que tienen el denominador comn de identificar
las metas explcitas en que se concentrar la accin evaluativa, salvo en las metodologas procesuales que funcionen en ausencia de objetivos explcitos.
Un procedimiento comn para definir objetivos de evaluacin es la interrogacin, es decir,
el evaluador deber cuestionarse sobre sus intencionalidades y sobre el objeto mismo:
Qu interesa conocer del objeto?, Qu es relevante del objeto?, Qu merece ser conocido del objeto?, Qu se puede conocer del objeto?
74
Concepto
Son metas concretas y significativas que describen aspectos priorizados del objeto de
evaluacin en que se concentra la accin evaluativa.
Para evitar confusiones posteriores procede, en primer lugar, distinguir entre objetivos de
evaluacin y objetivos de tarea.
a) Objetivos de tarea: Son las metas que, en general, se orientan a garantizar el
mantenimiento (hacer aquello que se ha de hacer para que las cosas funcionen), y
las intencionalidades orientadas a producir transformaciones en cualquier mbito
de actividad. Tambin pueden disearse objetivos de tarea orientados a la comunicacin.
b) Objetivos de evaluacin Son las metas que se orientan a lograr conocimiento sobre
las realidades evaluadas: conocimiento descriptivo (fenomnico); es decir, datos e
informacin para saber ms de la realidad evaluada (el objeto y sus relaciones con
otros objetos), y conocimiento valorativo (axiolgico); esto es, ponderar adecuadamente la realidad evaluada mediante juicios de valor.
Caractersticas
Los objetivos de evaluacin pueden cumplir funciones distintas segn sean las opciones
metodolgicas que se adopten. En consecuencia procede sealar los tipos bsicos de objetivos que pueden emplearse en la planificacin.
a) Explcitos
Normativos: Son objetivos fijados normativamente (norma positiva).
Criteriales: Son objetivos que disea el equipo evaluador en funcin de las necesidades.
Emergentes: Son objetivos que emergen a lo largo del proceso evaluativo, esto
es, las intencionalidades evaluativas se explicitan como consecuencia de la propia accin evaluativa. Este tipo de objetivos puede aplicarse en modalidades evaluativas de carcter cualitativo y procesual.
b) Implcitos (libre meta)
Son objetivos no concretados; estn latentes en el proceso evaluativo, pero sin
explicitar. Son de aplicacin en modalidades evaluativas de tipo procesual que
atribuyen mucha importancia a las interacciones a lo largo del proceso evaluativo.
Estructura formal
Integra los siguientes elementos:
a) Accin evaluativa: verbo en infinitivo correspondiente a los mbitos cognoscitivo
y/o afectivo, segn la estrategia adoptada. A continuacin se ofrece una clasificacin de acciones (verbos) que puede ser til consultarla cuando se disean objetivos de evaluacin.
75
Determinante/s de la accin
(concrecin)
Ejemplo:
Objeto:
Los objetivos de gestin....del Plan anual....del Centro Ed. Curso 99/00.
Objetivos:
Relacionar ............. la adecuacin de los objetivos del PA. con las necesidades institucionales del Centro Ed.
76
CATEGORAS
DOMINIO COGNOSCITIVO
1.
Conocimiento
2.
Comprensin
3.
Aplicacin
4.
Anlisis
5.
Sntesis
6.
Evaluacin
CATEGORAS
1.
Receptividad
DOMINIO AFECTIVO
Preguntar, identificar, seleccionar, escuchar, aceptar, atender.
2.
Respuesta
3.
Valoracin
4.
Organizacin
5.
Caraterizacin
(*) Propuesta de acciones para la formulacin de objetivos a partir de los trabajos clasificatorios de BLOOM, B.S.
(1972): Taxonoma de los objetivos de educacin: mbito del conocimiento, Valencia, Marfil, 1972, y de KRATHWOHL,
D.R.: Taxonoma de los objetivos de educacin: mbito de la afectividad, 1973, Marfil, Valencia.
77
78
Este objetivo de evaluacin requiere que haya instrumentos de evaluacin que proporcionen informacin cognoscitiva (verificar), como por ejemplo una prueba, y valorativa (justificar) como, por ejemplo, una entrevista.
INSTRUMENTOS DE EVALUACIN
En este apartado estudiaremos los instrumentos de evaluacin. En primer lugar, los rasgos
comunes con los dems factores del diseo evaluativo: concepto, caractersticas y estructura formal. En segundo lugar, nos centraremos en algunas informaciones especialmente
significativas por lo que concierne a los instrumentos, en concreto una breve resea de las
metodologas evaluativas y una tipologa de los instrumentos de evaluacin con ejemplos.
Concepto
Son constructos tecnolgico-ideolgicos -subsidiarios de paradigmas o perspectivas
metodolgicas- diseados para recoger informacin, ms o menos especializada, sobre los
objetivos de la evaluacin que concretan el objeto de evaluacin.
Caractersticas
Se caracterizan los instrumentos de evaluacin a partir de dos referentes bsicos: los
requisitos que deben reunir y la autora en su elaboracin.
a) Requisitos:
Epistemolgicos: Estado de la cuestin cientfica de tema sometido a evaluacin.
Metodolgicos: Tipologa del instrumento: prueba, observacin, cuestionario, etc.
b) Elaboracin:
Adoptados: Instrumentos de evaluacin estandarizados y publicados que se
incorporan al diseo evaluativo por su valor y adecuacin.
Elaborados ad hoc. Elaborados por el equipo que planifica la evaluacin en funcin de los objetivos de evaluacin que constan en el diseo. Procede comprobar la adecuacin de estos instrumentos antes de aplicarlos. Hay un procedimiento sencillo de comprobacin que es el estudio de caso: Aplicar el instrumento elaborado a uno o dos casos, identificando a travs de las respuestas,
anotaciones, etc. su adecuacin y funcionalidad como instrumento de evaluacin haciendo las correspondientes modificaciones o adaptaciones.
79
Para la adecuacin de las pruebas se sugiere un sencillo procedimiento que consiste en identificar dos sujetos representativos del grupo: uno de la mitad alta y
el otro de la mitad baja. Se les aplica experimentalmente la prueba diseada. La
puntuacin del sujeto de la parte alta ha de estar situada alrededor de notable,
y la del sujeto de la parte baja alrededor de insuficiente.
x
X
x
x
X
X
y
Y
+ - Notable
y
Y
x
y
y
y
y
y
+ - Insuficiente
80
Estructura formal
Habr que considerar el formato de las dos fichas que componen el modelo formal del
diseo DE-Rs.
a) Ficha de Sntesis (FS-00):
Nmero del instrumento: ordenacin de los instrumentos mediante la serie
ordinal.
Conexin con los objetivos: indicar el nmero del objetivo relacionado entre
parntesis.
Tipologa del instrumento: Codificacin abreviada del instrumento.
Descripcin del instrumento: Breve referencia al contenido del instrumento.
b) Fichas de instrumento evaluativo. (FI-__).
Instrumento evaluativo propiamente dicho: desarrollo de los tems del instrumento.
DISEO EVALUATIVO:
DISEO EVALUATIVO:
Nmero y
conexin
TIPOLOGA
del
instrumento
-Breve
descripcin
del instrumento:
descriptor/es
Ejemplos:
1 (1 )
TEST.
81
2 (1 )
ENTR.
3 (2 )
PT/OBS
Metodologa evaluativa
Los instrumentos que se puedan adoptar o elaborar ad hoc en el diseo evaluativo expresan -cuando menos implcitamente- la adopcin de una determinada opcin metodolgica como referencia de la accin evaluativa.
El enfoque metodolgico adoptado condiciona la visin del objeto de evaluacin y, consiguientemente, las atribuciones de valor que se puedan hacer.
a) Tipologa:
Cuantitativa. A partir de una orientacin racional-tecnolgica, utiliza preferentemente la medicin mediante pruebas como instrumento de evaluacin.
Para este enfoque slo lo mesurable tiene inters.
82
Mixta [complementariedad]. Se justifica a partir de la comprensin de la complejidad intrnseca de la realidad. Las acciones de medicin y de descripcininterpretacin son estrategias y tcnicas que, en cualquier caso, resultan
siempre insuficientes y en algunos casos parciales para captar y comprender la
realidad.
Los trabajos evaluativos pueden integrar las dos orientaciones descritas, utilizando instrumentos de medida cuando sea posible e instrumentos cualitativos
para las realidades no mesurables.
Integracin de informaciones procedentes de ambas metodologas, pero respetando sus caractersticas y lenguajes especficos.
Instrumento
Evaluador
Realidad evaluada
informacin
FIGURA 8. Funcin del instrumento de evaluacin.
Hay cinco tipos bsicos de instrumentos de evaluacin por la relacin que se establece
entre evaluador y realidad mediante el instrumento.
De hecho estos tipos de instrumentos expresan las diferentes estrategias de captacin y
recogida de informacin.
TIPOS BSICOS DE INSTRUMENTOS DE EVALUACIN
INSTRUMENTOS DE EVALUACIN
PRUEBA
CUESTIONARIO
OBSERVACIN
ENTREVISTA
INTERACCIN
83
Escritas
Orales
Prcticas
Obtener informacin
Obtener valoraciones
Categorial
Descriptiva
Narrativa
Tecnolgica
Pautada
Libre
Reunin
Dinmica grupal
Negociacin
Una vez descrita la funcin del instrumento de evaluacin e identificados los tipos bsicos de instrumentos procede analizarlos con el fin de distinguir sus caractersticas peculiares y la forma en que operan sobre la realidad evaluada.
a. La prueba. Es un reactivo, un estmulo, que provoca una respuesta o conducta por
parte de la realidad evaluada.
estmulo
Evaluador
Realidad
evaluada
Instrumento
PRUEBA
respuesta
FIGURA 10. Funcin operativa de la prueba.
Evaluador
Realidad
evaluada
(personas)
Instrumento
CUESTIONARIO
valoraciones
FIGURA 11. Funcin operativa del cuestionario.
84
Evaluador
Instrumento
Realidad
evaluada
OBSERVACIN
Evaluador
Realidad
evaluada
(persona)
Instrumento
ENTREVISTA
experiencias
FIGURA 13. Funcin operativa de la entrevista.
e. La interaccin. Es un escenario de intercomunicacin multipersonal. Puede adoptar el formato de reunin, dinmica grupal o negociacin.
informacin
Realidad
evaluada
(personas en
interaccin)
Instrumento
Evaluador
INTERACCIN
experiencias
valoraciones
FIGURA 14. Funcin operativa de la interaccin.
OBJETIVIDAD
SUBJETIVIDAD
CUALITATIVO
85
1. Objetividad/cuantitativo:
2. Objetividad/cualitativo:
CUESTIONARIO
86
3. Subjetividad/cuantitativo:
4. Subjetividad/cualitativo:
CUESTIONARIO (p.e. obtener valoraciones binarias o matizadas). OBSERVACIN (p.e. descriptiva etic, o narrativa diarios). ENTREVISTA (p.e. libre). INTERACCIN (p.e. dinmica
grupal).
PRUEBA
Objetividad / Objetividad /
Cuantitativo Cualitativo
CUADRO 7. CLASIFICACIN
Subjetividad
/Cuantitativo
Subjetividad
/Cualitativo
(1)
(1) Conocimiento experto. Cuestionarios a profesionales sobre temas de su especialidad con preguntas muy precisas sobre cuestiones sobre las que tengan experiencia contrastada.
87
EJEMPLOS
OBSERVACIONES
Poco objetivable y
cuantificable
1.1.2. Semiestructuradas:
respuestas guiadas
Menos objetivable y
cuantificable
Objetivable y cuantificable
Objetivable y cuantificable
Objetivable y cuantificable
1.3. Ordenamiento de un
contexto
MEN: 100 g de sopa de tapioca, 200 g de albndigas de cerdo, 200 g de salmn, 200 g de pan,
50 g de tarta de chocolate y 1/2 litro de vino
Este men es til para: a) engordar, b) adelgazar,
c) enfermos del hgado, d) con lcera de estmago
Este men es pobre en: a) carbohidratos, b) protenas, c) grasas, d) vitaminas
88
2. PRUEBAS ORALES
2.1. Con Base no
Estructurada
Poco objetivable y
cuantificable
Contar una historia que tenga tres protagonistas (hombre, mujer, anciano). La historia ocurre
en un tren. Tiempo mx: 10 minutos
Menos objetivable y
cuantificable
3. PRUEBAS PRCTICAS
[construcciones, elaboraciones]
la objetivacin
depende de la concrecin de los criterios de evaluacin
EJEMPLOS
OBSERVACIONES
1.1. Obtener
Conocimiento
2. CUESTIONES PARA
OBTENER VALORACIONES
C. OBSERVACIN
EJEMPLOS
OBSERVACIONES
1.1. Lista de
Comprobacin
[abierta o cerrada]
Proporciona informacin
descriptiva ms que medicin
2. DESCRIPTIVA [emic o
etic]
Etnomtodos: Emic: la
descripcin se sita en el
punto de vista del observado con su lenguaje,
cdigos, visin, etc.
Etic: expresa el punto de
vista del observador sobre
lo observado
1. CUESTIONES PARA
OBTENER INFORMACIN
89
1. CATEGORIZACIN
4. TECNOLGICA
4.1. Registro en audio,
vdeo, fotografa
EJEMPLOS
OBSERVACIONES
1. Entrevista Pautada
2. Entrevista Libre
En la entrevista libre el
entrevistador y el entrevistado conversan sin referentes fijados de antemano,
aunque puedan ceirse a
una temtica determinada
D. ENTREVISTA
90
EJEMPLOS
OBSERVACIONES
1. Reunin
Reuniones formales e
informales
2. Dinmica grupal
Situaciones de intercambio
e interaccin. Diversas
tcnicas
3. Negociacin
Realidad Observada
91
DIRECTA
REALIDAD
INDIRECTA
92
DESCRIPCIN
TIPOS
FUENTES DE INFORMACIN
Realidad observada
PT/OBS
Realidad observada
NAR/DESC
Realidad observada
GR-SopMag.
PRUEBA
Prueba (tipologas)
CUEST/EST.
Cuestionario estandarizado
ESC.
Escala normalizada
Opiniones agentes
ENTR.
Entrevista (opiniones)
Opiniones agentes
AutoEv.
Autoevaluacin
Interacciones
INT/DinGrup
/Neg.
RECURSOS DE EVALUACIN
Una vez establecida la estrategia evaluativa, con relacin a un determinado objeto de evaluacin, procede concretar la instrumentacin evaluativa con la fijacin de los instrumentos de evaluacin -como hemos estudiado en el apartado anterior- y la concrecin de
los recursos necesarios que nos permitan gestionar el proceso evaluativo. Aqu estudiaremos este ltimo factor del diseo evaluativo.
Concepto
Conjunto de medios personales y materiales necesarios para el desarrollo de la evaluacin.
Caractersticas
Los rasgos distintivos de los distintos recursos de evaluacin dependen de su carcter, por
lo que se ordenan en la siguiente tipologa.
a) Personales:
Evaluador/es: Indicacin de evaluador o evaluadores que se responsabilizan de
llevar a trmino la evaluacin.
Requisitos:
Conocimiento y capacidades evaluativas.
Conocimientos especficos y experiencia en relacin con el objeto de evaluacin.
Legitimidad: estatus profesional o atribucin legtima de la funcin.
Tcnicos: Asesoramientos verbales o escritos, si procede.
Participantes: Tienen diversas funciones segn las modalidades evaluativas. En
general, son las personas que suministran la informacin, contestando o cumplimentando los instrumentos de evaluacin.
La seleccin de los participantes da lugar a diversas estrategias de muestreo segn las
opciones metodolgicas del diseo evaluativo.
La cuestin fundamental de las muestras es su representatividad respecto de todos los
casos de la misma clase susceptibles de ser medidas.
El problema de les muestras surge cuando la poblacin a estudiar es muy numerosa como
para implicar costes en energa y dinero insuperables. En este caso, se trata de seleccionar un subconjunto representativo de la poblacin que ahorre energa y, a la vez, no se
pierda precisin.
Desde un punto de vista tcnico todos los tipos de muestreo tienen unas caractersticas
con ventajas e inconvenientes. Hay tres tipos fundamentales de tcnicas de muestreo: las
probabilsticas (todos los elementos que componen la poblacin total, tienen una probabilidad conocida de ser incluidas en la muestra), las no probabilsticas (tienen un inters
analtico o de conocimiento especializado de determinados temas), y las muestras para
probar hiptesis sustantivas. La aplicacin de los diversos tipos de muestra est relacionada con las caractersticas diferenciales de las investigaciones.
Las tcnicas bsicas de muestreo quedan resumidas en el cuadro siguiente.
93
2. MOSTRAS NO PROBABILSTICAS
En los trabajos de evaluacin y, especialmente, en los de evaluacin interna de las organizaciones la cuestin de la seleccin de participantes se puede resolver por dos vas:
a) Toda la poblacin relacionada con el objeto de evaluacin, cuando sea posible.
94
PADUA, J. (1987): Tcnicas de investigacin aplicadas a las Ciencias Sociales. FCE. Mxico .
Estructura formal
Incluye los siguientes elementos que constan en la regleta: tipologa, concrecin y descripcin:
Tipologa
del recurso
Concreccin y justificacin
(personales)
Descripcin, presupuestacin
(materiales)
Ejemplos:
Personal: Evaluadores...
Fotocopias:
Comunicaciones:
Asesoramiento:
601
3005
9015
95
El desarrollo
de la evaluacin
odo proceso de gestin evaluativa comienza con una peculiar relacin entre pensamiento y realidad que culmina en la concrecin de una planificacin. sta contiene
una intencionalidad de conocimiento sobre una determinada realidad (objeto y objetivos) y los medios para mostrarla y evidenciarla (instrumentos y recursos) por medio del
lenguaje en forma de datos, descripciones, narraciones, juicios de valor, etc. Toda realidad,
incluso los objetos de evaluacin intencionalmente acotados, es constitutivamente compleja por lo que la accin evaluativa es un sistema necesariamente aproximativo de conocimiento.
En consecuencia, la evaluacin como toda forma de conocimiento tiene un carcter indirecto, tentativo y complejo en su aproximacin a la realidad evaluada, pero se justifica por
la necesidad humana de conocer, describir e interpretar racionalmente los fenmenos
sociales como instrumento de emancipacin. La funcin que cumple la evaluacin consiste, bsicamente, en retroalimentar la accin intencional con el conocimiento evaluativo obtenido del objeto de evaluacin, formado por datos empricos y razonamientos lgicos sobre dicho objeto.
La planificacin evaluativa contiene en germen lo que luego se desarrollar con las acciones de produccin de la informacin evaluativa y la creacin de los juicios de valor,
que estudiaremos en este captulo.
CONCEPTO
Con la frase produccin de informacin evaluativa se quiere expresar de forma sinttica un proceso que integra un conjunto de acciones tendentes a generar o producir informacin.
Descriptivamente se puede definir diciendo que es el conjunto de acciones de desarrollo
evaluativo que tienen la virtualidad de generar la informacin evaluativa prevista segn
la estrategia y metodologa adoptadas.
97
CARACTERSTICAS
La produccin de informacin evaluativa se lleva a cabo mediante una secuencia de acciones ordenadas en las fases que se acaban de mencionar. Estas fases vienen a caracterizar
este factor del desarrollo evaluativo que denominamos produccin de informacin evaluativa.
A continuacin se analizan estas fases y se describen las actividades ms sobresalientes.
98
El desarrollo de la evaluacin
99
Tipologa:
Representacin:
DISTRIBUCIN DE FRECUENCIAS
Y SU REPRESENTACIN GRFICA
Forma:
VALORES TRANSFORMADOS
100
Frecuencias simples
Frecuencias acumuladas
Frecuencias agrupadas
Histrogramas
Polgonos de frecuencias
Simetra y sesgo
Modalidad
Distribuciones especiales
Media
Mediana
Moda
Amplitud total
Desviacin tpica y varianza
Puntuaciones transformadas:
Las puntuaciones Z (puntuaciones tpicas, con media
0 y desviacin tpica 10)
Puntuaciones derivadas:
Las puntuaciones T (con media 50 y desviacin tpica
10)
Las puntuaciones SAT (con media de 500 y desviacin
tpica de 100)
El desarrollo de la evaluacin
ESTRUCTURA FORMAL
Integra los siguientes elementos:
Identificacin del instrumento.
Procesamiento de la informacin cuantitativa y la cualitativa.
Resumen de la informacin.
Estos elementos se ordenan en una ficha tipo, que se propone a continuacin, para el procesamiento de la informacin.
101
PROCESAMIENTO DE LA INFORMACIN
OBJETO DE EVALUACIN:_________________________________________________________
Instrumento n____ Fecha aplicacin:_________ Evaluadores: ___________________________
Items del instrumento: [Procesamiento cuantitativo o cualitativo]
1.
2.
102
3.
4.
...
El desarrollo de la evaluacin
Ejemplos:
a) Informacin cuantitativa:
Instrumento 2: Prueba de clculo (aplicada a 10 alumnos).
Datos obtenidos: 6 ,7, 8, 5, 4, 4, 5, 5, 8, 6.
Procesamiento: estadstico: 6, 4.
Mediana [X] = (suma de puntuaciones) / 10 (nmero de casos).
b) Informacin cualitativa:
Instrumento 5: Utilidad de las reuniones. Cita 2 aspectos positivos y 2 negativos
(aplicada a 3 profesores).
Datos obtenidos:
Profesor 1:
Positivo: a) Encuentro entre compaeros, b) Compartir problemas.
Negativo: a) Tiempo insuficiente, c) Poca utilidad.
Profesor 2:
Positivo: a) Coordinacin de actuaciones, b) Disear estrategias.
Negativo: a) Tiempo insuficiente, b) Falta de recursos.
Profesor 3:
Positivo: a) Dilogo entre compaeros, b) Debate e intercambio de ideas.
Negativo: a) Incumplimiento de los acuerdos, b) Poca efectividad.
Procesamiento de la informacin cualitativa: Anlisis de Datos y representacin
en una Matriz descriptiva:
103
RESPUESTAS POSITIVAS
Prof. 1
Prof. 2
Prof. 3
Encuentro
Dilogo entre compaeros
Compartir problemas
Coordinacin de actuaciones
RESPUESTAS NEGATIVAS
104
Prof. 1
Prof. 2
Insuficiencia de tiempo
Poca utilidad
Prof. 3
Falta de tiempo
Falta de recursos
Poca efectividad
El desarrollo de la evaluacin
SOCIALES
TAREA
Los aspectos negativos pueden clasificarse a partir de dos categoras: problemas de eficiencia y de gestin.
EFICIENCIA
GESTIN
105
El proceso evaluativo desarrollado desde la planificacin hasta el informe expresa la capacidad evaluativa de la organizacin y de las personas implicadas.
La elaboracin de los juicios de valor comporta una valoracin ajustada o ponderacin
equilibrada que llevan a cabo los evaluadores sobre la informacin que proporciona el proceso evaluativo.
Toda ponderacin es una traduccin interpretativa de la informacin (datos, opiniones,
valoraciones, etc.) a la luz del objeto y de los objetivos de evaluacin.
Conviene observar, no obstante, que esta informacin est expresada en diversos discursos especializados, como la estadstica para los datos cuantitativos, y la descripcin etnogrfica para las informaciones cualitativas con la expresin de categoras y de ideas sintetizadas.
Toda expresin valorativa responde a mbitos de racionalidad diversa, ntimamente relacionados con las diferentes perspectivas de visin y con los intereses particulares ms o
menos explcitos.
106
El desarrollo de la evaluacin
que contienen los informes evaluativos. El otro factor de valor de las evaluaciones es el de
la adecuacin entre:
a) la estrategia evaluativa adoptada (objeto y objetivos de evaluacin) y la informacin evaluativa lograda, a partir de los instrumentos, y entre
b) la informacin evaluativa y los juicios de valor expresados que contienen los informes.
107
Hay juicios de diversos tipos y pueden clasificarse segn diversos enfoques. Estas cuestiones han sido estudiadas desde siempre por la Filosofa en sus dos vertientes fundamentales, la Lgica y la Gnoseologa. Con ello quiere significarse que en el juicio convergen
cuestiones lgicas, esto es, las reglas del pensamiento con que se construyen las proposiciones, y cuestiones que tienen que ver con la objetividad del juicio, es decir, si son verdaderos o falsos. Tambin estudia el juicio la Lingstica que analiza la estructura y significado de las oraciones.
Para los fines de esta obra baste con citar algunos tipos de juicios por su relacin ms
directa con la evaluacin que se presentan en este captulo.
Los juicios propios de la evaluacin pertenecen a tipologas que tienen que ver con situaciones objetivas en objetos, esto es observables y descriptibles, o con las relaciones entre
objetos.
108
En el primer caso son juicios de valor que vienen a describir determinados aspectos el
objeto. La mayora de los juicios de valor que entran en el campo de la evaluacin son del
tipo descriptivo. En este punto conviene no limitar los juicios de valor a los ticos, por
ejemplo, este acto es justo, o a los estticos, como el cuadro es bonito. Como veremos
ms adelante los juicios de valor especficos de la evaluacin son los que enuncian o describen ms que los que valoran la bondad/maldad, o la belleza/fealdad.
En el segundo caso los juicios pueden expresar relaciones reales: espaciales (esta mesa
est cerca de la puerta), temporales (Luisa ha venido antes que Mara), causales (el sol
calienta la piedra), finales o intencionales (cojo el lpiz para escribir).
Caractersticas (Tipologa)
Los juicios de valor pueden adoptar en su expresin formas diversas. Las ms caractersticas son estas.
a) Generales. Son juicios de valor de carcter global, sin aportar elementos concretos.
b) Razonados. Son juicios de valor que aducen razones y criterios.
c) Analticos o descriptivos. Son juicios de valor que concretan informacin aportando descriptores especficos.
El desarrollo de la evaluacin
Estructura formal
Como hemos sealado la forma de un juicio evaluativo se ajusta a la estructura de una
oracin gramatical generalmente atributiva. Contiene los siguientes elementos:
Sintagma nominal: sujeto y determinantes que expresen la informacin obtenida.
Sintagma predicativo: verbo y complementos que describan, interpreten y/o ponderen la informacin. Puede centrarse en el objeto o situacin, en las relaciones
entre objetos y situaciones o ambas cosas a la vez.
A continuacin se propone la regleta de formulacin de juicios y se citan algunos
ejemplos.
Sintagma nominal
(sujeto y determinantes)
Sintagma predicativo
(verbo y complementos)
Ejemplos:
Juicio de valor general:
1. El objetivo del Plan anual de mejorar.................
la eficacia de los equipos docentes se ha
desarrollado correctamente con una satisfaccin alta.
Juicio de valor razonado:
2. La eficacia del funcionamiento de los equipos........
docentes del centro es insatisfactoria por las
razones siguientes:
a) el 65% de los equipos no tiene objetivos concretos de trabajo.
b) las realizaciones son desiguales, pero insuficientes.
c) la satisfaccin profesional es baja.
Juicio de valor analtico o descriptivo:
3. El anlisis de las actas del claustro de profesores durante el curso pasado................... pone de manifiesto los siguientes elementos:
109
110
EL INFORME EVALUATIVO
Los resultados de la accin evaluativa se expresan, ordinariamente, en informes evaluativos. stos pueden adoptar diversos formatos y tamaos segn la costumbre y los estilos.
No obstante, con el fin de facilitar la comunicacin entre los evaluadores y las audiencias
se va imponiendo un estilo conciso y directo a la vez que riguroso y fundamentado.
A continuacin estudiaremos esta cuestin desarrollando una propuesta de informe sencillo que integre estos valores evaluativos y comunicativos.
Concepto
Un informe evaluativo es fundamentalmente un dispositivo de comunicacin, de comunicacin evaluativa. El concepto que proponemos se ajusta a este enfoque.
El informe evaluativo es un instrumento de comunicacin escrita, clara e inteligible, entre
el evaluador (emisor) y el receptor de la evaluacin que contiene la informacin evaluativa, los juicios de valor (valorativos y evaluativos) y las propuestas.
El desarrollo de la evaluacin
Caractersticas
De lo expuesto se deduce que las caractersticas principales del informe evaluativo son
dos: el contenido evaluativo y la comunicacin. Es decir, el valor de un determinado informe evaluativo est relacionado con su contenido, que no puede ser otro que expresar
informacin evaluativa rigurosamente obtenida y los juicios de valor preferentemente
evaluativos, y su potencial comunicativo. Aqu nos referiremos a esta segunda caracterstica ya que la primera ha sido expuesta con detalle en esta obra.
Para comprender mejor la funcionalidad del informe evaluativo desde el punto de vista
comunicativo se describen los factores implicados en todo proceso comunicativo.
Los principales factores del proceso comunicativo son los siguientes:
a) Emisor. El evaluador/es.
b) Receptor. El destinatario o destinatarios de la evaluacin, esto es, las audiencias.
c) Interacciones comunicativas. Los flujos de comunicacin entre emisor y receptor y
los escenarios de comunicacin utilizados.
c) Canal. El vehculo de comunicacin utilizado. El informe escrito en un formato
determinado es el canal habitual de los informes evaluativos.
d) Mensaje. El contenido de la comunicacin expresa significados que deben ser comprendidos e interpretados en las interacciones comunicativas. El contenido de los
informes evaluativos est formado por la informacin evaluativa procesada, los
juicios de valor y las propuestas.
e) Ruido. Las distorsiones comunicativas entre emisor y receptor debidas a causas
diversas que tienen que ver con los propios factores del proceso comunicativo o
con el entorno.
111
INTERACCIONES:
CANAL
EMISOR
Posicin
Circunstancia
flujos, escenarios
MENSAJE:
SIGNIFICADOS:
informacin
RECEPTOR
Posicin
Circunstancia
comprensin, interpretacin
RUIDO:
distorsin
112
El informe evaluativo escrito elaborado por el emisor desde su posicin y circunstancia se remite o
comunica al receptor el cual comprende sus significados y los interpreta desde su posicin y circunstancia.
El desarrollo de la evaluacin
c) Con todo, la comunicacin puede estar afectada por ruidos que la dificultan o
alteran. Estos ruidos pueden ser debidos a motivos distintos, internos del propio
proceso comunicativo (agentes de la comunicacin, mensaje, canal, etc.) y externos como, por ejemplo, personales (personalidad, expectativas, motivaciones, estatus, etc.), organitzativos (roles, conflictos, dependencia, tamao, estructura, etc.).
Los problemas principales de la comunicacin son: la omisin, esto es, la no explicitacin
o eliminacin de fragmentos de informacin que dificulta la correcta comprensin e interpretacin por parte del receptor, y la distorsin que altera los significados. La distorsin
puede producirse o potenciarse debido a factores individuales de los comunicantes como,
por ejemplo, la edad y posicin del receptor, la percepcin de los comunicantes (estatus y
prestigio), la defensa perceptual, la estereotipia negativa, la dominancia de la posicin
previa, etc., a factores organizativos como el tamao y estructura de la organizacin, la
comunicacin horizontal o vertical, etc., y a otros factores contextuales.
Estas cuestiones deben ser tenidas en cuenta por los evaluadores una vez concluido el
proceso evaluativo en el momento de expresar la evaluacin realizada mediante los informes. En parte estos problemas pueden limitarse mediante una buena gestin de la comunicacin, pero en cualquier caso hay que ser conscientes de su existencia y de una alteridad sustantiva entre emisor y receptor por lo respecta a la comprensin e interpretacin
de la informacin evaluativa. Esto puede verse como un problema estructural o como una
oportunidad de comunicacin ininterrumpida que emplea el dilogo racional en la construccin dialgica de la realidad social. La naturaleza constructiva y democrtica de la
funcin evaluativa refuerza este enfoque.
Estructura formal
Integra los siguientes factores:
Datos identificatorios del informe.
Los juicios de valor: los generales o valorativos que suelen elaborarse al final y presentarse al principio, y los especficos o evaluativos relacionados con los objetivos
de la evaluacin.
Las propuestas: guas para la accin institucional en forma de orientaciones para la
adopcin de decisiones, criterios para la optimizacin de los procesos comunicativos, pautas para la gestin transformacional de las innovaciones, etc.
113
114
El desarrollo de la evaluacin
INFORME EVALUATIVO
INSTITUCIN: ________________________________________________________________
OBJETO DE EVALUACIN: _______________________________________________________
EVALUADOR/ES:____________________________________
FECHA:__________
AUDIENCIAS:_________________________________________________________________
rganos que reciben el informe y fecha de emisin
1. JUICIOS DE VALOR
VALORACIONES GENERALES:
115
Objetivo 2:
2. PROPUESTAS
116
RESUMEN
La metaevaluacin
oda accin evaluativa, como se ha estudiado, se inicia con la planificacin y concluye con el informe evaluativo que traduce en lenguaje comunicativo los aspectos ms
sustantivos del proceso desarrollado.
Una vez finalizada una determinada evaluacin es cuando se suscitan preguntas sobre su
adecuacin y funcionalidad. Algunas de estas cuestiones son: qu ha aportado la evaluacin?, para qu sirve, realmente era adecuado el objeto y los objetivos de evaluacin?, los instrumentos de evaluacin y su contenido han permitido profundizar en el
objeto?, hay una relacin satisfactoria entre los recursos destinados a la evaluacin y lo
que ha aportado?, etc.
Todo proceso de gestin evaluativa, ya lo hemos dicho, es un circuito de informacinconocimiento que se inicia con una apuesta para incrementar el conocimiento prctico
sobre una determinada materia (diseo evaluativo), continua con la aplicacin de las previsiones planificadas y finaliza con los resultados de la evaluacin. Es en este momento
cuando puede considerarse la relacin existente entre la apuesta inicial y los resultados
efectivos obtenidos; el principio y el final de la evaluacin aparecen unidos. En efecto,
toda evaluacin se inicia con el diseo de una estrategia de evaluacin que relaciona las
intencionalidades (mente) con la realidad (entorno), pues bien al final se vuelve a esta
misma relacin pero a la luz de los resultados, mientras que durante el proceso de desarrollo evaluativo la atencin est ms centrada en los aspectos internos de aplicacin
(tcnica y proceso).
Estas ideas pueden resumirse mediante la figura 1.
En general toda actividad evaluativa, como cualquier otra actividad humana, est enmarcada en unas coordenadas de espacio-tiempo que la singulariza. Es decir, toda evaluacin
desarrollada sucede en un contexto determinado; es un producto histrico y por tanto
limitado.
Esta reflexin es coherente con los contenidos tratados en el captulo primero, en que se
caracterizaba la evaluacin como una sistemtica cientfica en el marco de las Ciencias
Sociales.
El conocimiento inmediato que procura la evaluacin tiene un valor especfico asociado a
las intencionalidades que lo promovieron, pero no acaba aqu. La experiencia nos muestra que la generacin de conocimiento emprico en cualquier rea de actividad intencional humana resulta eficiente ya que produce un saber que resulta eficaz a la prctica. As
lo expresa a las claras, por ejemplo, la evolucin de la medicina en este siglo que ha explorado su propio campo de accin mediante el anlisis emprico y su interpretacin asegu-
119
INICIO
FINAL
ENTRADA
PROCESO
DISEO
DESARROLLO
EVALUATIVO
EVALUATIVO
a. Estrategia de la evaluacin
a. Produccin de la
informacin
b. Instrumentacin de la
evaluacin
b. Juicios de valor
SALIDA
c. Informe
Evaluativo
120
Relacin de
planificacin entre
intenciones y entorno
Relacin de
resultados entre
intenciones y
entorno
La metaevaluacin
121
En este apartado vamos a considerar algunos factores relevantes del proceso de gestin evaluativa ordenados en diferentes reas que permiten dibujar un sistema metaevaluativo.
a) Relacin entre entorno y planificacin
Adecuacin de la intencin evaluativa que se expresa en el diseo evaluativo con relacin a las caractersticas del entorno en que se desarrolla el proceso evaluativo. Se trata de la adecuacin entre las caractersticas del
entorno institucional y la estrategia e instrumentacin adoptadas en la evaluacin.
Oportunidad de la intencin evaluativa expresada en el diseo evaluativo con
relacin al ambiente y expectativas institucionales.
b) Justificacin del objeto de evaluacin
Criterios cientficos o necesidades institucionales basados en la experiencia
contrastada.
122
La metaevaluacin
Entorno:
Evaluacin:
PLANIFICACIN
DESARROLLO
Justificacin
Objeto de
Evaluacin
123
CONTEXTUALIZACIN DE LA EVALUACIN
Los factores internos del proceso evaluativo, por ejemplo, la relacin entre los cuatro factores de la planificacin, exigen el ejercicio de capacidades y destrezas tcnicas por parte
de los evaluadores para que el proceso tenga calidad. Pero ello no basta. Adems es necesario acertar en la oportunidad y adecuacin de la estrategia, en el enfoque adoptado y,
especialmente, en la funcionalidad prctica de la evaluacin. En este sentido, tienen especial inters los factores mencionados que relacionan la evaluacin con el entorno: la planificacin, al inicio, y el desarrollo, al final.
Acertar en una evaluacin, esto es, que al final resulte funcional y prctica requiere no
errar en el enfoque, que tcnicamente se concreta en la estrategia y la instrumentacin
evaluativa.
ZONA DESCONOCIDA
HORIZONTE DE SUCESOS
ZONA CONOCIDA
124
FIGURA 3. Elementos de contextualizacin de la evaluacin.
a) El horizonte de sucesos
Lo que acontece en una institucin o, ms concretamente, las conductas que se
expresan en la vida institucional y que son susceptibles de observacin forman un
peculiar horizonte de sucesos. Por lo que concierne a una determinada accin evaluativa, el horizonte de sucesos estara formado por las conductas que habitualmente se dan sobre el tema u objeto de evaluacin. Por ejemplo, si queremos evaluar la
calidad de los equipos docentes de un centro educativo, el horizonte de sucesos estara formado por:
1. Las conductas de los docentes en los equipos de trabajo: conductas formales e
informales; conductas orientadas a las tareas o al propio grupo; las relaciones
interpersonales y afectivas, las conductas individuales, etc.
2. Las realizaciones o productos derivados de la accin, tales como programas,
materiales, recursos, etc.
La metaevaluacin
b) La zona conocida
Esta formada por la informacin-conocimiento inmediato que est en la base de las
conductas y realizaciones que aparecen en el horizonte de sucesos.
El binomio informacin-conocimiento expresa, en una interpretacin simple, la interrelacin existente entre la informacin externa, esto es, lo que se sabe en general y
est publicado, y el conocimiento interno, es decir, lo que saben y saben hacer personas concretas, as como tambin las actitudes y expectativas implicadas en la accin.
Siguiendo con el ejemplo del punto anterior entran dentro de la zona conocida los
siguientes elementos:
1. Los conocimientos y las destrezas especficas implicadas en la accin.
2. Las expectativas, actitudes y motivaciones.
3. El conocimiento operativo con relacin al tema de evaluacin.
La informacin-conocimiento que expresan las planificaciones de los equipos
docentes.
La informacin-conocimiento que contiene el desarrollo. Resultados de la gestin de los equipos. Indicadores de calidad (eficacia y eficiencia).
La informacin-conocimimiento derivado de las expectativas y motivaciones
(ambiente y cultura interna).
c) La zona desconocida
Est formada por el potencial de conocimiento y desarrollo personal e institucional.
Expresa la zona de crecimiento posible. Desde un punto de vista objetivo es la informacin-conocimiento mediato susceptible de ser incorporado por la institucin y aprendido y desarrollado por las personas. En el ejemplo que contemplamos expresara:
1. Los conocimientos, habilidades y destrezas a adquirir.
2. Las expectativas, actitudes y motivaciones a desarrollar.
3. La informacin-conocimiento que puede pueda incorporarse con relacin al tema
de evaluacin.
La informacin-conocimiento que podran contener las planificaciones de los
equipos docentes.
125
126
Decimos que la estrategia evaluativa est situada en la zona conocida cuando la informacin evaluativa obtenida, como consecuencia de la aplicacin de los instrumentos de
evaluacin, expresa nicamente datos e informacin que est inmediatamente presente,
es decir, que es conocida por los agentes institucionales implicados en la accin. Es cuando la evaluacin no aporta informacin aadida con relacin a la informacin circulante
(conocimientos, destrezas y actitudes de los agentes).
La imagen que expresara esta eventualidad la encontramos en figura siguiente.
ZONA DESCONOCIDA
HORIZONTE DE SUCESOS
ZONA CONOCIDA
Estrategia
Evaluativa 1
La metaevaluacin
En este caso, la funcionalidad de la evaluacin es estrictamente comunicativa. La evaluacin viene a trasformar el conocimiento operativo en datos e informacin proporcionando una oportunidad de dilogo entre los agentes implicados. La estrategia evaluativa centrada en la zona conocida cumple una funcin de espejo: la realidad operativa es reflejada en la informacin evaluativa propiciando un cierto distanciamiento que favorezca la
comunicacin y el autoconocimiento.
ZONA DESCONOCIDA
HORIZONTE DE SUCESOS
Estrategia
Evaluativa 2
ZONA CONOCIDA
FIGURA 5. Estrategia evaluativa 2: relacin entre zona conocida y desconocida.
127
128
La funcionalidad de esta evaluacin resulta muy incierta, ya que, por un lado, puede
suscitar flujos comunicativos centrados en lo que no somos y no tenemos; en lo que
podramos hacer o tener, pero que, en cualquier caso, queda lejano de la realidad inmediata que se vive. Por otro lado, puede funcionar como un potente acicate que promueva el cambio al vislumbrar otras alternativas que puedan juzgarse ms adecuadas y
efectivas. En definitiva, la funcionalidad de esta estrategia depende del tipo de organizacin y de las caractersticas de las personas directamente relacionadas con el tema
evaluado, especialmente sus actitudes y motivaciones, as como su capacidad de compromiso.
La figura siguiente expresa este modelo.
ZONA DESCONOCIDA
Estrategia
Evaluativa 3
HORIZONTE DE SUCESOS
ZONA CONOCIDA
La metaevaluacin
Analizar todos los mbitos y elementos descritos en los dos apartados anteriores, as como
las relaciones que hay entre ellos dibuja una compleja red de informacin interna y externa que puede ser interesante para investigadores, pero para las necesidades de autoevaluacin institucional resulta evidentemente excesivo.
Por ello, proponemos a continuacin un sencillo procedimiento metaevaluativo. Consiste
en una ficha en que recoger informacin y opiniones de diversos agentes sobre el proceso evaluativo desarrollado con la intencin de obtener una visin contrastada y plural de
la evaluacin con sus virtudes y defectos.
No obstante, el estudio que se ha realizado de la metaevaluacin en este captulo resulta
pertinente al subrayar la importancia de tres factores asociados a la gestin evaluativa:
a) Los aspectos tcnicos internos del proceso evaluativo que hay que prever en el
diseo y garantizar en el desarrollo.
b) Los aspectos personales y sociales. La importancia de las personas y grupos de la
institucin con relacin a la viabilidad de la evaluacin.
c) Los aspectos contextuales que tienen que ver con la adecuacin y funcionalidad de
la estrategia evaluativa adoptada.
Los factores de anlisis metaevaluativo que recoge la ficha indicada se centran en los
siguientes aspectos: Factores del diseo evaluativo, factores del desarrollo evaluativo, utilidad de la evaluacin, implicacin en la evaluacin (participacin y comunicacin), tiempo empleado.
129
ANOTACIONES
Escenario
DISEO
Objeto
Objetivos
Instrumentos
Recursos
Apliacin
Instrumentos
DESARROLLO
130
Procesamiento
Informacin
Sesin
evaluacin
Resumen/
Informe
COMUNICACIN
PARTICIPACIN
UTILIDAD
(funcionalidad)
TIEMPO EMPLEADO
(adecuacin)
OPINIONES
Ejemplos de planificacin
evaluativa
133
TRIMESTRE 2
PROCESO EVALUATIVO
a) Elaboracin Diseo
DE-Rs
b) Desarrollo:
Aplicacin instrumentos:
INSTR-1
INSTR-2
INSTR-3
INSTR-4
134
INSTR-5
INSTR-6
procesamiento
informacin
Sesin de
evaluacin
Informe evaluativo
c) Comuniacin
FICHA GANTT
TRIMESTRE 3
OBJETO DE EVALUACIN
El aprendizaje del concepto de suma por parte de los alumnos de primer curso de Educacin
Primaria.
OBJETIVOS DE EVALUACIN
1. IDENTIFICAR el signo de la suma.
2. DESCRIBIR la adquisicin del procedimiento operativo de la suma como expresin del concepto de suma.
3. RELACIONAR la operacin de sumar con hechos cotidianos.
INSTRUMENTOS DE EVALUACIN
nmero
tipo
descripcin
1 (1)
PR.
2 (2)
PR.
3 (2)
PT/AD
4 (3)
CUEST
5 (3)
CUEST
RECURSOS
a. Personales:
Evaluador/es: Profesor del ciclo inicial de Primaria y Coordinador del ciclo inicial de Primaria.
Tcnico/s.
Participantes: Todos los alumnos del primer curso del ciclo incial.
EVALUATIVO.
FICHA
SNTESIS DEL
DE-RS.
135
PR.
COLUMNA DE PALABRAS
Viajar, correr
Juntar, agrupar
[imagen de un coche]
Luz, iluminar
136
[imagen de unas tijeras]
Cortar
+
Parar, detenerse
Abrir, cerrar
FICHAS
PR.
1
+
137
PT/AD
1. PROCEDIMIENTO DE SUMAR:
Disposicin de los elementos de la suma: sumandos, suma y signo de sumar:
Periodo observado
Todo el curso
Nmero de casos
observados
ltimo trimestre
Nmero de sumas
con una disposicin
correcta
% correcto
Nmero de sumas
con una disposicin
correcta
% correcto
Errores ms frecuentes:
Orden
sumandos
Utilizacin del
signo de suma
Lnea separacin
entre sumandos y
suma
138
2. FUNCIONALIDAD DE LA SUMA:
Correccin de los clculos de adicin:
Periodo observado
Todo el curso
Nmero de casos
observados
ltimo trimestre
ltimo trimestre
Nmero de casos
observados
Nmero de sumas
con una disposicin
correcta
% correcto
CUEST
1. Si tienes dos manzanas y te regalan tres ms. Cuntas manzanas tienes en total?
139
3. Si tu compaero tiene 5 colores en el estuche y t le dejas otros 3 para pintar su dibujo.
Cuntos colores tiene ahora tu compaero?
FICHAS
CUEST
A continuacin hay algunas sumas dispuestas como t conoces. Inventa un ejemplo en que
se aplique.
Por ejemplo:
4
+
Ahora hazlo t:
1
140
+
6
7
8
2
10
5
4
9
NOTA: Este cuestionario puede cumplimentarse de forma oral o escrita por parte de los alumnos, segn proceda.
141
SESIN DE EVALUACIN E INFORME
[creacin de los juicios de valor y resumen escrito]
Sesin de evaluacin:
Agentes: Evaluador/es:_____________________________________________________
Participantes: ____________________________________________________
____________________________________________________
Proceso a seguir:
a. Comunicacin de la informacin evaluativa procesada:
b. Dilogo evaluativo: expresin de los juicios de valor, individuales e intersubjetivos:
c. Expresin escrita de las informaciones y juicios de valor en un Informe.
Tiempo empleado:
_______________h.
FICHA
1. JUICIOS DE VALOR
GENERALES [juicios valorativos]
142
Objetivo 2:
Objetivo 3:
2. PROPUESTAS
FICHA
2. INFORMACIN EVALUATIVA
[Informacin procesada procedente de los instrumentos de evaluacin]
los juicios de valor se fundan en esta informacin
Juicios
[relacin]
143
FICHA
Experiencias de
gestin evaluativa
El inters de estas instituciones por incorporar la autoevaluacin en los procesos de gestin interna como recurso de mejora, calidad e innovacin se concret en la bsqueda de
ideas y modelos que les aportaran una metodologa especfica para llevar a cabo sus
estrategias de evalacin.
Tuvimos la oportunidad de compartir esta motivacin en marcos de formacin de docentes o de directivos tanto en Catalua como en Euskadi. El aprendizaje supuso reflexionar
sobre la cuestin evaluativa y su gestin. En concreto ensayar y hacer elaboraciones de
planificacin evaluativa en un contexto formativo de seminario y de taller de evaluacin.
Despus estos centros educativos llevaron su experiencia a sus centros respectivos y
tuvieron la iniciativa de introducir la autoevaluacin en sus prcticas ordinarias de gestin.
En esta obra se recogen cuatro ejemplos, pero los centros educativos que han vivido esta
experiencia son muchos ms. Por una cuestin de espacio y de oportunidad hemos seleccionado estos cuatro casos, correspondientes a objetos de evaluacin del mbito organizativo y curricular, en un intento de ejemplificar la funcionalidad del modelo estudiado.
Las experiencias que presentamos corresponden a instituciones educativas que han tenido la amabilidad de autorizar la publicacin de diseos evaluativos propios elaborados y
desarrollados en sus procesos de gestin interna segn el modelo GE-Rs.
145
146
OBJETO
La funcionalidad de la coordinacin de los rganos tcnico-pedaggicos del centro. Curso
1998-99.
OBJETIVOS
1. IDENTIFICAR Y ANALIZAR los elementos formales de las reuniones: convocatoria, orden del
da, proyecto anual, actas, documentacin, tiempo, puntualidad, duracin.
2. APRECIAR Y COMPARAR los roles de los participantes en las reuniones.
3. REVISAR Y EXPLICAR los resultados de los acuerdos y las realizaciones de las reuniones.
4. DISTINGUIR Y DESCRIBIR la utilidad de las reuniones.
INSTRUMENTOS
nm (obj.)
tipo
descripcin
1 (1)
CUEST
2 (2)
PT/OB
3 (2)
ENTR.
4 (3)
PT/AD.
5 (3)
CUEST
6 (4)
ENTR.
A. Personales:
a. Evaluadores: Dos profesores de cada etapa educativa del centro (E. Infantil, E. Primaria, ESO,
y Bachilleratos) designados por la direccin .
b. Participantes: Instr.1: Dos miembros del grupo seleccionados al azar.
Instr.3: Coordinador y un miembro del grupo al azar.
Instr.5: Coordinador y dos miembros del grupo al azar.
Instr.6: Todos los miembros del grupo.
B. Materiales:
a. Bienes:
Fotocopias, tiempo de los evaluadores y participantes, base datos para procesar informacin.
b. Servicios: Asesoramiento.
A. FICHA SNTESIS FS-00.
147
1 (1)
CUEST
ETAPA EDUCATIVA:_______________________________CICLO:______________________
RGANO TCNICO-PEDAGGICO:______________________________________________
1. Se reciben las convocatorias con la antelacin suficiente?
___Siempre
___Nunca
___Nunca
3. El rgano dispone de un plan de trabajo que contenga las prioridades, las tareas bsicas a
desarrollar y las metas a alcanzar?
___S, ___No
Observaciones:
4. Las reuniones son coherentes con un plan de trabajo decidido y aprobado anteriormente?
___Siempre
___Nunca
Observaciones:
148
___Nunca
Observaciones:
6. Se entrega documentacin complementaria en las reunioens?
___Siempre
___Nunca
Observaciones
7. La documentacin que se entrega es til?
___Siempre
___Nunca
Observaciones:
8. Todos los miembros del grupo asisten puntualmente a las reuniones?
___Siempre
___Nunca
Observaciones:
9. Se cumplen los horarios de finalizacin de las reuniones?
___Siempre
___Nunca
Observaciones:
B. FICHAS
CON LOS
INSTRUMENTOS
DE EVALUACIN.
2 (2)
PT/OBS
ETAPA EDUCATIVA:_______________________________CICLO:_____________________
RGANO TCNICO-PEDAGGICO:_____________________________________________
1. Observar y registrar los siguientes roles:
MIEMBROS GRUPO
ROLES DE TAREA
A,b,c,d,e,f,g,h,i,j,k,l
ROLES GRUPALES
ll,m,n,o,p,q,r,s
ROLES
INDIVIDUALES
t,u,v,w,y,z
Persona 1
Persona 2
Persona 3
Persona 4
Persona 5
Persona 6
Persona 7
Persona 8
Persona 9
Persona 10
ROLES ORIENTADOS A LAS TAREAS DEL GRUPO
a. Promover-colaborar
b. Pedir opiniones
c. Dar informacin
d. Dar opiniones
e. Coordinar
f. Orientar
g. Criticar-valorar
h. Activar (estimular)
i. Buscar informacin
j. Elaborar trabajos
k. Poner en prctica
l. Registrar
ROLES INDIVIDUALES
s. Agresor (ataca problemas y grupo)
t. Destructor (negatividad, resistencia
u. Quien busca reconocimiento
v. Quien se autoconfiesa (suministra
sentimientos subjetivos, intuiciones...)
149
3 (2)
ENTR.
ETAPA EDUCATIVA:_______________________________CICLO:______________________
RGANO TCNICO-PEDAGGICO:______________________________________________
1. Valora la eficacia del rgano en cuanto al logro de los objetivos, desarrollo de las tareas propuestas, etc.
___Ninguna
___Poca ___Bastante
___Mucha
Observaciones (sugerencias)
.Las reuniones del equipo son tiles para avanzar?:___________________________________
.El tiempo de aprovecha adecuadamente?:__________________________________________
2. Valorar el ambiente ordinario del grupo durante las reuniones (puntuar de 0 a 4)
___Crispado: discusiones con descalificaciones y agresividad.
___Tenso: discusiones vivas y personalizadas.
___Formalizado: No pasa nada. Poca participacin. Un ritual de reunin.
___Dialogante: El tono del discurso de los diferentes participantes permite interacciones dialgicas.
150
___Poco ___Bastante
___Mucho
Observaciones:
4. La relacin entre los profesores del equipo docente es la adecuada para lleva a cabo las tareas?
___Nada
___Poco ___Bastante
___Mucho
Observaciones:
5. Citar los puntos fuertes y dbiles del grupo:
FUERTES
DBILES
4 (3)
PT/AD.
ETAPA EDUCATIVA:_______________________________CICLO:______________________
RGANO TCNICO-PEDAGGICO:______________________________________________
1. Anlisis de las actas o resmenes de las reuniones (periodo desde diciembre hasta marzo):
FECHA
DURACIN
TEMAS TRATADOS
APROBACIN
APLICACIN
Programac
Recursos
SEGUIMIENTO
INCIDENTES
Tiempo
151
5 (3)
CUEST.
ETAPA EDUCATIVA:_______________________________CICLO:______________________
RGANO TCNICO-PEDAGGICO:______________________________________________
1. Existe un ambiente de trabajo positivo para llevar a cabo los acuerdos adoptados en las reuniones?
___No, nunca ____ A veces ___S, generalmente
Observaciones:
2. El equipo trabaja de forma cooperativa?
___No, nunca ____ A veces ___S, generalmente
Observaciones:
3. La organizacin de las reuniones permite la adopcin de acuerdos por parte del equipo?
___No, nunca ____ A veces ___S, generalmente
Observaciones:
4. Los acuerdos adoptados son asumidos por todos los componentes del equipo?
___No, nunca ____ A veces ___S, generalmente
152
Observaciones:
5. Citar las realizaciones ms significativas del equipo de trabajo desde el inicio de curso. Han
transcurrido ____meses.
6. Hay dificultades para llevar a trmino los acuerdos adoptados en las reuniones.
___S
___No
___Alta ___Mediana
___Baja
Observaciones:
8. Se hace previsin de los recursos necesarios para llevar a cabo los acuerdos adoptados en las
reuniones?
___No, nunca ____ A veces ___S, generalmente
Observaciones:
9. Se planifica y coordina la puesta en marcha de los acuerdos adoptados en las reuniones?
___S
___No
5 (3)
CUEST.
ETAPA EDUCATIVA:_______________________________CICLO:______________________
RGANO TCNICO-PEDAGGICO:______________________________________________
10. Se aplican las deciones que afectan al trabajo docente en las aulas.
___S,
___No
En caso afirmativo, citar las decisiones ms relevantes adoptadas que se hayan aplicado en el
aula.
11. Se valoran los efectos que producen las lneas de actuacin derivadas de los acuerdos de las
reuniones?
___No, nunca ____ A veces ___S, generalmente
Observaciones:
153
6 (4)
ENTR.
ETAPA EDUCATIVA:_______________________________CICLO:______________________
RGANO TCNICO-PEDAGGICO:______________________________________________
1. Valorar la utilidad de las reuniones. Puntuar de 0 a 4 los tems siguientes.
___ Las reuniones son un ritual que sirve para encontrarse con colegas, pero son poco tiles.
___Las reuniones son tiles como marco de comunicacin interpersonal y profesional.
___Las reuniones son un marco de coordinacin necesario.
___Las reuniones potencian el valor del trabajo de los docentes.
___Las reuniones potencian el valor de las personas que participan.
___Las reuniones son un marco de debate y de reflexin profesional.
___Las reuniones generan un ambiente motivador intelectual y profesionalmente.
___Las reuniones son efectiva: se adoptan decisiones tiles, se establecen criterios comunes de
accin, se coordinan las actuaciones, etc.
___En las reuniones siempre hablan los mismos; todo gira alrededor de las mismas personas.
154
2. Con relacin a las reuniones, como marco de coordinacin entre docentes, expresar las propuestas, sugerencias o cambios que se consideren necesarios o interesantes.
155
OBJETO
La resolucin de problemas aritmticos, geomtricos y de medida en la Educacin Primaria,
durante el curso 1998-1999.
OBJETIVOS
1. VERIFICAR los resultados de aprendizaje de los alumnos en la resolucin de problemas
2. ANALIZAR Y VALORAR el trabajo de los docentes con relacin a los problemas.
INSTRUMENTOS
nm (obj.)
tipo
descripcin
1 (1)
PRUEB
2 (1)
PT/OB
3 (2)
CUEST
156
RECURSOS
A. Personales:
a. Evaluadores: 2 profesores del centro educativo.
b. Participantes:
Instr.1: _____Alumnos de los cursos finales de los tres ciclos de la Educacin Primaria.
Instr.2: _____Alumnos de los cursos finales de los tres ciclos de la Educacin Primaria.
Instr.3: _____Profesores que imparten el rea de Matemticas en la Educacin Primaria.
B. Materiales:
a. Bienes:
b. Servicios:
1(1)
PRUEB.
1. Mira el dibujo y sus dilogos. Escribe los nmeros que correspondan en los Recuadros, y haz la
operacin.
Hay un dibujo que representa la lnea de meta de una carrera de coches.
Hay dos coches que ya la han pasado; uno que la est pasando; y se ve
uno que llega, pero todava no la ha pasado.
2. Por la maana han visto 38 gatos negros, y por la tarde 16 perros y otros 19 gatos negros.
Cuntos gatos negros han visto a lo largo del da?
157
> Operaciones:
B. FICHAS
1 (1)
PRUEB.
2. PROBLEMA DE MEDIDA: Pedro para ir a la escuela recorre 4 Km. cada da, y Luisa 3.422 metros.
Cuntos metros recorre ms Pedro que Luisa?
158
1 (1)
PRUEB.
8,6 cm.
2. PROBLEMA ARITMTICO: Una familia formada por un matrimonio y tres hijos menores de 14
aos van al circo. La entrada de adulto cuesta 1.250 Pta. y la de menor de 14 aos cuesta 750
Pta. Si la madre ha pagado con un billete de 5.000 Pta. qu cambio le han devuelto?
159
2 (1)
PT/OB.
Profesor: ___________
1. En la ficha de observacin del trabajo de los alumnos que tiene el profesor hay items que
hacen referencia a la resolucin de problemas?
___S
___No
160
3. Descripcin de las anotaciones del profesor:
TIPO DE PROBLEMA
Logros
Respuesta
-Medicin
-Geometra
-Aritmtica
Errores
Operacin
Respuesta
Operacin
Otras Observaciones
3 (2)
CUEST.
Profesor: ______________
1. CONTENIDOS Y OBJETIVOS. Seala si tienes en cuenta lo siguiente,
S NO
161
(...)
Observaciones:
162
__Utilizando los conocimientos previos se hace una planificacin: situacin inicial, transformacin i situacin final.
__
__Se piden los datos e informaciones conocidas y desconocidas.
__
__Se hace un dibujo para ilustrar las diferentes situaciones.
__
__Se hacen las o la operacin correspondiente.
__
__Se da la respuesta.
__
__Se compara entre los compaeros de clase.
(...)
(...)
Consideras que hay que seguir estos pasos porqu dan un buen resultado.
3. RECURSOS. Los recursos que sueles utilizar. Analiza la utilizacin que se hace de los distintos recursos.
S
NO
RECURSOS
Libro de texto:
163
Material complementario de elaboracin propia:
Material informtico:
Actividades orales:
Actividades evaluativas:
(...)
(...)
4. EVALUACIN. Procedimientos de recogida de informacin y correccin que utilizas y comentario de su grado de utilizacin.
a. Procedimientos de obtencin de informacin. Valora de 0 a 3 segn su importancia y utilizacin.
__Observacin en el aula de la implicacin del alumno y de sus respuestas (comprensin de
enunciados, planificacin, resolucin de operaciones, resultado final).
__Observacin sistemtica del cuaderno del alumno (identificacin de logros y errores).
__Preguntas en la pizarra.
__Realizacin de pruebas.
__Trabajos individuales y/o colectivos.
164
b. De los procedimientos citados en el apartado anterior cules utilizas para evaluar y calificar
al alumno. En el caso de ser ms de uno qu proporcin tiene asignada cada uno.
165
166
167
Lecturas previas.
Actividades en relacin con las mismas.
Puesta en comn de las mismos con el fin de unificar marcos conceptuales al respecto:
Aportaciones tericas por expertos.
Trabajo en grupo (respetando los equipos de centro si los hay).
Puesta en comn y comunicacin de los diseos e instrumentos elaborados.
Evaluacin
Diaria:
Final:
Temporalizacin
Fase intensiva:
Fase extensiva:
168
CURSOS DE EVALUACIN INTERNA DE CENTROS
Fecha
Idioma
Lugar
Curso 1996-97
10-14 marzo
Castellano
Bilbao
Curso 1997-98
19-24 enero
Castellano
Bilbao
Curso 1998-99
11-15 enero
Castellano
Bilbao
Curso 1999-00
18-22 octubre
Euskara
COP Vitoria
8-12 noviembre
Castellano
COP Donostia
Curso 00-01
20-24 noviembre
Castellano
Bilbao
11-15 diciembre
Euskara
Bilbao
Fase extensiva
La elaboracin de los proyectos de evaluacin, diseo y desarrollo del mismo, se realizan
en grupo, de un mismo centro si participan varias personas de uno, o de distintos si deciden abordar el mismos objeto de evaluacin. Hasta el momento se han realizado 49 proyectos.
Castellano
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
169
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
170
28.
29.
30.
31.
32.
Conclusiones
Los coordinadores pensamos que el profesorado encuentra en la evaluacin un excelente
modo de perfeccionamiento. El anlisis de la informacin, la reflexin que requiere el
hacer un jucico fundamentado lleva a la comprensin de la naturaleza y sentido de la
prctica educativa y permite modificar pautas de comportamiento, actitudes y las concepciones que sobre ella se manejan.
A travs del taller se aprende el concepto y funcin de la evaluacin, al mismo tiermpo
que se desarrollan capacidades tcnicas (elaboracin y aplicacin de diseos evaluativos)
y habilidades sociales (participacin en los procesos de informacin conocimiento, compartir valores, marcos conceptuales y pasar del juicio intrasubjetivo al intersubjetivo que
genera la reflexin compartida y con ella el aprendizaje colectivo).
Asimismo, tienen la posibilidad de dotarse de modelos adecuados y prcticos de gestin
evaluativa y aprender a aplicarlos de forma terico-prctica (ensayo-error con asesoramiento de correccin).
Se desarrollan actitudes favorables a la evaluacin, que posteriormente pueden promover
en el centro una cultura que la integre en todas las tareas ordinarias del mismo.
El modelo de gestin evaluativa GE-Rs resulta muy funcional por su simplicidad, ya que
la estructura evaluativa es la menor posible, y por la especificidad, puesto que el centro
educativo determina el objeto/s evaluativos en funcin de sus intereses y recursos. As
mismo posibilita una relacin eficiente de correspondencia y adecuacin entre las tres
partes bsicas de la evaluacin: estrategia, instumentos y juicios de valor. La estrategia
evaluativa (objeto y objetivos de evaluacin), los instrumentos de evaluacin (adecuacin
interna y congruencia externa con stos proporcionando informacin significativa, diversa y plural sobre ellos). Los juicios de valor fundamentados en la informacin obtenida a
travs de los instrumentos implican procesos de intersubjetividad, es decir, cuando a travs del dilogo, centrado en el anlisis de la informacin obtenida las personas del grupo
llegan a compartir juicios de valor.
A travs de los curso, hemos comprobado que la evaluacin tiene una funcin especfica
de generacin de conocimiento prctico que resulta necesario para la orientacin de las
decisiones comunicativas y transformacionales de las instituciones escolares, y que funciona como un recurso que retroalimenta las acciones evaluadas con informacin-conocimiento, aportando significacin, valor y sentido. Por todo ello es un recurso importante
de creacin cultural y aprendizaje de las instituciones.
EL C.P. Zamakola de Bilbao es un centro pblico, dependiente del Gobierno Vasco, con
cerca de 500 alumnos de 2 aos a 6 de Primaria y 42 profesores.
Imparte enseanza en los modelos lingsticos B (euskera y castellano) y
D (en euskera, con el castellano como asignatura).
171
Es uno de los barrios donde se asent el ltimo movimiento migratorio al Pas Vasco, por
lo que la gran mayora de sus habitantes son castellano parlantes.
Se encuentra ubicado en la periferia de Bilbao, en el barrio de La Pea,; barrio que por su
situacin tiene relaciones vecinales bastante estrechas y donde el colegio es un referente
cultural muy importante.
Es un Centro que lleva ms de 15 aos participando en Proyectos de Innovacin y de
Formacin en Centro; sobre todo en temas relacionados con el tratamiento de la diversidad, la convivencia y la metodologa de las lenguas(euskera y castellano).
Destacar, que tanto los Proyectos de Innovacin como los de Formacin en Centro han
respondido a necesidades detectadas por el Profesorado y llevadas a la prctica.
172
OBJETO
La funcionalidad del Proyecto de Formacin de Centro: Metodologa de las lenguas para el tratamiento de la diversidad de los alumnos .
OBJETIVOS
CRITERIOS DE VALOR
1. VERIFICAR la adecuacin del trabajo realiza- 1a El 80% de los objetivos se han logrado y en
do con repecto a la programacin (contenidos, los plazos establecidos.
plazos).
2. DESCRIBIR Y VALORAR las opiniones del profesorado sobre el Proyecto de Formacin, as
como su valor como recurso de formacin
docente y el grado de satisfaccin.
3. COMPROBAR la implicacin del profesorado 3a El 90 % del material utilizado con los alumnos ha sido elaborado o revisado en el equipo
con el proyecto y el proceso de trabajo.
de ciclo.
4. IDENTIFICAR las aplicaciones metodolgicas 4a Que en cada aula se hayan puesto en prcintroducidas en las aulas como consecuencia tica, al menos, el 50 % de los acuerdos metodolgicos consensuados.
de la formacin.
5. ANALIZAR la coherencia entre el material de 5a El 70 % del material aportado a los alumnos
alumno elaborado, y las pautas metodolgicas posibilita la lnea metodolgica consensuada.
consensuadas.
6. DESCRIBIR Y VALORAR la funcionalidad ope- 6a El 70 % del alumnado de cada ciclo opera
rativa del mtodo de trabajo, a partir de las adecuadamente con el mtodo de trabajo.
respuestas de los alumnos ante los cambios
introducidos.
173
INSTRUMENTOS DE EVALUACIN
N
OBJ.
TIPO
DESCRIPCIN
P/Compr.
Cuest.
Entrevista
P/Observ.
5
6
5
5
P/AnDoc.
P/Compr.
P/Observ.
NORMAS DE APLICACIN
AGENTES: Coordinadores del Proyecto
Profesorado
Asesora externa
Asesora del C.O.P.
174
AUDIENCIAS: Profesorado
Alumnado
Asesores externos
NEGOCIACIN: Con los profesores
Que: - objetivos, criterios, instrumentos.
- Cuando se van a relizar las pruebas y como.
- Conclusiones a sacar > quin / como.
- Propuestas de mejora > quin.
- Que tipo de Informe se presentara > Departamento.
> Claustro.
> Consejo Escolar.
TEMPORALIZACIN:
Enero: Elaborar diseo de evaluacin. Consensuar criterios, tipos de instrumentos y normas de
aplicacin.
Febrero: Elaboracin de instrumentos. Analizarlos en Comisin Pedaggica y Ciclos.
Consensuarlos.
Marzo: Del 16 al 27 - Aplicacin de Instrumentos (1 Fase). Anlisis de datos.
Abril: Consensuar conclusiones. Consensuar tipo de informes provisionales.
Meta evaluacin parcial.
(...)
(...)
Mayo: Evaluacin de los Asesores externos.
Junio: (1 quincena) - Aplicacin de instrumentos (2 Fase). Anlisis de datos y conclusiones.
Triangulacin de datos: - de distinto grado
- de distintos momentos.
(2 quincena) - Elaboracin del informe definitivo. Meta evaluacin final.
NORMAS TICAS
* Anonimato en los instrumentos 2, 3.
* Reflejar en el informe las opiniones mayoritarias y aquellas que se piden expresamente.
* No valoraciones sobre las opiniones o datos que d cada profesor sobre su prctica educativa. Solo criterios constructivos, aportaciones. No se evaluan personas, se evaluan
actitudes.
RECURSOS
HUMANOS
- Participantes: Profesorado y alumnado.
- Responsables: Coordinadores del Proyecto.
- Asesores: Coordinadora del curso de evaluacin:
Coordinadora del COP
Asesora de Infantil
- Colaboradores (ordenador): Juanjo y Ricardo.
175
MATERIALES
- Disket.
- Ordenador.
- Bibliografa:
- La evaluacin comunicativa. Jess Rul Gargallo.
- Como en un espejo. Santos Guerra.
- Aproximacin a la funcin de la evaluacin en Educacin. Jess Rul.
- Competencia de la direccin, en la Evluacin del Centro. Nuria Borrel Felip.
- La autoevaluacin de Centros como garanta social de la calidad educativa.
- La memoria evolutiva del Centro Educativo. Jess Rul Gargallo.
FUNCIONALES
- Tiempos.
* Evaluadores > (total de horas).
* Profesorado >
(...)
(...)
* Asesores externos: Coordinadora del Proyecto > 8 h.
Coordinadora del COP
> 10 h.
Coordinadora de Infantil > 10 h (evalu)
- Tecnolgicos
* Instrumentos: elaborados (anexos)
* Diseos: Modelo simplificado de diseo DE - RS. Jess Rul
* Escalas: Aspectos a Evaluar en un Centro Educativo. Santos Guerra
REUNIONES EVALUATIVAS
CONTENIDO. ASISTENTES. FECHAS
Con el Profesorado:
1.- 26 de enero: Exponer al Claustro, la necesidad de iniciar la evaluacin y como podra
ser (a grandes rasgos) > 1 hora.
2.- 29 de enero: Consensuar criterios, instrumentos, normas de aplicacin (2 h. - PIF).
3.- 2 y 9 de febrero: Analizar instrumentos en Comisin Pedaggica > 2 horas.
176
(...)
* Aproximadamente 40 h. para:
- Propuestas de trabajo.
- Sacar datos y primeras conclusiones.
- Propuesta de tipo de informe.
- Elaboracin de los Instrumentos..
- Elaboracin de los informes provisionales y definitivos.
* Con la Coordinadora del Proyecto de Evaluacin.
- 3 das a 2 h. para seguimiento.
- 4 horas para exposicin al grupo.
INFORMES EVALUATIVOS
Receptores:
A) - Claustro.
B) - Consejo Escolar.
C) - Departamento de Educacin.
Tipos:
Agentes
177
(...)
Datos/informacin necesaria:
- Actas de reuniones.
- Datos obtenidos.
- Anotaciones sobre proceso seguido.
Metodologa
- Analizan sobre todo el proceso seguido: implicacin del profesorado, rigor, informes
elaborados, no adecuacin del diseo, ...
- Contrastan sus observaciones con la Comisin Pedaggica y los asesores externos.
Temporalizacin
- Parcial para el 22 de abril.
- Definitiva - 2 quincena de junio.
ANEXOS: Instrumentos, datos obtenidos, informes, etc.
178
CENTRO:
ZAMAKOLA IP.
Participantes:
(indicar el cargo)
Directora
Telfono:
944168023
Fax:
944168023
179
(...)
Ha participado todo el profesorado del centro. Ha sido coordinado por la jefe de estudios y la
directora (Que son a la vez las coordinadoras del proyecto).
Con el profesorado se consensu la temporalizacin, las normas ticas, los instrumentos, las
conclusiones, los informes a elaborar y los receptores de dichos informes.
Al tener que realizar este proceso de evaluacin durante el 2 trimestre cuando se seguir trabajando en este proyecto hasta final de curso, los datos obtenidos as como las conclusiones
que aparezcan son parciales. Esto obliga a repetir gran parte del proceso a final de curso y a
dejar las propuestas de mejora para ese momento.
Al no contar todava con la evaluacin que realizarn la asesora de Infantil y los del COP, no
ha sido posible realizar una triangulacin de datos.
180
181
182
Estamos seguros que este esfuerzo evaluativo redundar en que la labor presupuestaria se haga,
adems de con eficacia, con transparencia, lo que ayudar a que se de en el centro un clima de
confianza y que todos nos sintamos participes de ello.
OBJETIVOS
CRITERIOS DE VALOR
INSTRUMENTOS DE EVALUACIN
N
OBJ.
TIPO
TTULO
ENTR
CUE
P/Anl.Doc
NORMAS DE APLICACIN
AGENTES: Equipo Directivo.
AUDIENCIAS: Departamentos, Alumnos/as, Equipo Directivo.
NEGOCIACIN:
QUIENES: Jefes de Departamento, Comisin Econmica y Equipo Directivo.
QUE: Criterios de valor e instrumentos de evaluacin.
183
TEMPORALIZACIN
15/25 ENE: Formacin para hacer un diseo evaluativo. 30 Horas.
03/17 FEB: Negociacin y elaboracin instrumentos.
23/27 FEB: Aplicacin de instrumentos y recogida de datos.
09/13 MAR: Anlisis y elaboracin del borrador.
23/25 MAR: Redaccin del informe final.
26/27 MAR: Metaevaluacin.
RECURSOS
HUMANOS: Miembros de los departamentos, representantes Padres-Madres, Alumnado (1 aula
por nivel).
(...)
(...)
MATERIALES: Materiales entregados en el cursillo de formacin y cuestionarios extrados del Plan
de Evaluacin de Centro docentes 92-93.
FUNCIONALES: Cursillo formativo sobre la evaluacin interna. Modelo de diseo evaluativo de
Jess Rul. Instrumentos de recogida de informacin de elaboracin propia.
REUNIONES EVALUATIVAS
05 FEB: Negociacin sobre los criterios a aplicar, con la participacin del Equipo Directivo.
06 FEB: Negociacin sobre la utilidad de los instrumentos elaborados.
12 MAR: Reunin para la reordenacin de la informacin recogida.
13 MAR: Reunin para el anlisis de los resultados de las encuestas.
24 MAR: Redaccin del informe.
184
INFORMES EVALUATIVOS
RECEPTORES: Equipo directivo y Consejo Escolar.
TIPOS: nico para ambos.
METAEVALUACIN
AGENTES: Equipo Directivo.
METODOLOGA:
Bibliografa
seleccionada
187
las aulas. En esta obra se estudian las metodologas observacionales. Se incide especialmente
en las estrategias, tcnicas, procedimientos, etc. de observacin como instrumento inherente
al propio proceso educativo.
NEVO, D.: Evaluacin basada en el centro. Un dilogo para la mejora: 1997.
Este libro presenta un marco copceptual comprensivo para la evaluacin basada en centro
junto con los mtodos que pueden ser utilizados en el centro en beneficio de toda la comunidad escolar.
Sus aportaciones provienen de la experiencia real de trabajo con centros educativos en varios
pases.
Insiste en el significado de la evaluacin como base para el dilogo, y de la necesidad de desarrollar un nuevo discurso para la evaluacin en general y para la evaluacin basada en los centros docentes en particular.
La propuesta que plantea no puede considerarse sinnima de evaluacin interna ni antnima
de evaluacin externa, sino como una combinacin de ambas Ediciones Mensajero. Bilbao
PADUA, J.: Tcnicas de investigacin aplicadas a las Ciencias Sociales, Mxico: FCE, 1987.
188
Texto tcnico centrado en las metodologas de investigacin orientadas a la descripcin, explicacin, prediccin e interpretacin de la realidad social. Se centra especialmente en los aspectos operacionales de la investigacin como el muestreo, las tcnicas de recogida y anlisis de
datos cuantitativos como el programa estadstico SPSS, tablas de contingencia y medidas de
asociacin, anlisis de regresiones mltiples, anlisis factorial, etc. En el captulo seis se estudian diversas escalas: la de medicin de actitudes e intereses de Thurstone, y la de Guttman, o
la escala de medicin del diferencial semntico de Osgood.
RINCON del, D. et al.: Tcnicas de investigacin en Ciencias Sociales, Madrid: Dykinson, 1995.
Texto tcnico en que se analizan con cierto detalle diversas tcnicas de investigacin en el
campo de las Ciencias Sociales. Se analizan las clsicas tcnicas de recogida y procesamiento
de informacin de datos cuantitativos. Tambin se estudian tcnicas cualitativas aplicadas a la
investigacin social.
RUL, J.: El Projecte de Gesti del Centre Educatiu, Barcelona: Generalitat de Catalunya, Departament
dEnsenyament, 1990.
Obra inicial de una coleccin de seis libros coordinada por el mismo autor. En este libro se desarrolla la idea de Proyecto institucional del centro educativo que integra diversos instrumentos
de gestin organizativa, ordenados en el medio y corto plazo. El Proyecto de gestin del cen-
Bibliografa seleccionada
tro educativo est formado por seis instrumentos de gestin. Dos a medio plazo: el Proyecto
educativo y el Reglamento de Rgimen interior. Tres a corto plazo: el Plan anual, el Presupuesto
y la Memoria evaluativa. Este ciclo de gestin anual integra la autoevaluacin institucional
como factor de retroalimentacin de los sucesivos ciclos anuales.
RUL, J.: El Plan anual del centro educativo: Instrumento de gestin e innovacin, Barcelona: Vicens
Vives, 1991.
Es un libro centrado en el desarrollo de un modelo sencillo de planificacin anual de la gestin
del centro educativo. Abunda en tcnicas y ejemplos tiles de planificacin. El Plan anual es un
instrumento nico de gestin anual, elaborado por el equipo directivo, estructurado en planes
especficos que aportan flexibilidad a los procesos de planificacin, seguimiento y evaluacin
final. Merece especial atencin la evaluacin de los objetivos anuales que contiene el plan
mediante un diseo autoevaluativo especfico.
RUL, J.: La evaluacin comunicativa, factor de desarrollo humano, organizativo y curricular. Valorar,
medir y evaluar. Aula de Innovacin Educativa, n 38, Barcelona: 1995, pgs 70-77.
En este artculo se plantean las ideas sobre evaluacin que constan en el captulo primero. Se
aborda el fenmeno evaluativo desde un enfoque superador de la dualidad entre lo cuantitativo y lo cualitativo en que estuvo atrapado durante decenios. Se analiza la diferencia entre valoracin, medicin y evaluacin con lo que se pretende huir tanto del reduccionismo de la medicin como de la valoracin. Se define la evaluacin como un fenmeno de construccin de
valores ajustados a la informacin proporcionada por mtodos cuantitativos y/o cualitativos en
funcin de las caractersticas del objeto evaluado. Se resalta el carcter comunicativo de la
evaluacin en los procesos de construccin social.
RUL, J.: La Memoria evaluativa del centro educativo, en Gairin, J, y Darder, P. Estrategias e instrumentos para la gestin educativa, Barcelona: Praxis, 1996, pgs. 172/1-15.
Artculo en que se desarrolla la idea de la autoevaluacin institucional vinculada al proceso de
gestin interna en los mbitos organizativo y curricular. La Memoria evaluativa es un instrumento de gestin autoevaluativa anual de los objetivos priorizados por el equipo directivo, de
la gestin presupuestaria, de la gestin curricular en las aulas, y de los resultados del aprendizaje de los alumnos. Este artculo es un resumen del libro en cataln con el mismo ttulo publicado por la Generalidad de Catalua el ao 1995.
RUL, J.: Evaluar, moda o necesidad?. Aproximacin a la funcin de la evaluacin en educacin.
Aula de Innovacin Educativa, n 70, Barcelona: 1998, pgs 73-76.
Artculo centrado en el estudio de la funcin que cumple o debera cumplir la evaluacin en el
mbito educativo. Se sale al paso de determinados usos y abusos de pretendidas evaluaciones.
189
190
Bibliografa seleccionada
Esta comunicacin da a conocer una experiencia de formacin con equipos directivos de centros pblicos de la comunida autnoma sobre evaluacin interna de centros educativos. Su
contenido se fundamenta en la contribucin de la autoevaluacin al aprendizaje de las instituciones escolares en la medida que promueve el autoconocimiento, la creacin de nuevos
patrones de pensamiento colectivo a travs del anlisis de las representaciones que la escuela
hace de s misma y del dilogo como paso necesario para el aprendizaje en equipo. Interrogarse
por las conexiones que existen entre los modelos, creencias y representaciones internas, las
actuaciones cotidianas y los resultados de las mismas, promueve una visin holstica del centro educativo y potencia el pensamiento sistmico.
191
Agradecimientos
sta obra, que presenta un modelo de gestin autoevaluativa, es fruto de las interacciones entre la reflexin terica sobre evaluacin y la experiencia autoevaluativa
desarrollada por profesionales de los mbitos social y educativo.
Incorporar la evaluacin en las propias tareas de gestin institucional supone un reto que
afecta a las convicciones, actitudes y destrezas, pero, a continuacin, hay que lograr que
las energas que se dedican a la evaluacin sean prcticas y tiles, lo que supone un reto
que afecta a los modelos, tecnologas, procedimientos y estrategias.
Conseguir un modelo de gestin autoevaluativa que sea prctico y funcional, esto es, til
y factible y, por otro lado, coherente con los postulados de evaluacin ha sido el reto. Este
libro es el resultado de este largo proceso.
Por ello debemos agradecer a muchas personas e instituciones su colaboracin.
La primera versin de este modelo evaluativo se aplic para evaluar el programa PASI
(Plan de Accin Social Integral), desarrollado por el rea de Asuntos Sociales y Juventud
del Ayuntamiento de Barcelona entre los aos 1992 y 1994. Agradezcemos la confianza
de la Concejala, Eulalia Vintr, y de la Coordinadora del rea, Carmen Turr as como la
colaboracin de su equipo. Esta iniciativa hizo posible el primer ensayo de gestin evaluativa segn el sistema que despus hemos denominado GE-Rs.
Expresamos reconocimiento a Julia Redondo, Jefa del Servicio Instituto de Ciencias de la
Educacin (ICE) de la Universidad Politcnica de Catalua, a Araceli Adam, Coordinadora
del Programa, y al equipo de profesionales del ICE, por su iniciativa y colaboracin en el
desarrollo de un programa de formacin en autoevaluacin de centros educativos en el
marco del programa europeo Scrates-Comenius (accin 3.1.) que permiti aplicar el
modelo GE-Rs.
Manifestamos nuestro agradecimiento al Departamento de Educacin Universidades e
Investigacin en las personas de Nekane Agirre por su apoyo y colaboracin en el
Programa de Formacin de Equipos Directivos, a Maite Larraaga, por su colaboracin
en la publicacin, a Luis Otano, por sus orientaciones y sugerencias y de manera muy
especial al equipo de formacin del programa coordinado por Alejandro Campo.
Agradezcemos a los alumnos del Mster de Gestin y Direccin de Instituciones Educativas de la Universidad de Barcelona, participantes en los Seminarios de Evaluacin de los
cursos 1997-1998, 1998-1999 y 1999-2000 . A los directores/as participantes en los cursos de Evaluacin Interna realizados en Gipuzkoa, Araba y Bizkaia los cursos 1996-97-98-
193
99-2000 y 2001, su inters y dedicacin al elaborar diseos evaluativos segn el modelo GE-Rs.
Ha sido especialmente fecunda la dedicacin de los directivos de los centros educativos
de la comarca del Peneds (Barcelona), participantes en el Seminario de Autoevaluacin
promovido por el Departamento de Enseanza de la Generalidad de Catalua, que durante el curso 1998-1999 ejercitaron y aplicaron el modelo GE-Rs en las tareas de autoevaluacin de sus centros educativos.
Finalmente, expresamos reconocimiento a los centros educativos, pblicos y privados, que
aplican el modelo GE-Rs para desarrollar sus tareas de evaluacin interna.
194