1

Era uma vez

um docente,
amigo crtico,

2
Avaliao?

http://www.radiodramarevival.com/wp-
content/uploads/2009/06/mblogoo.jpg
A bala de prata da eficcia educacional

Scheerens, 2004
http://rickdunham.com/wp-content/uploads/2012/02/iStock_000011080836XSmall.jpg
-Ajuste de contas!!!
 O RESISTENTE
AVALIAO
(o mau da fita)

O AVALIADOR
(o bom)

http://tomstock.photoshelter.com/img/pixel.gif
 Captulo I

Projeto Projeto
Piloto Qualidade
Europeu XXI
 Ganhei alguma experincia,
conheci alguns mtodos,
que me permitiram definir uma
sequncia de passos de organizao da
auto-avaliao da escola,
Mas comeando por algumas questes
prvias dado que o problema n 1 se
revelou, nessa altura, o do take off, da
descolagem
Por onde
comear?
9
 Questes
prvias:
Onde queremos ir?
Quando queremos l chegar?
Com quem?
Como?
10
 Onde queremos
chegar?

Vrias alternativas se colocam:

Prestar contas a
Melhorar a escola 11
 Quando
queremos
chegar l?
Em Set 2013?
Em Julho 2014?
12
 Quanto
tempo?
Um ano lectivo?
Dois anos?
13
Ao nvel da:
coordenao
aco
recepo

Quem nos
acompanhar? 14
Como fazer? Divulgar a avaliao

Interpretar os resultados

Tratar e analisar os dados

Recolher a informao

Referencializar

Traar o plano
(Alaiz, Gis e Gonalves, 2003, adaptado)

15
Iniciar o processo
 Equipa de Avaliao Como se faz? - 1
Mandato (durao, etc.)
Contedo da funo

Grupo de Focagem

Publicitao do
processo de avaliao

Iniciar Escolha de um amigo crtico

o processo - I 16
 Inventariar prticas de Como se faz? - 2
avaliao

Analisar:
campo de foras,
perspectivas dos stakeholders

Perfil da escola

Iniciar
Questes de avaliao
o processo - II
17
 Como se faz? - 3
Seleccionar tcnicas de
recolha de informao

Planear (calendarizar, ..)

as tarefas de avaliao

Traar o plano
Iniciar o processo 18
 Como se faz? - 4
FONTES:
Normativas
Tericas
PROCESSO:
Participado
mltiplos intervenientes:
Direco da Escola
Assembleia de Escola
Docentes
=> Comunidade educativa

PRODUTO:
Referencializar Referente especfico
Dimenses, reas
Traar o plano Indicadores + Descritores
19
Iniciar o processo
 Como se faz? - 5

Rigor tico
Respeito pelos Rigor cientfico:
respondentes Validade e fiabilidade
Triangulao

Tratar e analisar os dados

Recolher a informao
Referencializar
Traar o plano
20
Iniciar o processo
 Como se faz? - 6

Quem? Como?

Divulgar a avaliao
Interpretar os resultados
Tratar e analisar os dados
Recolher a informao
Referencializar
Traar o plano 21
Iniciar o processo
Avaliao

Divulgar a avaliao

Interpretar os resultados

Tratar e analisar os dados

Deciso
Recolher a informao

Referencializar

Traar o plano

Iniciar o processo
Plano de melhoria

Aco
22
 QUALIDADE da AVALIAO

Comunicar Planear
a avaliao a avaliao

UTILIDADE EXEQUIBILIDADE

RIGOR LEGITIMIDADE

Tratar Recolher
a informao a informao

4MARO2005
Meta-avaliao
Avaliao das Organizaes Escolares 23
- O estado a que isto
chegou
Uma viso impressionista
Diversidade

Espao
Juventude
vazio
(Alaiz, 2009) 25
Resultados da auto-avaliao
Em algumas escolas, grande empenhamento de
alguns professores, incluindo diretores
(e, por vezes, de alguns outros membros da comunidade educativa)
Relatrios de boa qualidade tcnica
Mas,
Reduzido impacto da auto-avaliao:
Relatrios que ningum lia;
Inconsequncia em termos de tomada de deciso;
Rotinas organizacionais mantidas intactas;
Frustrao dos membros das equipas de auto-avaliao

26
Do relatrio de 2011 da IGE
 - Resolver os dilemas,
ultrapassar os problemas
 Resolver os dilemas,
ultrapassar os problemas
Princpio

Meio

Fim
Princpio 1
 1

ATITUDE

Princpio

2
Atitudes diferentes, opostas:
necessrio avaliar a Escola?

No Sim
 necessrio avaliar a Escola?
NO!!!
H muitas razes
para no fazer avaliao
 52
razes
para no
fazer
avaliao

Segone, M.
(Ed.). (2006).
New Trends in
Development
Evaluation:
Unicef-CEE-
CIS/IPEN.
http://www.preval.info/programa/wp-content/uploads/2008/08/011-segone-evaluacion-democratica1.pdf
 necessrio avaliar a Escola?

H interesses que
SIM legitimam ou
exigem a avaliao
 Necessidade de quem?
A que nvel? Exemplo Designao

.
.
 Necessidade de quem?
Nvel Exemplo Designao
OCDE? UE?
Internacional Macro 2 (mega)
BM? UNESCO?
 Necessidade de quem?
Nvel Exemplo Designao
OCDE? UE?
Internacional Macro 2 (mega)
BM? UNESCO?
Ministrio?
Nacional Macro 1
Governo?
 Necessidade de quem?
Nvel Exemplo Designao
OCDE? UE?
Internacional Macro 2 (mega)
BM? UNESCO?
Ministrio?
Nacional Macro 1
Governo?
Escola?
Organizacional Meso
Agrupamento?
 Necessidade de quem?
Nvel Exemplo Designao
OCDE? UE?
Internacional Macro 2 (mega)
BM? UNESCO?
Ministrio?
Nacional Macro 1
Governo?
Escola?
Organizacional Meso
Agrupamento?
Professor? Pai?
Individual Micro
Autarca?
Princpio 2
 REFERENCIAL
MODELO

Princpio

ATITUDE
 MODELO ?
Estruturados

Contingenciais
 MODELO ?
Origem
empresarial

Origem
acadmica
 Duas concepes do objecto Escola,
dois modelos de avaliao interna

Escola Escola
= EMPRESA = organizao
especfica

Modelos estruturados Modelos contingenciais

ISO, EFQM, Projecto Piloto Europeu

Projecto Qualidade XXI
CAF
58
 Fontes do referencial
Nacionais:
Objetivos gerais (Constituio, Lei de Bases,)
Objetivos especficos: Lei 31/2002
Referencial da IGE

Locais:
Projeto educativo
Tericas:
Modelos: CIPP, McBeath, AVES,
Conceito de Escola 59
 CIPP Stufflebeam

CONTEXTO

PRODUTO
PROCESS
O
INPUT

60
 Utilidade do modelo CIPP

O modelo CIPP
o esquema analtico mais
adaptado para sistematizar a
reflexo sobre os indicadores
da educao
(Scheerens, 2004: 95)
61
62
63
 Um modelo sistmico bsico do
funcionamento da escola
Contexto

inputs Processos outputs

Nvel escola
Scheerens, 2005
Nvel sala
de aula
64
Auto-avaliao de escolas

Meio
Mtodo ?
Nmero

Palavra,
imagem
Mtodo ?
Medio

Oralidade,
escrita
 Mtodo: tcnicas ?
Questionrios,
indicadores,
estatsticas

Observao, pesquisa documental,

grupos de discusso, narrativas,
incidentes crt., descritores, metforas
 Medio: presso internacional

Estratgia de Lisboa
UE Objectivos educ (12v indicadores)

Education at a Glance,
OCDE PISA

Objectivos do Milnio
UNESCO EFA, Educao de Qualidade para todos
Medio: presso internacional

Banco Monitoramento e Avaliao

Mundial Projectos de apoio ao desenv

UNICEF
ONU

Projectos de desenvolv
ONGs
 Medio: poltica educativa nacional

Lei 31/2002, Avaliao

externa (IGE)

Avaliao de
Desempenho Docente

Metas dos TEIP,

Contratos de autonomia,
Programa 2015
 Medio = reducionismo,
a crtica dos tericos
Sociologia da Educao:
UK: Governing by numbers
Frana: Gouverner par les instruments
Portugal:
Paradigma contbil
Licnio Lima, A. J. Afonso, Univ. Minho
Mtodo: alternativa medio?

Dilogo,
narrativa
Mtodo:
Nmero

Pluralismo
metodolgico

Palavra
Auto-avaliao de escolas

Fim
 Finalidade?
Eficcia

Desenvolver:
pessoas + organizao
 Questo

Indicadores, metas
Eficcia Ciclos de gesto

Desenvol- Comunicao
vimento
Ciclos de auto-avaliao e
melhoria

Alguns exemplos
 P D
Plan Do
(Planejar) (Executar)

A C
Action Check
(Corrigir) (Checar)
Mltiplas Rampas de ciclo PDSA
http://www.riosalado.edu/intranet/marketing/pdca/spiralImproCycle.png
http://www.neirtec.org/products/evaluation_guide/neirtec_evalguide.pdf
Avaliao = Comunicao

Relatrio Sumrio
Folheto
executivo
1 a 2 pgs
100 pgs. 5 a 10 pgs
 Resolvidos os problemas

AVALIAO
DE
QUALIDADE
Princpio Meio Fim +
Melhoria
eficaz da
escola
- O ajuste de contas
Acabar com a linearidade causal

88
Coprnico: uma inspirao?

Uma revoluo coperniciana

Comear pelo fim

Que
uso da
Fim
avaliao
?
 Acabar de vez com
linearidade causal
modelo mecanicista de gesto
uniformidade da avaliao
paradigma positivista
 Optar por
Paradigma da complexidade
(As escolas so organizaes complexas,
repletas de repetio, rotina, mas tambm
de incerteza, imprevisibilidade, )
Causalidade complexa
Modelo de gesto do caos
 USO DA AVALIAO

SIMBLICO

INSTRUMENTAL CONCEPTUAL

USO DA
AVALIAO
USO, DESUSO, ABUSO
USO, DESUSO, ABUSO
 Identificao dos
utilizadores prioritrios
Profes

? Pais

Funcion Alunos
 The personal factor..
There are 5 key variables that
are absolutely critical in
evaluation use. ...
(Patton, 2012, p.61)
 The personal factor..
There are 5 key variables that
are absolutely critical in
evaluation use. They are, in order
of importance: people, people,
people, people, people.
(Patton, 2012, p.61)
-Narrar as vitrias
ONG: Most Significant Change
Mtodo ?
A mudana mais significativa
 Registar os aspetos positivos
Histrias de sucesso:
De professores
De alunos (contadas pelos prprios)
De pessoal auxiliar

Estratgias que funcionam
 Um instrumento?
Uma folha A4 para cada professor
contar uma histria de sucesso