Beruflich Dokumente
Kultur Dokumente
DAS ESCOLAS
2011-2012
Relatrio
Coleo
Relatrios
FICHA TCNICA
Ttulo
Avaliao Externa das Escolas 2011-2012 Relatrio
Autoria
Inspeo-Geral da Educao e Cincia
Coordenao Geral
Joo Manuel Nunes e Maria Leonor Duarte
Elaborao
Ana Paula Gravito, Antnio Monteiro, Carlos Roque, Eduardo Oliveira, Helena Cristina Afonso, Maria
Leonor Duarte, Maria Margarida Paulo, Pedro Miguel Valadares e Ulisses Quevedo Santos
Fotografia
Acervo da ex-Direo-Geral de Inovao e Desenvolvimento Curricular (DGIDC), atual Direo-Geral da
Educao.
Homologado pelo Secretrio de Estado do Ensino e da Administrao Escolar, Joo Casanova de Almeida, por
despacho de 21 de maro de 2013.
NDICE GERAL
NDICE DE QUADROS .............................................................................................................................................. 5
N D I C E D E FIGURAS............................................................................................................................................ 6
NOTA DE APRESENTAO ....................................................................................................................................... 7
I. QUADRO CONCEPTUAL DA AVALIAO EXTERNA DAS ESCOLAS .................................................................................. 8
1.1 Uma avaliao para a qualidade das escolas Fundamentos do quadro de referncia ................ 8
1.2 Objetivos da avaliao externa das escolas ........................................................................................ 9
1.3 Quadro de referncia para a avaliao externa das escolas.............................................................. 9
II. METODOLOGIA ................................................................................................................................................ 12
2.1 Seleo das escolas avaliadas em 2011-2012 ................................................................................ 12
2.2 Fontes e processos de recolha de informao .................................................................................. 13
2.3 Informao sobre as escolas .............................................................................................................. 13
2.4 Equipas de avaliao........................................................................................................................... 14
2.5 Visita escola ...................................................................................................................................... 14
2.6 Relatrios de escola ............................................................................................................................ 15
2.7 Escala de classificao ....................................................................................................................... 15
2.8 Plano de melhoria da escola ............................................................................................................... 16
2.9 Divulgao ............................................................................................................................................ 16
III. APRECIAO DAS CLASSIFICAES POR DOMNIO ............................................................................................... 17
3.1 Classificaes dos domnios ............................................................................................................... 17
IV. PONTOS FORTES E REAS DE MELHORIA APRESENTADOS NOS RELATRIOS DE ESCOLA........................................... 19
4.1 Pontos fortes e reas de melhoria ..................................................................................................... 19
4.2 Anlise comparativa dos pontos fortes e das reas de melhoria por domnio e campo de anlise .... 21
4.3 Pontos fortes e reas de melhoria mais relevantes .......................................................................... 25
V. ESCOLAS COM CONTRATO DE AUTONOMIA .......................................................................................................... 32
5.1 Classificaes das escolas com contrato de autonomia .................................................................. 32
5.2 Comparao das classificaes das escolas com contrato de autonomia com o total de escolas
avaliadas ..................................................................................................................................................... 33
5.3 Evoluo das classificaes das escolas com contrato de autonomia ........................................... 33
5.4 Apreciaes apresentadas nos relatrios de avaliao externa das escolas com contrato de
autonomia ................................................................................................................................................... 37
NDICE DE QUADROS
Quadro 1 Escolas avaliadas em 2011-2012 ............................................................................................ 12
Quadro 2 - Pontos fortes exemplos de asseres mais frequentes ........................................................ 29
Quadro 3 - reas de melhoria exemplos de asseres mais frequentes ................................................ 30
Quadro 4 Questionrios de satisfao amostra prevista e real ........................................................... 39
Quadro 5 Pessoal docente: principais reas de concordncia e discordncia ...................................... 42
Quadro 6 Pessoal no docente: principais reas de concordncia e discordncia ............................... 42
Quadro 7 Pais e encarregados de educao das crianas da educao pr-escolar: principais reas
de concordncia e discordncia................................................................................................ 43
Quadro 8 Pais e encarregados de educao dos alunos dos ensinos bsico e secundrio: principais
reas de concordncia e discordncia ..................................................................................... 43
Quadro 9 Alunos do primeiro ciclo do ensino bsico: principais reas de concordncia e discordncia ... 44
Quadro 10 Alunos dos 2. e 3. ciclos do ensino bsico e ensino secundrio: principais reas de
concordncia e discordncia ................................................................................................... 45
Quadro 11 Escolas em avaliao em 2012-2013.................................................................................... 67
NDICE DE FIGURAS
Figura 1 Esquema conceptual da avaliao externa das escolas ........................................................... 10
Figura 2 Classificaes por domnio .......................................................................................................... 17
Figura 3 Distribuio das asseres relativas a pontos fortes por domnio e campo de anlise ......... 20
Figura 4 Distribuio das asseres relativas a reas de melhoria por domnio e campo de anlise . 21
Figura 5 Frequncia de pontos fortes e reas de melhoria por domnio e campo de anlise .............. 22
Figura 5a Frequncia de pontos fortes e reas de melhoria no domnio Resultados ........................... 23
Figura 5b Frequncia de pontos fortes e reas de melhoria ................................................................... 24
no domnio Prestao do Servio Educativo ............................................................................ 24
Figura 5c Frequncia de pontos fortes e reas de melhoria ................................................................... 25
no domnio Liderana e Gesto ................................................................................................ 25
Figura 6 Pontos fortes mais frequentes .................................................................................................... 26
Figura 7 reas de melhoria mais frequentes ............................................................................................ 27
Figura 8 Classificaes das escolas com contrato de autonomia por domnio ...................................... 32
Figura 9 Comparao entre escolas com contrato de autonomia........................................................... 33
e total de escolas avaliadas em 2011-2012............................................................................. 33
Figura 10 Escolas com contrato de autonomia: peso dos diferentes nveis de classificao .............. 34
no conjunto dos domnios em 2006 e em 2011-2012 .......................................................... 34
Figura 11 Escolas com contrato de autonomia: avaliao do domnio................................................... 35
Resultados em 2006 e em 2011-2012 .................................................................................. 35
Figura 12 Escolas com contrato de autonomia: avaliao do domnio................................................... 35
Prestao do Servio Educativo em 2006 e em 2011-2012 ................................................ 35
Figura 13 Escolas com contrato de autonomia: diferenas nos nveis de classificao ....................... 36
no domnio Resultados entre 2006 e 2011-2012 ................................................................. 36
Figura 14 Escolas com contrato de autonomia: diferenas nos nveis de classificao ....................... 36
no domnio Prestao do Servio Educativo entre 2006 e 2011-2012 ............................... 36
Figura 15 Grau de satisfao com ensino-aprendizagem, direo e funcionamento, .......................... 41
instalaes e servios, e ambiente, segurana e disciplina .................................................. 41
Figura 16 Documentao solicitada previamente s escolas/agrupamentos ....................................... 46
Figura 17 Adequao dos domnios misso da escola ......................................................................... 47
Figura 18 Relevncia dos campos de anlise includos em cada domnio ............................................ 48
Figura 19 Envolvimento dos rgos, estruturas e outros intervenientes ............................................... 50
na preparao da escola para a avaliao externa ................................................................ 50
Figura 20 Caracterizao dos contactos estabelecidos entre a escola e a IGEC................................... 51
Figura 21 Aspetos da visita da equipa de avaliao ................................................................................ 52
Figura 22 Aspetos do relatrio de avaliao externa ............................................................................... 53
Figura 23 Contributos da avaliao externa para a autoavaliao da escola ........................................ 54
Figura 24 Alteraes ao modelo de avaliao .......................................................................................... 55
Figura 25 Preparao da avaliao externa ............................................................................................. 57
Figura 26 Documentao solicitada previamente s escolas/agrupamentos ....................................... 58
Figura 27 Visita s escolas ......................................................................................................................... 59
Figura 28 Equipa de avaliao ................................................................................................................... 60
Figura 29 Quadro de referncia da avaliao externa ............................................................................. 61
Figura 30 Relevncia dos campos de anlise includos em cada domnio ............................................ 62
Figura 31 Escala de avaliao ................................................................................................................... 63
Figura 32 Alteraes ao modelo de avaliao externa das escolas........................................................ 64
NOTA DE APRESENTAO
O presente relatrio apresenta informao geral sobre a Avaliao Externa das Escolas (AEE) no ano
letivo 2011-2012, no qual foram avaliados 231 agrupamentos de escolas e escolas no agrupadas.
Esta atividade, com incidncia nos jardins de infncia e nas escolas bsicas e secundrias pblicas,
tem sido desenvolvida no mbito da Lei n. 31/2002, de 20 de dezembro, que aprovou o sistema de
avaliao dos estabelecimentos de educao pr-escolar e dos ensinos bsico e secundrio e definiu
orientaes gerais para a autoavaliao e para a avaliao externa.
Na sequncia da proposta de modelo para o novo ciclo de avaliao externa das escolas, apresentada
no relatrio final do Grupo de Trabalho 1, e aps despacho de concordncia do Secretrio de Estado do
Ensino e Administrao Educativa, datado de 13 de outubro de 2011, a ento Inspeo-Geral da
Educao (IGE) foi incumbida de dar continuidade avaliao externa das escolas, no mbito das suas
competncias, previstas no Decreto-Regulamentar n. 81-B/2007, de 31 de julho.
Em novembro de 2011, deu-se incio ao segundo ciclo da avaliao externa das escolas tendo-se
previamente publicitado na pgina Web da ex-IGE os instrumentos utilizados, bem como
posteriormente os relatrios de escola, os contraditrios e as respostas das equipas de avaliao aos
contraditrios.
Este relatrio est organizado em nove captulos. O primeiro apresenta o quadro conceptual da
avaliao externa das escolas; o segundo explicita a metodologia, descrevendo aspetos relativos
operacionalizao da avaliao externa, designadamente a seleo das escolas, a constituio das
equipas de avaliadores e os procedimentos e instrumentos de recolha de informao adotados; o
terceiro captulo analisa as classificaes atribudas nos trs domnios em avaliao; o quarto captulo
aborda os pontos fortes e as reas de melhoria expressos nos relatrios de escola; no quinto captulo
efetuada uma anlise da avaliao externa realizada em 20 agrupamentos de escolas e escolas no
agrupadas que em setembro de 2007 celebraram com o Ministrio da Educao contratos de
autonomia; o sexto captulo oferece informao sobre a aplicao dos questionrios de satisfao a
alunos, pais e encarregados de educao e a trabalhadores docentes e no docentes; o stimo
captulo trata informao sobre a avaliao do processo pelas escolas e pelos avaliadores; o oitavo
captulo aborda aspetos relacionados com o desenvolvimento da atividade de avaliao externa das
escolas em 2012-2013; finalmente, o nono captulo apresenta as consideraes gerais sobre a
avaliao externa das escolas em 2011-2012.
A avaliao externa das escolas pretende constituir um contributo relevante para o desenvolvimento
das escolas. Sendo a avaliao um instrumento para melhorar o ensino e a aprendizagem e os
resultados dos alunos, procura-se incentivar prticas de autoavaliao, promover uma tica
profissional marcada pela responsabilidade, fomentar a participao social na vida da escola e
oferecer um melhor conhecimento pblico do trabalho das escolas.
Promover o progresso das aprendizagens e dos resultados dos alunos, identificando pontos
fortes e reas prioritrias para a melhoria do trabalho das escolas;
RESULTADOS
PRESTAO DO
SERVIO EDUCATIVO
LIDERANA E GESTO
AUTOAVALIAO
Cada um dos trs domnios estruturado em campos de anlise, os quais so explicitados por um
conjunto de referentes, que constituem elementos de harmonizao das matrias a analisar pelas
equipas de avaliao:
RESULTADOS
Resultados acadmicos
Evoluo dos resultados internos contextualizados
Evoluo dos resultados externos contextualizados
Qualidade do sucesso
Abandono e desistncia
Resultados sociais
Participao na vida da escola e assuno de responsabilidades
Cumprimento das regras e disciplina
Formas de solidariedade
Impacto da escolaridade no percurso dos alunos
Reconhecimento da comunidade
Grau de satisfao da comunidade educativa
Formas de valorizao dos sucessos dos alunos
Contributo da escola para o desenvolvimento da comunidade envolvente
10
Prticas de ensino
Adequao das atividades educativas e do ensino s capacidades e aos ritmos de
aprendizagem das crianas e dos alunos
Adequao dos apoios s crianas e aos alunos com necessidades educativas especiais
Exigncia e incentivo melhoria de desempenhos
Metodologias ativas e experimentais no ensino e nas aprendizagens
Valorizao da dimenso artstica
Rendibilizao dos recursos educativos e do tempo dedicado s aprendizagens.
Acompanhamento e superviso da prtica letiva
Monitorizao e avaliao do ensino e das aprendizagens
Diversificao das formas de avaliao
Aferio dos critrios e dos instrumentos de avaliao
Monitorizao interna do desenvolvimento do currculo
Eficcia das medidas de apoio educativo
Preveno da desistncia e do abandono
LIDERANA E GESTO
Liderana
Viso estratgica e fomento do sentido de pertena e de identificao com a escola
Valorizao das lideranas intermdias
Desenvolvimento de projetos, parcerias e solues inovadoras
Motivao das pessoas e gesto de conflitos
Mobilizao dos recursos da comunidade educativa
Gesto
Critrios e prticas de organizao e afetao dos recursos
Critrios de constituio dos grupos e das turmas, de elaborao de horrios e de
distribuio de servio
Avaliao do desempenho e gesto das competncias dos trabalhadores
Promoo do desenvolvimento profissional
Eficcia dos circuitos de informao e comunicao interna e externa
Autoavaliao e melhoria
Coerncia entre a autoavaliao e a ao para a melhoria
Utilizao dos resultados da avaliao externa na elaborao dos planos de melhoria
Envolvimento e participao da comunidade educativa na autoavaliao
Continuidade e abrangncia da autoavaliao
Impactos da autoavaliao no planeamento, na organizao e nas prticas profissionais
11
II. METODOLOGIA
Este captulo descreve os principais aspetos relativos operacionalizao da avaliao externa: a
seleo das escolas avaliadas, a constituio das equipas de avaliadores, os procedimentos e os
instrumentos de recolha de informao adotados.
Tipologia
Totais
Agrupamentos
Escolas No Agrupadas
Norte
55 (20%)
29 (29%)
84 (22%)
Centro
25 (16%)
17 (33%)
42 (20%)
50 (21%)
22 (24%)
72 (21%)
Alentejo e Algarve
23 (20%)
10 (26%)
33 (22%)
TOTAIS
153 (19%)
78 (28%)
231 (22%)
Os valores entre parntesis expressam a relao das escolas avaliadas com o total de escolas existentes em 2011-2012
As 231 unidades educativas avaliadas compreendiam 1015 estabelecimentos de educao prescolar e dos ensinos bsico e secundrio.
12
Questionrios de satisfao
A aplicao prvia de questionrios de satisfao nas escolas em avaliao foi uma das principais
alteraes efetuadas relativamente ao primeiro ciclo de avaliao externa. Assim, em 2011-2012,
foram aplicados questionrios a diferentes membros da comunidade educativa, pretendendo-se
13
14
Os painis, cuja constituio deve respeitar alguns procedimentos previamente estabelecidos pela
IGEC, integram um leque alargado de responsveis e representantes a entrevistar pela equipa de
avaliao: membros do Conselho Geral; representantes da autarquia; direo; representantes dos pais
e encarregados de educao nos grupos e nas turmas e representantes da Associao de Pais e
Encarregados de Educao; alunos, delegados de turma e representantes da Associao de
Estudantes; coordenadores de departamento e responsveis de outras estruturas de coordenao e
superviso pedaggica; diretores de turma e respetivos coordenadores; servios tcnico-pedaggicos;
equipa de autoavaliao; docentes sem cargos atribudos; e assistentes tcnicos e operacionais.
A audio de diversos membros da comunidade educativa e dos parceiros da escola, constituindo uma
forma efetiva de recolha de informao pertinente para a avaliao, segundo mltiplas perspetivas,
visa tambm reconhecer a importncia da participao dos atores locais na vida da escola: pais,
autarcas, empresas, associaes culturais e outros estabelecimentos de educao e ensino.
Excelente A ao da escola tem produzido um impacto consistente e muito acima dos valores
esperados na melhoria das aprendizagens e dos resultados dos alunos e nos respetivos
percursos escolares. Os pontos fortes predominam na totalidade dos campos em anlise, em
resultado de prticas organizacionais consolidadas, generalizadas e eficazes. A escola
distingue-se pelas prticas exemplares em campos relevantes.
Muito Bom A ao da escola tem produzido um impacto consistente e acima dos valores
esperados na melhoria das aprendizagens e dos resultados dos alunos e nos respetivos
15
Insuficiente A ao da escola tem produzido um impacto muito aqum dos valores esperados
na melhoria das aprendizagens e dos resultados dos alunos e nos respetivos percursos
escolares. Os pontos fracos sobrepem-se aos pontos fortes na generalidade dos campos em
anlise. A escola no revela uma prtica coerente, positiva e coesa.
2.9 Divulgao
No cumprimento de um dos objetivos da avaliao externa fomentar a participao na escola da
comunidade educativa e da sociedade local, oferecendo um melhor conhecimento pblico da
qualidade do trabalho das escolas a IGEC tem divulgado a lista das escolas em avaliao e a
documentao fundamental desta atividade. Assim, so disponibilizados um conjunto de documentos
de enquadramento da AEE na pgina da IGEC, para alm da publicao do texto integral dos relatrios,
dos contraditrios apresentados pelas escolas e das respostas das equipas de avaliao aos
contraditrios.
16
80
67,1
70
59,7
60
51,1
50
40,2
40
34,7
30
23,4
20
RESULTADOS
Insuficiente
Excelente
PRESTAO
DO SERVIO EDUCATIVO
0
Bom
0,9
Muito bom
0
Insuficiente
Suficiente
Excelente
Bom
0
Muito bom
0,4
Insuficiente
Suficiente
Bom
Muito bom
(%)
0
Excelente
7,8
5,6
Suficiente
9,1
10
LIDERANA E GESTO
Na sequncia das avaliaes realizadas a 231 escolas destaca-se o domnio Liderana e Gesto que
evidencia os pesos mais significativos de nveis de classificao mais elevados. Corresponde,
simultaneamente, ao nico domnio em que foram atribudas classificaes de Excelente (0,9%) e em
que metade das escolas avaliadas foram classificadas com Muito Bom (51,1%). tambm significativo
o peso de escolas classificadas com o nvel Bom 40,2%. A classificao de Suficiente registou-se
num total de 7,8% de escolas, sendo o segundo valor mais expressivo desta classificao
17
comparativamente com os outros dois domnios. No se registou qualquer escola com a classificao
de Insuficiente neste domnio.
No domnio Prestao do Servio Educativo a classificao de Muito Bom foi atribuda a um tero das
escolas avaliadas (34,7%) e quase 60% obtiveram a classificao de Bom. A classificao de Suficiente
foi atribuda a 5,6% das escolas, o que corresponde percentagem mais baixa desta classificao nos
trs domnios em anlise. A classificao de Insuficiente no foi atribuda a nenhuma das escolas
avaliadas.
O domnio Resultados registou o valor percentual menos significativo de escolas avaliadas com Muito
Bom (23,4%). A classificao de Bom obtm neste domnio a sua expresso mxima ao ser atribuda a
67,1% das escolas avaliadas. tambm neste domnio que a classificao de Suficiente regista o seu
valor mais elevado (9,1%), sendo ainda o nico que regista a classificao de Insuficiente em 0,4% das
escolas avaliadas.
A anlise por nvel de classificao, em cada um dos domnios, permite concluir que:
a avaliao de Excelente foi atribuda apenas no domnio Liderana e Gesto e somente a dois
agrupamentos de escolas (0,9%);
em dois dos trs domnios, a avaliao de Bom constituiu a classificao mais atribuda,
correspondendo a dois teros das escolas no domnio Resultados (67,1%) e a mais de metade
das escolas no domnio Prestao do Servio Educativo (59,7%). No domnio Liderana e
Gesto esta classificao surge em segundo lugar, tendo sido atribuda a 40,2% das escolas
intervencionadas;
a avaliao de Suficiente tem para todos os domnios uma representao inferior a 10% das
escolas avaliadas, mas a sua maior expresso ocorreu no domnio Resultados (9,1%). No
domnio Liderana e Gesto este nvel foi atribudo a 7,8% das escolas, decrescendo para 5,6%
no domnio Prestao do Servio Educativo;
18
Pontos fortes
Da anlise da FIGURA 3, relativa distribuio de pontos fortes, salienta-se que a maioria das asseres
foram categorizadas no domnio Liderana e Gesto (41%), surgindo, em segundo lugar, o domnio
Prestao do Servio Educativo (36%) e finalmente, o domnio Resultados (23%).
no campo de anlise Liderana (31%) que se regista o valor mais elevado de atributos positivos das
escolas, seguindo-se o campo de anlise Prticas de ensino (18%). Embora com menor expresso,
regista-se um nmero significativo de asseres nos campos de anlise Planeamento e articulao
(10%), Resultados acadmicos (9%), Reconhecimento da comunidade (8%) e Monitorizao e
avaliao do ensino e das aprendizagens (8%). O campo de anlise em que foi identificado um menor
nmero de pontos fortes foi o da Autoavaliao e melhoria (4,5%).
19
FIGURA 3 DISTRIBUIO DAS ASSERES RELATIVAS A PONTOS FORTES POR DOMNIO E CAMPO DE ANLISE
Autoavaliao e
melhoria: 4%
Gesto
6%
Resultados
Acadmicos
9%
Liderana
31%
Planeamento e
articulao
10%
Prticas de ensino
18%
Monitorizao e
avaliao do ensino e
aprendizagens 8%
reas de melhoria
Nas asseres registadas como reas de melhoria (FIGURA 4), predomina o domnio Prestao do
Servio Educativo (44%), seguido dos domnios Liderana e Gesto (33%) e Resultados (23%), este
ltimo com a mesma percentagem verificada quando considerado em pontos fortes.
No que diz respeito aos diferentes campos de anlise, observa-se uma distribuio mais repartida das
asseres relativas s reas de melhoria do que s dos pontos fortes. A expresso mais elevada
corresponde dimenso Prticas de Ensino (21%), seguida de Resultados acadmicos, Autoavaliao
e melhoria, e Planeamento e articulao, com valores entre os 14% e os 15%. Apenas 1% das
asseres foram identificadas na categoria Reconhecimento da comunidade.
20
FIGURA 4 DISTRIBUIO DAS ASSERES RELATIVAS A REAS DE MELHORIA POR DOMNIO E CAMPO DE ANLISE
Resultados
Acadmicos
15%
Autoavaliao e
melhoria
15%
Reconhecimento da
comunidade: 1%
Liderana
12%
Planeamento e
articulao
14%
Monitorizao e
avaliao do ensino e
aprendizagens: 9%
21
FIGURA 5 FREQUNCIA DE PONTOS FORTES E REAS DE MELHORIA POR DOMNIO E CAMPO DE ANLISE
125
Resultados
Resultados acadmicos
88
82
Resultados sociais
Reconhecimento da comunidade
119
13
139
169
Planeamento e articulao
254
239
Prticas de ensino
108
105
Liderana e Gesto
Prestao do Servio
Educativo
175
431
Liderana
Gesto
Autoavaliao e melhoria
Pontos fortes
141
86
66
63
171
reas de melhoria
Domnio Resultados
No domnio Resultados, o nmero mais elevado de asseres verificadas quer em pontos fortes quer
em reas de melhoria incide sobre os Resultados acadmicos, embora de forma mais marcada na
distribuio em reas de melhoria do que em pontos fortes.
A distribuio de pontos fortes e reas de melhoria difere nos trs campos de anlise que integram
este domnio. No campo de anlise Resultados acadmicos, as reas de melhoria superam os pontos
fortes, observando-se, em ambos os casos, uma maioria de asseres relacionadas com a evoluo
das taxas de transio/concluso e dos resultados em provas de aferio e exames nacionais. So
tambm frequentes, no caso dos pontos fortes, as referncias diminuio das taxas de abandono e
desistncia e, no caso de reas de melhoria, as asseres que identificam debilidades ao nvel da
qualidade do sucesso e da identificao dos fatores explicativos dos resultados acadmicos menos
positivos.
22
125
Resultados acadmicos
175
88
82
Resultados sociais
Reconhecimento da comunidade
119
13
Pontos fortes
reas de melhoria
O nmero de pontos fortes e reas de melhoria sinalizados na rea dos Resultados sociais
relativamente equilibrado, observando-se, nos primeiros, asseres relacionadas com a participao
dos alunos na vida da escola; com a diversidade de iniciativas que cultivam o sentido de
responsabilidade e o desenvolvimento cvico; e com as estratgias desenvolvidas no sentido da
melhoria do comportamento dos alunos e da disciplina. As reas de melhoria referem-se sobretudo
falta de envolvimento dos alunos na elaborao dos documentos orientadores da Escola; insuficiente
corresponsabilizao destes nas tomadas de deciso e na organizao das atividades; aos
comportamentos perturbadores em sala de aula, com efeitos negativos nas aprendizagens; e ao
impacto limitado das medidas destinadas a combater a indisciplina.
As asseres que incidem sobre o campo de anlise Reconhecimento da comunidade tm uma
expresso muito reduzida nas reas a melhorar identificadas (trata-se do campo de anlise com menor
expresso em termos de reas de melhoria), mas adquirem maior peso no nmero de pontos fortes, e
esto relacionadas sobretudo com os nveis elevados de satisfao da comunidade educativa, com as
formas de valorizao dos sucessos dos alunos e com o reconhecimento do servio educativo prestado
pela escola.
23
Planeamento e articulao
169
254
Prticas de ensino
239
108
Pontos fortes
105
reas de melhoria
24
431
Liderana
Gesto
Autoavaliao e melhoria
141
86
66
63
171
Pontos fortes
reas de melhoria
A distribuio das asseres no campo de anlise Gesto mais equilibrada, embora com um nmero
de pontos fortes ligeiramente superior s reas de melhoria. Se os primeiros salientam sobretudo uma
equilibrada e criteriosa gesto e afetao de recursos humanos e materiais, as reas de melhoria
identificam algumas fragilidades ao nvel da comunicao interna e externa, da capacidade de
elaborao de um plano interno de formao, adequado s necessidades dos trabalhadores e que
promova o seu desenvolvimento profissional. Nalgumas escolas so tambm identificados problemas
na qualidade de alguns servios prestados pela escola, designadamente ao nvel dos refeitrios
escolares.
As asseres relativas a reas de melhoria predominam claramente no campo de anlise
Autoavaliao e melhoria, com incidncia na fragilidade dos processos falta de continuidade e
abrangncia da autoavaliao , na coerncia entre a autoavaliao e a elaborao e implementao
de planos de melhoria, e na insuficiente participao da comunidade educativa. Contudo, alguns
relatrios de escola destacam, como pontos fortes, prticas consolidadas de autoavaliao, com
impacto na organizao escolar e nas prticas profissionais, bem como na definio de planos de ao
para a melhoria.
25
seu conjunto, as asseres representadas nas figuras seguintes representam cerca de 78% do total de
pontos fortes e 72% do total de reas de melhoria identificados pelos avaliadores.
FIGURA 6 PONTOS FORTES MAIS FREQUENTES
Viso estratgica e fomento do sentido de
pertena/identificao com a escola
Desenvolvimento de projetos, parcerias e solues
inovadoras
190
123
68
64
64
60
55
54
52
50
46
43
43
42
41
39
34
33
Os dois referentes em que foram categorizadas mais asseres como pontos fortes, nos relatrios de
escola, inserem-se no domnio Liderana e Gesto e, mais especificamente, no campo de anlise
Liderana: Viso estratgica e fomento do sentido de pertena e de identificao com a escola (190
asseres) e Desenvolvimento de projetos, parcerias e solues inovadoras (123 asseres). Os
aspetos mais realados como pontos fortes do desempenho das escolas so assim: a capacidade de a
direo de topo definir uma viso e uma estratgia para a escola; a coerncia e articulao entre os
documentos estruturantes; a diversificao da oferta formativa, de forma a atender s necessidades
dos alunos e da comunidade; e a capacidade de desenvolvimento de parcerias e de projetos, que
concorrem para a melhoria do sucesso dos alunos. A valorizao das lideranas intermdias e a
capacidade de motivao das pessoas e de gesto dos conflitos so outras dimenses que remetem
para a liderana da escola e que se incluem nos aspetos mais frequentes entre os pontos fortes
identificados.
26
Entre as dimenses mais referidas encontramos depois diversas asseres que se integram no
domnio Prestao do Servio Educativo. de destacar, em primeiro lugar, pela sua relevncia, a
preveno da desistncia e do abandono (68 asseres), alcanado em muitas escolas pela via da
identificao dos fatores que influenciam o abandono e a desistncia, e pelo trabalho de
acompanhamento de situaes de risco, em articulao com as famlias e a comunidade, bem como
pela monitorizao da eficcia/adequao das medidas preventivas e da oferta formativa adotadas.
Importantes so tambm o trabalho cooperativo entre docentes (64 asseres) e a gesto articulada
do currculo (50 asseres), que remetem para o campo de anlise Planeamento e articulao. Por
ltimo, so de referir diversos aspetos ligados ao campo de anlise Prticas de ensino,
designadamente: a adequao dos apoios aos alunos com necessidades educativas especiais (64
asseres), a adoo de metodologias ativas e experimentais no ensino e nas aprendizagens (60), a
adequao do ensino s capacidades e aos ritmos de aprendizagem dos alunos (41 asseres) e a
valorizao da dimenso artstica (39 asseres).
A leitura da FIGURA 6 permite observar igualmente um nmero considervel de pontos fortes
assinalados em vrias dimenses do domnio Resultados, embora com um peso menor do que se
verifica noutros referentes atrs mencionados. Assim, 46 e 43 asseres referem a evoluo positiva
dos resultados acadmicos internos e externos, respetivamente; e 43 assinalam como ponto forte a
participao na vida da escola e assuno de responsabilidades.
Ainda neste domnio, verifica-se que os referentes Grau de satisfao da comunidade educativa e
Formas de valorizao dos sucessos dos alunos recolheram um nmero significativo de asseres
relativas a pontos fortes (52 e 33, respetivamente).
FIGURA 7 REAS DE MELHORIA MAIS FREQUENTES
148
113
93
76
74
57
54
43
38
Qualidade do sucesso
36
35
34
31
27
Relativamente s principais reas de melhoria identificadas nos relatrios de escola (FIGURA 7), os
referentes com mais asseres so o acompanhamento e superviso da prtica letiva (148 asseres);
a gesto articulada do currculo (113); e a viso estratgica e fomento do sentido de pertena e
identificao com a escola (93). Mais concretamente, as equipas de avaliao entendem que as
escolas devem fazer incidir, prioritariamente, os seus esforos na melhoria nas prticas de
acompanhamento, monitorizao e observao direta da prtica letiva em sala de aula, e na rea da
articulao curricular entre os ciclos de escolaridade e entre as prticas pedaggicas. Destacam ainda
a falta de medidas estrategicamente propostas, a ausncia de objetivos e de metas claras,
quantificadas e avaliveis, bem como de planos de ao formalizados para a resoluo dos problemas
e a fraca capacidade de mobilizao da comunidade educativa.
Por outro lado, surgem entre as reas de melhoria mais frequentes, vrios referentes que explicitam o
campo de anlise Autoavaliao e melhoria, destacando-se as asseres que identificam fragilidades
ao nvel da continuidade e abrangncia da autoavaliao, da coerncia entre a autoavaliao e a ao
para a melhoria, e do envolvimento e participao da comunidade educativa na vida da escola.
Igualmente relevantes so as asseres que se situam no campo de anlise Resultados acadmicos,
sobretudo as referncias evoluo dos resultados externos e internos e qualidade do sucesso.
Com o objetivo de ilustrar as tendncias referidas, apresentam-se em seguida alguns exemplos de
asseres includas nos relatrios de escola pontos fortes e reas de melhoria.
28
Viso estratgica e
fomento do sentido de
pertena e de
identificao com a
escola
Desenvolvimento de
projetos, parcerias e
solues inovadoras
Asseres
Alguns exemplos
N.
190
123
Preveno da
desistncia e do
abandono
Trabalho cooperativo
entre docentes
68
64
29
Metodologias ativas e
experimentais
64
60
55
54
Gesto articulada do
currculo
Valorizao das
lideranas intermdias
Grau de satisfao da
comunidade educativa
Asseres
Alguns exemplos
N.
A utilizao regular de metodologias ativas e experimentais no processo ensinoaprendizagem, promotora da valorizao dos saberes prticos
O forte incremento da prtica experimental desde a educao pr-escolar,
contribuindo para o desenvolvimento da curiosidade cientfica das crianas e jovens
Liderana disponvel e aberta do diretor, que tem promovido um clima de escola de
maior cooperao e fomentado o debate e a participao das lideranas intermdias
na tomada de decises atinentes organizao e prestao de servio educativo
O reconhecimento do trabalho desenvolvido pelos coordenadores de departamento
e de disciplina e diretores de turma, para melhorar as aprendizagens dos alunos
52
50
Asseres
Alguns exemplos
N.
Gesto articulada do
currculo
113
30
Evoluo dos
resultados externos
contextualizados
Continuidade e
abrangncia da
autoavaliao
Asseres
Alguns exemplos
N.
76
74
Coerncia entre a
autoavaliao e a ao
para a melhoria
57
Evoluo dos
resultados internos
contextualizados
54
31
(N.)
16
15
14
13
12
11
10
4
2
0
1
Resultados
Excelente
Bom
Suficiente
Liderana e Gesto
Insuficiente
32
Por outro lado, no se registam classificaes de Excelente em nenhum dos trs domnios que
estruturam o quadro de referncia.
No que respeita aos nveis inferiores da escala de avaliao, de referir que em nenhum domnio foi
atribuda a classificao de Insuficiente, e que, nos trs domnios, o nvel Suficiente s se regista numa
escola.
PRESTAO DO SERVIO
EDUCATIVO
Suficiente
Bom
Muito Bom
LIDERANA E GESTO
Excelente
33
na escala de avaliao (com a introduo do nvel Excelente), pelo que se optou por ensaiar algumas
comparaes de carcter geral sobre a evoluo dos resultados destas escolas.
Em ambos os momentos, as escolas obtiveram classificaes que variaram entre os nveis Suficiente e
Muito Bom.
Considerando, em primeiro lugar, as classificaes obtidas pelas 20 escolas nos diferentes domnios
de avaliao, verifica-se globalmente uma evoluo favorvel: o peso das classificaes de Suficiente e
de Bom desce significativamente, ao mesmo tempo que a percentagem de classificaes de Muito
Bom sobe quase para o dobro (FIGURA 10) 3.
FIGURA 10 ESCOLAS COM CONTRATO DE AUTONOMIA: PESO DOS DIFERENTES NVEIS DE CLASSIFICAO
NO CONJUNTO DOS DOMNIOS EM 2006 E EM 2011-2012
70%
60%
57%
60%
50%
40%
35%
32%
30%
20%
11%
10%
5%
0%
Suficiente
Bom
2006
Muito Bom
2011-2012
Com o objetivo de analisar mais detalhadamente esta evoluo, comparmos a distribuio das
classificaes em 2006 e em 2011-2012, nos domnios Resultados e Prestao do Servio Educativo,
sendo possvel observar em ambos uma evoluo positiva das classificaes obtidas pelas escolas.
Assim, no domnio Resultados (FIGURA 11), o nmero de escolas com classificao igual ou superior a
Bom passou de 15 para 19 e o peso das classificaes de Muito Bom quase triplicou, passando de 3
para 8. No domnio Prestao do Servio Educativo (FIGURA 12), embora a avaliao das escolas em
2006 tivesse sido j bastante positiva (18 das 20 escolas registaram classificaes iguais ou
superiores a Bom), observa-se igualmente a subida das classificaes de Muito Bom, passando em
2011-2012 a ser este o nvel de avaliao predominante.
3 Face s alteraes no quadro de referncia (de cinco para trs domnios) e na escala de avaliao (com a introduo do
nvel Excelente), efetua-se num primeiro momento uma comparao do peso de cada nvel de classificao atribudo no
conjunto das escolas e dos domnios.
34
MB
(N.)
MB
15
10
B
B
S
0
2006
2011-2012
Resultados
Excelente
Muito Bom
Bom
12
11
Suficiente
Insuficiente
20
MB
15
MB
10
B
5
B
S
2006
2011-2012
Muito Bom
13
Bom
13
Suficiente
Insuficiente
35
A evoluo das classificaes obtidas por cada escola, nos domnios Resultados e Prestao do
Servio Educativo, est sintetizada nas FIGURAS 13 E 14, destacando-se os seguintes aspetos:
0
(N.)
11
Escolas com
classificao
inferior em 1
nvel
0
Escolas com
classificao
inferior em 2
nveis
6
4
2
0
(N.)
7
1
Escolas com
classificao
melhorada
em 2 nveis
0
Escolas com
classificao
melhorada
em 1 nvel
Escolas com
idntica
classificao
36
37
destacam a existncia de uma viso estratgica, patente nos diferentes documentos estruturantes e
articulada com os objetivos e metas a alcanar. Por outro lado, vrios relatrios referem explicitamente
o papel do contrato de autonomia na mobilizao da comunidade educativa, bem como na
reorganizao e responsabilizao das estruturas intermdias de coordenao educativa e superviso
pedaggica, em torno nos objetivos e metas inscritos no contrato de autonomia.
Tambm associada necessidade de monitorizao do contrato de autonomia, surge em quase todos
os relatrios a referncia existncia de uma cultura de autoavaliao e de acompanhamento dos
resultados e das aes de melhoria implementadas; e em cerca de metade das escolas, estas prticas
so consideradas consistentes, consolidadas, sistemticas e abrangentes. Contudo, uma percentagem
significativa de asseres (cerca de 16%) relativas a reas de melhoria incide sobre este campo de
anlise, apontando sobretudo a necessidade de alargar e consolidar os procedimentos de
autoavaliao existentes.
38
Questionrios
recebidos
Taxa de
resposta
Q1 Docentes
28 124
22 374
79,6%
Q2 No docentes
9 342
8 359
89,5%
9 622
7 660
79,6%
56 644
42 554
75,1%
9 280
8 773
94,5%
47 209
43 025
91,1%
As taxas de resposta foram significativas, situando-se entre 75% nos questionrios dirigidos aos pais e
encarregados de educao dos alunos dos ensinos bsico e secundrio e valores superiores a 90% no
39
caso dos alunos destes mesmos nveis (94,5% de respostas dos alunos do 1. ciclo, e 91,1% dos
restantes).
40
Concordo). Os aspetos que mereceram maior concordncia esto relacionados com o ambiente, a
segurana e a disciplina (78,1%) e, em segundo lugar, com o ensino e aprendizagem (77,2%).
Os alunos revelam graus de satisfao menores do que os restantes grupos relativamente s
instalaes e servios, ao ensino e s aprendizagens, e direo e funcionamento da escola, mas, no
caso desta ltima dimenso, as opes No concordo nem discordo, No sei e No responde adquirem
maior relevncia do que a discordncia. Por outro lado, a percentagem de respostas discordantes
superior quanto a Instalaes e servios (22,9%) e Ensino-aprendizagem (12,8%). A dimenso com
mais apreciaes positivas dos alunos Ambiente, segurana e disciplina (73,8%)
Ambiente,
segurana e
disciplina
Instalaes e
servios
Direo e
funcionamento
Ensinoaprendizagem
78,7
10,9
5,4 5,0
Pais/enc. educao
77,2
13,8
4,4 4,6
Alunos
Docentes/no docentes
Docentes/no docentes
Alunos
12,4
78,1
15,6
73,8
No concordo nem discordo
22,9
16,6
71,1
Alunos
Concordo totalmente/Concordo
20,9
50,2
Pais/enc. educao
12,1
16,8
64,0
Docentes/no docentes
11,9
15,4
68,0
Pais/enc. educao
12,3
9,6
24,7
53,4
4,2 6,5
15,8
73,5
Discordo/Discordo totalmente
4,7
5,5 2,8
12,7
79,0
Pais/enc. educao
Alunos
12,8
17,0
65,5
4,7
7,1
6,0
9,8 2,5
4,9 4,6
7,6 3,0
NS/NR
41
Discordam mais
As salas de aula so
confortveis (25,1%)
Os espaos de desporto e de
recreio da escola so
adequados (19,1%)
Da anlise efetuada, verifica-se que os aspetos com que os docentes esto mais satisfeitos so a
abertura da escola ao exterior, a disponibilidade da direo e a satisfao por trabalhar na escola
(QUADRO 5). Por outro lado, para um nmero relevante, as salas de aula so desconfortveis e os
espaos de desporto e de recreio inadequados. Consideram tambm que o comportamento dos alunos
necessita de ser melhorado. Este aspeto, bem como o respeito dos alunos pelo pessoal docente,
revelou a maior percentagem de respostas No concordo nem discordo, seguido da apreciao acerca
do funcionamento e da qualidade do refeitrio e bufete.
QUADRO 6 PESSOAL NO DOCENTE: PRINCIPAIS REAS DE CONCORDNCIA E DISCORDNCIA
PESSOAL NO DOCENTE
Concordam mais
Discordam mais
Os alunos respeitam os
professores (27,2%)
Os alunos respeitam os
professores (15,8%)
42
Discordam mais
Os servios administrativos do
Agrupamento funcionam bem
(14,7%)
Nas respostas dos Pais e Encarregados de Educao das crianas da educao pr-escolar (QUADRO 7),
verificou-se que estes gostam que os filhos frequentem o jardim de infncia, esto satisfeitos com o
desenvolvimento dos seus filhos, e consideram as instalaes limpas. Por outro lado, alguns pais
consideram que as crianas no costumam participar em atividades fora do jardim de infncia e que as
instalaes e os almoos no so satisfatrios. Importa, contudo, ter em ateno que, nestes aspetos,
as percentagens de respostas discordantes so reduzidas.
Relativamente s questes em que os pais no assumiram uma posio positiva ou negativa, verificase que, entre 13% e 15%, no deram opinio acerca do trabalho feito pela direo do agrupamento, do
funcionamento dos servios administrativos, bem como dos almoos servidos. Estas respostas podero
ter a ver com o facto de os jardins de infncia, frequentemente, estarem afastados da escola-sede do
agrupamento e de as crianas no utilizarem o servio de almoo.
QUADRO 8 PAIS E ENCARREGADOS DE EDUCAO DOS ALUNOS DOS ENSINOS BSICO E SECUNDRIO:
PRINCIPAIS REAS DE CONCORDNCIA E DISCORDNCIA
Discordam mais
Os servios de refeitrio e
bufete so bons (17,3%)
As instalaes da escola so
boas (15,1%)
43
Os Pais e Encarregados de Educao dos alunos dos ensinos bsico e secundrio esto satisfeitos com
a disponibilidade dos professores titulares/diretores de turma e com a ligao que estabelecem com
as famlias (QUADRO 8). Tambm consideram que os filhos tm bons amigos na escola que frequentam
e que so incentivados a trabalhar para obter bons resultados. Por outro lado, consideram que os
servios alimentares da escola no so bons, o mesmo se passando com as instalaes. Existem ainda
alguns encarregados de educao que consideram que a escola no segura. Muitos pais
responderam No concordo nem discordo em questes relacionadas com a resoluo de casos de
indisciplina na escola, os servios de refeitrio e bufete, bem como com o trabalho efetuado pela
direo.
QUADRO 9 ALUNOS DO PRIMEIRO CICLO DO ENSINO BSICO:
PRINCIPAIS REAS DE CONCORDNCIA E DISCORDNCIA
Discordam mais
Conheo as regras de
comportamento da escola
(94,8%)
Analisando as respostas dos alunos de 1. ciclo do ensino bsico, verifica-se que estes consideram que
tm vrios amigos na escola, gostam das atividades de expresso plstica que realizam e conhecem
bem as regras de comportamento da escola (QUADRO 9). Quando perguntados sobre se utilizam o
computador na sala de aula todas as semanas e a biblioteca para a realizao dos seus trabalhos e
leituras, discordam, no gostam do almoo da escola, e consideram que os colegas no se portam
bem. Alm das respostas discordantes, muitos alunos optaram por no tomar uma posio positiva ou
negativa nas questes relacionadas com o comportamento, a utilizao do computador e a qualidade
das refeies.
44
Discordam mais
Conheo as regras de
comportamento da escola
(86,9%)
Conheo os critrios de
avaliao (84,3%)
As salas de aula so
confortveis (29,2%)
Tal como os alunos do 1. ciclo do ensino bsico, os dos 2. e 3. ciclos e ensino secundrio
consideram que tm vrios amigos na escola, que conhecem bem as regras de comportamento da
escola e que conhecem os critrios de avaliao a que esto sujeitos (QUADRO 10). Quando
perguntados sobre se utilizam o computador na sala de aula com frequncia, se participam em clubes
e projetos da escola e se consideram as salas de aula confortveis, discordam. As questes em que os
alunos no assumiram uma posio positiva ou negativa relacionam-se com o ambiente de
tranquilidade e de respeito dos alunos em sala de aula, com a considerao das suas sugestes pelos
professores e pela direo, e com a higiene e limpeza da escola.
45
63,5
60
52,9
46,2
50
40
Concordo totalmente
35,1
Concordo
30
Discordo
20
Discordo totalmente
10
No respondeu
0,5
0,5
46
Tendo em conta a informao recolhida, observa-se que as escolas concordam com a natureza dos
documentos solicitados para a preparao da avaliao externa. Por outro lado, consideram que os
contedos a integrar no documento de apresentao da escola so adequados para a autoavaliao
organizacional.
Ainda no mbito dos itens em avaliao, em resposta aberta, as escolas sugerem que tanto o projeto
de interveno do diretor como alguns relatrios (por exemplo, os finais, em especial de coordenao)
deveriam constar do conjunto dos documentos a solicitar previamente. J quanto aos contedos a
inserir no documento de apresentao da escola propem que sejam includos, entre outros,
projetos, planos e aes de melhoria, distribuio do servio letivo.
46,6%
50,5%
Concordo totalmente
Concordo
Discordo
Discordo totalmente
47
No respondeu
20%
Resultados
Resultados acadmicos
Prestao do servio
educativo
60%
Resultados sociais
80%
100%
38,5
59,6
66,3
Reconhecimento da comunidade
Liderana e gesto
40%
32,2
34,1
63,9
Planeamento e articulao
74,5
24,5
Prticas de ensino
75,0
24,0
72,1
Liderana
78,4
26,0
20,7
Gesto
76,0
23,6
Autoavaliao e melhoria
75,5
24,0
Concordo totalmente
Concordo
Discordo
Discordo totalmente
48
No respondeu
49
0%
10%
20%
Conselho geral
30%
40%
80%
90% 100%
3,81
87,0
12,5 0,5
77,4
Departamentos curriculares
21,6
67,8
Diretores de turma
64,9
Equipa de autoavaliao
74,5
Outros docentes
38,9
48,1
Representantes da autarquia
46,6
Discordo
34,1
1
1
3,4
5,8
46,6
30,3
Associao de pais
1,4
46,2
45,7
24,0
29,8
53,4
48,1
Delegados de turma
0,5
24,0
43,3
Trabalhadores no docentes
Concordo
70%
34,6
Conselho pedaggico
Concordo totalmente
60%
60,1
Diretor
Associao de estudantes
50%
6,7
8,7 4,8
32,2
8,2 1
51,4
7,7 4,8
38,9
45,2
Discordo totalmente
6,7 1,4
No respondeu
50
78,4
78,8
75,0
72,6
70
60
50
40
30
24,5
21,2
22,6
20,2
20
10
0
(%)
2,4 0,5
0,5
1,9 0,5
Concordo
0,5 0,5
Afabilidade no trato
Discordo totalmente
51
58,2
60
52,4
50
45,2
44,2
40,9 41,3
40
41,3
33,7
32,2
30
20
16,3
10,1
10
5,8
1,4
0,5
3,4
2,4 1,0
6,3
1,4 0,5
0
(%)
Durao
Planeamento e
organizao
Concordo totalmente
Concordo
Regras de constituio
dos painis
Discordo
Conduo das
entrevistas
Discordo totalmente
Relacionamento da
equipa de avaliao com
os seus interlocutores
No respondeu
52
50
45,2
49,5
49
49
44,7
40,9
40
30,3
29,3
30
20
15,9
10
1,9 0,5
14,9
8,2
5,8
5,3
4,8
1,9
0,5
0
(%)
Justia das
apreciaes
Concordo
Discordo totalmente
53
62,5
58,7
60
52,9
50
39,4
40
30
20
26,0
25,0
14,9
10
10,1
6,3
1,4
1,4
1,4
0
(%)
Instrumentos de Trabalho
Concordo totalmente
Referenciais
Concordo
Discordo
Metodologia
Discordo totalmente
No respondeu
54
(%)
68,8
70
60
53,4
50
40
46,6
45,7
41,8
37,5
35,6
32,7
30
20
47,6
26,9
15,9
10,6
10
3,4
1,9 1,0
4,3
1,0
10,6
8,2
1,0
1,9 1,4
1,4 1,0
0
Reduo de cinco para
trs domnios de
anlise
Aplicao prvia de
questionrios de
satisfao
comunidade
Concordo totalmente
Concordo
Indicao do valor
esperado dos
resultados das escolas
Discordo
Auscultao das
autarquias em
entrevista
Discordo totalmente
Introduo de um novo
nvel na escala de
classificao
No respondeu
55
exemplo, uma visita apressada s instalaes, a visita da equipa de avaliao no dever ter
uma agenda de trabalhos to concentrada, devendo prolongar-se por mais tempo, de forma a
acompanhar o normal desenrolar das atividades escolares.
5. Valor esperado 15 das 92 escolas propuseram para melhoria alguns aspetos relacionados
com o Valor esperado, principalmente: a clarificao do mecanismo da sua determinao, a
sua disponibilizao mais cedo s escolas, o conhecimento de todos os indicadores e do
respetivo peso no clculo.
56
59,0
58,2
55,7
52,5
50
40
40,2
35,2
32,8
32,8
30
20
10
13,1
4,9
5,7
0,8 0,8
0,8 1,6
2,5
1,6
1,6
0
N. de reunies que
antecederam
Concordo totalmente
Concordo
Discordo
Informao sobre a
escola/agrupamento
fornecida equipa de
avaliao
Discordo totalmente
No respondeu
57
53,3
48,4 48,4
45,9
40
Concordo totalmente
30
Concordo
Discordo
20
Discordo totalmente
No respondeu
10
0,8
1,6
1,6
Os documentos solicitados so
pertinentes
Para esta dimenso, os avaliadores indicam outros documentos relevantes a solicitar previamente s
escolas/agrupamentos: atas do conselho pedaggico, planificaes de curto prazo e anuais, e matrizes
de testes diagnsticos. Para o domnio Resultados acham importante incluir tambm documentos que
contenham expressamente os resultados escolares internos e externos dos alunos e os resultados
escolares no trinio. Considerou-se, porm, interessante o seguinte comentrio que resume o
sentimento geral dos avaliadores relativamente a este ponto: A questo essencialmente a de ter a
informao relevante, o que pode ser prejudicado pela receo de um excesso de documentos e
ficheiros.
Para o texto de apresentao da escola, os avaliadores propem que sejam includos outros contedos
como, por exemplo, dados relacionados com os resultados acadmicos (avaliaes internas de trs
anos de disciplinas sem exames), resultados dos cursos de educao e formao e dos cursos
profissionais, taxas efetivas de abandono desses cursos e processos de autorregulao dos alunos,
bem como aes/planos de melhoria desenvolvidos na sequncia da avaliao externa anterior.
Visita s escolas
A leitura da FIGURA 27 permite verificar que os aspetos Conduo das entrevistas, Relacionamento
entre os membros da equipa e os interlocutores da escola e Disponibilidade da escola para responder
s solicitaes da equipa recolhem respostas muito positivas (concordncia entre 96,7% e 100%). A
concordncia total para estes itens (50,8%, 72,1% e 67,2%, respetivamente) significativa, superando
largamente a obtida para o Concordo. Para os restantes aspetos Durao da visita, Organizao da
visita e Regras de constituio dos painis de entrevistas, as respostas favorveis situam-se em
74,6%, 91,8% e 86%, respetivamente, predominando em todas as situaes as respostas ao nvel do
Concordo.
As maiores discordncias concentram-se na Durao da Visita (25,4%), nas Regras de constituio dos
painis (13,9%) e na Organizao da visita (8,2%).
58
(%)
72,1
67,2
70
59,8
60
50,8
50,8
50
40
30
45,9
41,8
41,0
32,8
32,8
23,8
20
10
27,0
26,2
13,9
8,2
3,3
1,6
0,8
0
Durao da visita
Organizao da
visita
Regras de
constituio dos
painis de
entrevistas
Concordo totalmente
Concordo
Conduo das
entrevistas
Discordo
Relacionamento Disponibilidade da
entre os membros
escola para
da equipa e os
responder s
interlocutores da
solicitaes da
escola
equipa
Discordo totalmente
Equipa de avaliao
Os dados da FIGURA 28 revelam concordncia no que respeita dimenso da equipa e articulao e
interao entre os seus membros: 98,4% de respostas concordantes para a Dimenso da equipa de
avaliao e 97,5% para a Articulao e interao entre os membros da equipa. de destacar a nfase
que alguns avaliadores deram a esta questo, ao referirem que a adequada constituio das equipas
fundamental para que o trabalho decorra de forma profcua A discordncia situou-se entre 1,6%
para a Dimenso da equipa de avaliao e 2,5% para a Articulao e interao entre os membros da
equipa.
59
78,7
68,0
70
60
Concordo totalmente
50
Concordo
40
20
10
Discordo
29,5
30
Discordo totalmente
19,7
1,6
2,5
0
(%)
60
55,7
55,7
53,3
50
52,5
47,5
45,9
43,4
37,7
40
30
20
10
5,7
0,8
0,8
0,8
0
A formulao dos quatro Os trs domnios da avaliao
objetivos da AEE clara e esto adequados misso da
adequada
escola
Concordo totalmente
Concordo
Discordo
Os campos de anlise
contemplam as valncias
fundamentais
Discordo totalmente
H coerncia entre os
campos de anlise e os
referentes
No respondeu
Os dados da FIGURA 30 revelam que a maioria dos avaliadores inquiridos considera que os campos de
anlise includos em cada domnio so relevantes para a avaliao externa das escolas. As respostas
concordantes superam os 95%, fixando-se muito perto dos 100%, para quase todos os campos de
anlise. Os campos de anlise Resultados acadmicos e Resultados sociais, do domnio dos
Resultados, ambos com 99,2% de respostas favorveis, representam a maior percentagem de
concordncia, seguidos de perto pelo campo de anlise Monitorizao e avaliao do ensino e das
aprendizagens, do domnio Prestao do Servio Educativo, com 99,1% de concordncia. Os campos
de anlise Gesto, Liderana, Prticas de ensino e Planeamento e articulao conseguem 98,4% de
respostas concordantes, seguidos pelos campos de anlise Autoavaliao e melhoria (98,3%) e
Reconhecimento da comunidade (96,7%). Note-se que a percentagem de concordncia total
predomina em todos os campos de anlise.
Ainda segundo os dados do grfico, os campos de anlise Reconhecimento da comunidade e Prticas
de ensino registam as maiores percentagens de respostas desfavorveis, com 3,3% e 1,6%,
respetivamente.
61
10% 20% 30% 40% 50% 60% 70% 80% 90% 100%
Liderana e gesto
Prestao do servio
educativo
Resultados
Resultados acadmicos
23,0
76,2
Resultados sociais
64,8
Reconhecimento da comunidade
50,8
Planeamento e articulao
34,4
45,9
74,6
23,8
Prticas de ensino
70,5
27,9
72,1
27,0
Liderana
73,8
24,6
Gesto
69,7
Autoavaliao e melhoria
Concordo totalmente
Concordo
77,0
Discordo
Discordo totalmente
28,7
21,3
No respondeu
Pela anlise efetuada, parece-nos consensual a opinio de que os campos de anlise inscritos para
cada um dos domnios se revelam pertinentes e so adequados ao desenvolvimento do processo de
avaliao externa das escolas. Ainda assim, so de realar as seguintes sugestes a incluir
futuramente em cada um dos trs domnios de avaliao:
1. Resultados considerar em campos separados: resultados dos testes intermdios, resultados
acadmicos dos cursos de educao e formao, profissionais e EFA (educao e formao de
adultos), entre outros; resultados acadmicos das outras reas curriculares sem provas
nacionais; considerar dentro do campo de anlise Resultados acadmicos a introduo do
valor acrescentado.
2. Prestao do Servio Educativo considerar: indicadores objetivos do desenvolvimento da
avaliao diagnstica e formativa; um campo prprio para a superviso em sala de aula;
observao de aulas; superviso e critrios de avaliao; monitorizao dos apoios educativos,
com particular ateno nos seus impactos nos resultados acadmicos; planos de aula;
instrumentos de avaliao; anlise da informao para a formulao dos juzos avaliativos.
3. Liderana e Gesto considerar: articulao do diretor com as lideranas intermdias;
ambiente educativo (cultura de escola, relaes humanas); criar um novo referente dentro do
campo de anlise Gesto relativo formao especfica no mbito da gesto por objetivos;
evidncias de desempenho efetivo das funes dos coordenadores dos departamentos
curriculares; ndices de participao nos processos de tomada de deciso levados a cabo ou da
iniciativa da direo.
62
Escala de avaliao
A maioria dos avaliadores considera a escala de avaliao adequada. Mesmo assim, esta uma das
dimenses onde se verificam percentagens de discordncia mais significativas. Numa anlise mais
pormenorizada da FIGURA 31, observa-se que o item Nveis de classificao consegue alcanar 94,3%
de concordncia contra 5,7% de respostas discordantes. Por sua vez, o item Critrios de avaliao de
cada domnio obtm 84,5% de respostas favorveis e 13,1% de discordncia.
Por ltimo, surge o item Texto de explicitao do significado dos nveis de classificao, com 77% de
respostas positivas. A percentagem de respostas discordantes relativamente a este aspeto
expressiva (22,9%).
FIGURA 31 ESCALA DE AVALIAO
60
56,6
53,3
50
45,9
41,0
40
31,1
27,9
30
21,3
20
12,3
10
5,7
0,8 2,5
1,6 0,0
0
Nveis de classificao
Concordo totalmente
Texto de explicitao do
significado dos nveis de
classificao
Concordo
Discordo
Discordo totalmente
No respondeu
63
avaliao das escolas, dado que, na generalidade dos casos, a abordagem repetitiva em relao s
temticas abordadas no conselho geral. O painel da autarquia parece ter pouca relevncia quando se
trata de avaliar escolas secundrias, pois o nvel de responsabilidade para com estas escolas menor
quando comparado com as escolas/agrupamentos de escolas com educao pr-escolar e ensino
bsico.
A Introduo de um novo nvel na escala de classificao no tambm um aspeto consensual, na
medida em que 18,9% dos inquiridos se manifestam contrrios a ela, o mesmo acontecendo em
relao ao item Introduo do valor esperado dos resultados das escolas, que regista 9,8% de
respostas discordantes. As menores percentagens de discordncia registam-se nos dois primeiros
itens: Reduo de cinco para trs domnios de anlise (6,6%) e Aplicao prvia de questionrios
(5,7%).
FIGURA 32 ALTERAES AO MODELO DE AVALIAO EXTERNA DAS ESCOLAS
60
53,3
50,8
50
50
45,9
41
39,3
40
44,3
39,3
36,1
30
23,8
25,4
20
10
16,4
6,6
5,7
1,6
1,6
0,8 0,8
3,3
2,5
1,6
0,8
%0
Reduo de cinco para
trs domnios de
anlise
Aplicao prvia de
questionrios de
satisfao
comunidade
Concordo totalmente
Concordo
Indicao do valor
esperado dos
resultados das escolas
Discordo
Auscultao das
autarquias em
entrevista
Discordo totalmente
Introduo de um novo
nvel na escala de
classificao
No respondeu
64
pais e encarregados de educao, bem como no de outros docentes e de alunos; mais tempo
para algumas entrevistas de painel; e evitar repeties de elementos em diferentes painis.
2. Sequencialidade e planos de melhoria mencionada a necessidade de se observarem os
possveis efeitos do processo de avaliao externa e dos resultados obtidos.
3. Observao da prtica letiva proposto que se proceda observao de aulas, permitindo a
avaliao das prticas e uma melhor compreenso dos contextos de sala de aula.
4. Valor esperado Se, por um lado, encarado como um aspeto positivo introduzido no novo
modelo de avaliao, por outro, h referncias necessidade de melhorar o seu clculo, tendo
em ateno os diversos critrios. So referidas a necessidade de clarificao de conceitos, bem
como a introduo nesse clculo de outros elementos de contexto, tais como a incluso do
valor acrescentado e o alargamento dos respetivos valores aos ltimos trs anos.
5. Questionrios de satisfao Os avaliadores apontam a necessidade de os mesmos serem
melhorados, reformulando algumas questes, evitando que em cada questo se formule mais
do que uma pergunta e relacionando os questionrios com os referentes dos campos de
anlise dos trs domnios. proposto por alguns dos respondentes que os questionrios sejam
disponibilizados numa plataforma eletrnica de acesso fcil aos inquiridos.
6. Quadro de referncia sugerido que se eliminem os referentes que se repetem em vrios
campos de anlise; que se autonomizem, em domnio especfico, vrios campos de
anlise/referentes, como sejam: resultados acadmicos, autoavaliao e ambiente educativo.
7. Escala de avaliao/classificao Poder ser melhorada ao nvel do texto de explicitao e
da clarificao dos descritores, em especial no que se refere classificao de Excelente. A
referncia ao valor esperado no descritivo das classificaes condiciona a redao da sntese
relativa avaliao de cada domnio.
8. Durao da visita A visita escola deve contemplar mais tempo para a realizao de algumas
entrevistas (por exemplo, a diretores de turma e respetivos coordenadores), para a visita
escola-sede e s restantes unidades (em especial nos agrupamentos de grandes dimenses).
igualmente referido que a agenda deve ser organizada de modo a que a visita escola sede
no coincida com a tarde de 4. feira, j que muitas escolas reservam esta tarde para reunies
e desenvolvimento de projetos, o que no possibilita observar os alunos nas turmas.
9. Equipas de avaliao Os inquiridos apontam para que haja um maior investimento na
formao dos avaliadores e menor rotatividade dos elementos das equipas.
10. Documento de apresentao da escola Apesar de ser solicitado s escolas que na
elaborao do texto de apresentao tenham em conta os domnios e campos de avaliao do
quadro de referncia, verifica-se que muitas delas no tm seguido esta indicao, pelo que
alguns dos avaliadores propem que haja maior articulao entre o documento de
apresentao da escola e o quadro de referncia da avaliao externa. Mais, referem que
nesse documento de apresentao as escolas deveriam dar mais ateno, em especial no que
se refere aos resultados da avaliao das aprendizagens, a todos os nveis de educao e
ensino, procurando garantir a fiabilidade entre os dados apresentados pela escola e os do perfil
de escola.
65
Santiago, P. et al. (2012), OECD Reviews of Evaluation and Assessment in Education: Portugal 2012, OECD Publishing.
O documento Modelos para comparao estatstica dos resultados acadmicos em escolas de contexto anlogo pode ser
consultado em http://www.dgeec.mec.pt/np4/120/.
4
5
66
Tipologia
Totais
Agrupamentos
Escolas No Agrupadas
Norte
49
10
59
Centro
25
28
27
36
Alentejo e Algarve
21
22
TOTAIS
122
23
145
A seleo destas 145 escolas 6 obedeceu aos seguintes critrios: escolas avaliadas h mais tempo;
escolas com classificaes mais baixas no primeiro ciclo de avaliao; escolas cuja estrutura orgnica
no tivesse sido alterada nos ltimos dois anos; e escolas onde no estivessem a decorrer
intervenes pela Parque Escolar, EPE.
A visita das equipas de avaliao externa ocorre entre janeiro e maio de 2013, em consonncia com o
calendrio escolar e de acordo com a disponibilidade de recursos.
67
As escolas avaliadas no ano letivo 2011-2012 registaram uma preponderncia do nvel Muito
Bom no domnio Liderana e Gesto e do nvel Bom nos domnios Resultados e Prestao do
Servio Educativo.
O domnio Liderana e Gesto evidencia pesos mais significativos dos nveis de classificao
mais elevados, correspondendo, simultaneamente, ao nico domnio onde foram atribudas
classificaes de Excelente e em que metade das escolas avaliadas foram classificadas com
Muito Bom. Evidencia ainda um significativo peso de escolas classificadas com o nvel de Bom.
68
69
O nvel de classificao de Muito Bom predomina nos domnios Prestao do Servio Educativo
e Liderana e Gesto, e o nvel de Bom predomina no domnio Resultados.
70
Os relatrios incluem ainda outras referncias aos efeitos dos contratos de autonomia,
designadamente o seu papel na mobilizao da comunidade educativa, bem como na
reorganizao e responsabilizao das estruturas intermdias de coordenao educativa e
superviso pedaggica, em torno dos objetivos e metas inscritos no contrato de autonomia.
A grande maioria dos alunos de todos os ciclos de ensino assinala positivamente o facto de ter
vrios amigos na escola e de conhecer bem as regras de comportamento. Por outro lado, os
alunos revelam graus de satisfao menores que os restantes grupos relativamente a:
ensino e aprendizagens, especialmente no que respeita frequncia com que utilizam
o computador, com que participam em clubes e projetos, e com que utilizam a
biblioteca para trabalhos e leituras;
direo e funcionamento da escola, no considerando que a direo e os professores
tenham em conta as suas sugestes;
71
instalaes e servios, em especial com a qualidade dos almoos, o conforto das salas
de aula e a higiene e limpeza da escola.
As escolas conferem uma importncia significativa envolvncia dos rgos, das estruturas e
de outros intervenientes da comunidade educativa na preparao da avaliao externa.
As escolas fazem uma avaliao muito positiva dos contactos estabelecidos com a IGEC no que
se refere facilidade de acesso aos interlocutores, clareza e adequao da informao
prestada, resposta em tempo til e afabilidade do trato.
A maioria das escolas faz uma apreciao positiva do relatrio da equipa de avaliao.
Contudo, algumas consideram que as classificaes no fazem justia ao trabalho realizado
e/ou que no se reveem nas mesmas por entenderam no se encontrarem devidamente
fundamentadas.
A generalidade das escolas faz uma avaliao positiva do novo modelo de avaliao externa por
comparao com o que foi utilizado no primeiro ciclo. A aplicao prvia de questionrios de
satisfao comunidade o aspeto que rene o nvel mais elevado de concordncia. A
observao da boa aceitao deste aspeto assume uma especial importncia dado tratar-se de
um elemento inovador utilizado no mbito do novo ciclo de avaliao, o que nos leva a crer que
se trata de um elemento necessrio e indispensvel qualidade do modelo avaliativo.
Algumas escolas manifestam, contudo, insatisfao relativamente reduo de cinco para trs
domnios de anlise, indicao do valor esperado e introduo de um novo nvel na escala
de avaliao. As percentagens de respostas discordantes nestes itens devero ser objeto de
uma anlise cuidada.
72
Existe uma forte convergncia nos ndices de satisfao relativamente ao modo como foram
constitudas as equipas de avaliao, sendo de destacar a nfase que alguns avaliadores
deram a esta questo.
73
74
ANEXOS
ANEXOS
75
76
77
78
79
Sim
No
Se respondeu Sim utilize o espao seguinte para acrescentar algo s respostas dadas ou incluir outros
comentrios.
80
Sim
No
Dentro de cada quadrado assinale com X o seu grau de concordncia em relao a cada uma das afirmaes que se seguem
Concordo
totalmente
5
1.
2.
3.
4.
5.
6.
7.
8.
9.
Concordo
4
No concordo
nem discordo
3
Discordo
81
Discordo
totalmente
1
No sei
A sua escola vai estar em avaliao externa, da responsabilidade da Inspeo-Geral da Educao e Cincia.
Para uma avaliao informada, importante conhecer o nvel de satisfao dos principais intervenientes:
alunos e famlias, professores e outros trabalhadores.
Por favor, responda ao questionrio que est no verso desta folha, indicando com um X, nos respetivos
quadrados, o seu grau de concordncia relativamente a cada uma das afirmaes.
No existem respostas certas ou erradas, o que importa conhecer a sua opinio. As respostas so
annimas.
Depois de preencher o questionrio deposite-o no recipiente prprio disponibilizado pela Direo.
Sim
No
Se respondeu Sim utilize o espao seguinte para acrescentar algo s respostas dadas ou incluir outros
comentrios.
82
Sim
No
Dentro de cada quadrado assinale com X o seu grau de concordncia em relao a cada uma das afirmaes que se seguem
Concordo
totalmente
5
1.
2.
3.
4.
5.
6.
7.
8.
9.
Concordo
4
No concordo
nem discordo
3
Discordo
83
Discordo
totalmente
1
No sei
Sim
No
Se respondeu Sim utilize o espao seguinte para acrescentar algo s respostas dadas ou incluir outros
comentrios.
84
Dentro de cada quadrado assinale com X o seu grau de concordncia em relao a cada uma das afirmaes que se seguem
Concordo
totalmente
5
Concordo
4
No concordo
nem discordo
3
Discordo
aprender.
3. Sou incentivado a apoiar as aprendizagens do meu
filho.
4. O meu filho participa em atividades fora do JI.
5.
funcionam bem.
11. O JI tem um bom ambiente.
12. O JI seguro.
13. H boa comunicao entre o JI e os pais.
14.
trabalho.
16. Gosto que o meu filho frequente este JI.
85
Discordo
totalmente
1
No sei
Sim
No
Se respondeu Sim, utilize o espao seguinte para acrescentar algo s respostas dadas ou incluir outros
comentrios.
86
N. de Filho(s)/Educando(s) nesta
Indique o nmero de filhos/educandos para cada ano de escolaridade:
Ano de escolaridade
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
N. Filhos/Educandos
Dentro de cada quadrado assinale com X o seu grau de concordncia em relao a cada uma das afirmaes que se seguem
Concordo
totalmente
5
Concordo
4
No concordo
nem discordo
3
Discordo
escola.
4. O meu filho incentivado a trabalhar para ter
bons resultados.
5. As avaliaes so justas.
6. O meu filho revela satisfao pela forma como
tratado na escola.
7. O meu filho tem bons amigos na escola.
8. A Direo da escola acessvel.
9. A Direo incentiva os pais a participar na vida
da escola.
10. A Direo est a fazer um bom trabalho.
11. A escola resolve bem os problemas de
indisciplina.
12. A escola fornece-me informao suficiente sobre
87
Discordo
totalmente
1
No sei
Sim
No
Se respondeste Sim, utiliza o espao seguinte para acrescentar algo s respostas dadas ou incluir outros
comentrios.
88
Masculino
Feminino
Dentro de cada quadrado assinala com X o teu grau de concordncia em relao a cada uma das afirmaes que se seguem
Concordo
totalmente
5
1.
Concordo
4
No concordo
nem discordo
3
Discordo
89
Discordo
totalmente
1
No sei
A sua escola vai estar em avaliao externa, da responsabilidade da Inspeo-Geral da Educao e Cincia.
Para uma avaliao informada, importante conhecer o nvel de satisfao dos alunos.
Por favor, responda ao questionrio que est no verso desta folha, indicando com um X, nos respetivos
quadrados, o seu grau de concordncia relativamente a cada uma das afirmaes.
No existem respostas certas ou erradas, o que importa conhecer a sua opinio. As respostas so
annimas.
Depois de preencher o questionrio, introduza-o no envelope coletivo disponibilizado pelo Professor.
Sim
No
Se respondeu Sim, utilize o espao seguinte para acrescentar algo s respostas dadas ou incluir outros
comentrios.
90
Masculino
Ano de escolaridade
Feminino
Dentro de cada quadrado assinale com X o seu grau de concordncia em relao a cada uma das afirmaes que se seguem
Concordo
totalmente
5
Concordo
4
No concordo
nem discordo
3
Discordo
91
Discordo
totalmente
1
No sei
92
93
94
95
96
97
98
99
Patrcia Susana Pinho Castanheira, bolseira de investigao e estagiria de ps-doutoramento do Departamento de Educao
da Universidade de Aveiro;
Paula Maria Mendes da Costa Neves, professora-adjunta da Escola Superior de Educao do Instituto Politcnico de Coimbra;
Pedro Nuno Lopes Teixeira, professor associado da Faculdade de Economia da Universidade do Porto;
Preciosa Teixeira Fernandes, professora auxiliar da Faculdade de Psicologia e de Cincias da Educao da Universidade do
Porto;
Rute Cristina Correia da Rocha Monteiro, professora-adjunta da Escola Superior de Educao da Universidade do Algarve;
Teresa Cristina Moura Vitorino, professora-adjunta da Escola Superior de Educao da Universidade do Algarve;
Vtor Manuel Pea Ferreira, assistente convidado do ISCTE Instituto Universitrio de Lisboa.
2 Os peritos acima indicados tm direito ao reembolso das despesas com transportes e ajudas de custo necessrias ao
desempenho da sua misso.
3 O presente despacho produz efeitos a partir de 1 de novembro de 2011.
30 de novembro de 2011. O Secretrio de Estado do Ensino e da Administrao Escolar, Joo Casanova de Almeida.
Lusa Teixeira
Manuel Eugnio
Maria da Graa Costa
Maria Filomena Vidal
Maria Jos Rangel
Maria Judite Cruz
Maria Madalena Moreira
Maria Manuela Alves
Maria Manuela Ribeiro
Maria Pia Barroso
Maria Teresa Ribeiro
Maria Zita Oliveira
Ramiro Santos
Rosa Maria Paulo
Vitor Rosa
Jorge Sena
Jos Lebre
Jos Joo Azevedo
Manuel Branco Silva
Maria da Conceio Simes
Maria de Lurdes Campos
Pedro Gerardo
Rosa Menezes Ferreira
Ulisses Quevedo
100
Joo Henriques
Joo Paulo Dias
Lus Correia Barrego
Manuel Loureno
Maria da Conceio Ribeiro
Maria Fernanda Guia
Maria Teresa Jesus
Rui Manuel Atansio
101