Académique Documents
Professionnel Documents
Culture Documents
Seminrios
e Colquios
AVALIAO EXTERNA
DAS ESCOLAS
As opinies expressas nesta publicao so da responsabilidade dos autores e no refletem
necessariamente a opinio ou orientao do Conselho Nacional de Educao.
NOTA PRVIA
Secretrio-Geral do Conselho Nacional de Educao
Manuel Miguns 8
ABERTURA
Presidente do Conselho Nacional de Educao
Jos David Justino 16
Presidente do Instituto de Educao da Universidade
do Minho 19
Jos Augusto Pacheco
Inspetor-Geral da Educao e Cincia
Lus Capela 20
Estudo de caso
Carlinda Leite 52
ENCERRAMENTO
247
O futuro do modelo de avaliao externa das
escolas
Lus Capela
248
NOTA PRVIA
Avaliao Externa das Escolas
Manuel Miguns1
1
Secretrio-Geral do Conselho Nacional de Educao
8
Avaliao Externa das Escolas
9
Avaliao Externa das Escolas
10
Avaliao Externa das Escolas
11
Avaliao Externa das Escolas
12
Avaliao Externa das Escolas
13
Avaliao Externa das Escolas
14
ABERTURA
15
Avaliao Externa das Escolas
Quero comear por vos dar as boas vindas e saudar, em primeiro lugar, os
parceiros desta iniciativa, o Senhor Inspetor-Geral da Educao e Cincia,
Dr. Lus Capela, e o Senhor Presidente do Instituto de Educao da
Universidade do Minho, o Professor Jos Augusto Pacheco e, com um
especial agrado e reconhecimento, o Dr. Manuel Rocha, diretor do
Conservatrio de Msica de Coimbra que nos acolheu com enorme
simpatia.
O Conselho Nacional de Educao (CNE) tem vindo a promover um
conjunto de seminrios fora de Lisboa para que o debate, sobre temas
fundamentais do funcionamento do sistema educativo, tambm ele possa
ser descentralizado. Assim, realizmos um seminrio sobre ensino
superior no Porto, outro sobre descentralizao em Aveiro e agora este em
Coimbra sobre avaliao externa das escolas. Esto previstos mais dois
seminrios fora de Lisboa, um em vora sobre o acesso ao ensino superior
e outro em Faro sobre formao inicial de professores, mas tambm um
em Lisboa sobre a escolaridade obrigatria de 12 anos. So temas sobre os
quais muito se tem feito, mas nem sempre muito se tem dialogado.
O debate das polticas educativas est muito centrado naquilo que o
ministrio faz ou no faz e no que os que esto fora do ministrio
contestam ou no contestam. Considero que quem trabalha diariamente a
Educao tem de se habituar a partilhar essas ideias e que as polticas
possam ter no s sustentao tcnica, mas acima de tudo base social de
apoio, ou seja, que muito antes de emitirmos opinio possamos estudar,
conversar e discutir as ideias que, eventualmente, podem estar subjacentes
a essas mesmas decises.
O papel do Conselho Nacional de Educao precisamente esse, no s
emitir pareceres sobre iniciativas legislativas do governo, mas acima de
tudo produzir conhecimento sobre polticas educativas e sobre a avaliao
que se faz do sistema educativo. Temos esses dois pilares como
1
Presidente do Conselho Nacional de Educao
16
Avaliao Externa das Escolas
17
Avaliao Externa das Escolas
18
Avaliao Externa das Escolas
1
Presidente do Instituto de Educao da Universidade do Minho
19
Avaliao Externa das Escolas
Lus Capela1
com muito gosto que a Inspeo-Geral aqui est e que temos tantas
pessoas presentes, diretores, professores, investigadores. com muito
agrado que vemos a adeso de todos relativamente a um tema
absolutamente decisivo para o nosso sistema educativo, o da avaliao
externa das escolas. Agradeo ao Senhor Presidente do Conselho Nacional
de Educao o facto de ter partilhado connosco esta organizao, bem
como ao Instituto de Educao da Universidade do Minho.
Para a IGEC um motivo de grande alegria participar neste seminrio
com todo o nosso empenhamento, com vontade de mostrar o que estamos
a fazer, de aprender convosco, de tentar caminhar mais frente e sempre
melhor no futuro.
Gostaria tambm de enfatizar que, para alm de alguns dirigentes da
Inspeo que aqui esto, temos tambm presentes por interesse prprio,
voluntariamente e gastando as suas horas de formao, muitos inspetores.
Para mostrar que no s a Inspeo enquanto organizao, que cuida e se
interessa pela avaliao externa, mas cada inspetor, individualmente, tem
um grande interesse e um grande carinho por este trabalho. Trabalho este
que tem alguma singularidade em relao s atividades que a Inspeo
desenvolve. Geralmente, as pessoas pensam que o modelo de avaliao
externa que est a ser implementado da Inspeo, mas no, um modelo
do pas, que foi aprovado e que a Inspeo tem todo o gosto em
desenvolver. a atividade planeada que mais recursos consome, portanto
de facto um modelo muito importante.
Gostaria de acrescentar, sem antecipar o que vou dizer no fim, que
precisamos de pensar o futuro da avaliao externa e que esse futuro
poder passar por muitas questes, mas que, de entre elas, passar sempre
pela observao da prtica letiva e ter de ser um modelo que seja
aplicvel a escolas privadas e pblicas, um modelo igual para todas,
apesar das suas especificidades.
1
Inspetor-Geral de Educao e Cincia
20
RELATRIO INTERCALAR
DO 2. CICLO DE AVALIAO EXTERNA DAS ESCOLAS
E
RELATRIO DO PROJETO AEENS
IMPACTO E EFEITOS DA AVALIAO EXTERNA
21
Avaliao Externa das Escolas
Leonor Duarte 1
1
Inspeo-Geral da Educao e Cincia
22
Avaliao Externa das Escolas
NORTE 4 84 59 55 51 253
CENTRO 2 42 28 30 20 122
23
Avaliao Externa das Escolas
24
Avaliao Externa das Escolas
25
Avaliao Externa das Escolas
26
Avaliao Externa das Escolas
Figura 2 Distribuio das asseres relativas a pontos fortes por domnio e campo de
anlise
2011-2012 e 2012-2013
27
Avaliao Externa das Escolas
28
Avaliao Externa das Escolas
DOCENTES
29
Avaliao Externa das Escolas
NO DOCENTES
Acompanhamento da Ao Educativa
As escolas com classificaes mais baixas na Avaliao Externa das
Escolas passaram a ser acompanhadas pela Inspeo-Geral da Educao e
Cincia (IGEC), mediante o desenvolvimento da atividade de
Acompanhamento da Ao Educativa que teve incio em janeiro de 2013.
Em cada escola foi elaborado um Programa de Acompanhamento que se
institui como um instrumento orientador de toda a atividade. O Programa
30
Avaliao Externa das Escolas
Agrupamentos - Escolas
EQUIPA
MULTIDISCIPLINAR IGEC 2012-2013 2013-2014 2014-2015
NORTE 9 20 11
CENTRO 6 2 2
SUL 17 20 18
TOTAL 32 42 31
31
Avaliao Externa das Escolas
Fontes consultadas:
1 Relatrio - Propostas para um novo ciclo de avaliao externa de escolas
http://www.ige.min-edu.pt/upload/Relatorios/AEE2_GT_2011_RELATORIO_FINAL.pdf
2 Relatrio Avaliao Externa das Escolas 2011-2012
http://www.ige.min-edu.pt/upload/Relatorios/AEE_2011-2012_RELATORIO.pdf
3 Relatrio Avaliao Externa das Escolas 2012-2013
http://www.ige.min-edu.pt/upload/Relatorios/AEE_2012-2013_RELATORIO.pdf
4 Relatrio Acompanhamento da Ao Educativa
http://www.ige.min-edu.pt/upload/Relatorios/AAE_Relatorio_2013-2014.pdf
32
Avaliao Externa das Escolas
Introduo
2
Presidente do Instituto de Educao da Universidade do Minho
33
Avaliao Externa das Escolas
34
Avaliao Externa das Escolas
Estudar o impacto e
efeitos da AEE na
consolidao da
autoavaliao.
A AEE produz Impacto e efeitos da Estudar o degrau de Estudos de caso (n=9)
impacto e efeitos na AEE: perspetivas apropriao dos Inqurito por entrevista a
apropriao pela das escolas referenciais da AEE pelas Diretores (n=9)
escola e (professores e pais) escolas e comunidade Inqurito por entrevista a
comunidade dos e da comunidade. Coordenadores de Equipas
referentes de autoavaliao
utilizados no (n=9)
processo de Grupo focal a
avaliao? Coordenadores de gesto
intermdia (n=9)
Inqurito por questionrio a
professores das escolas com
realizao de estudos de
caso (n=245)
35
Avaliao Externa das Escolas
36
Avaliao Externa das Escolas
3
Dados apresentados pela IGEC, no Seminrio Avaliao Externa de Escolas, a 13 de maro de
2015, em Coimbra.
37
Avaliao Externa das Escolas
4
A partir de 2009/2010, a escola, em caso de discordncia com a classificao, para alm do
contraditrio, pode submeter um recurso. A comisso de recurso, que funciona no interior da
Inspeo, sem qualquer independncia funcional, pode decidir pela manuteno das classificaes
ou ordenar a repetio total ou parcial do procedimento de avaliao externa. Neste caso, o recurso
de natureza hierrquica, sendo dirigido tutela administrativa da escola, no existindo, por isso,
nem distanciamento administrativo, nem independncia do decisor sobre o recurso. Esta situao
38
Avaliao Externa das Escolas
39
Avaliao Externa das Escolas
40
Avaliao Externa das Escolas
Tabela III Total de Relatrios (R) e Contraditrios (C) do primeiro e segundo ciclos de
avaliao externa de escolas.
5
Dados da pgina web da IGEC - http://www.ige.min-edu.pt/ - Consulta em janeiro e fevereiro de
2015.
41
Avaliao Externa das Escolas
42
Avaliao Externa das Escolas
43
Avaliao Externa das Escolas
45
Avaliao Externa das Escolas
46
Avaliao Externa das Escolas
Bibliografia
Barreira, Carlos (Org.). (2015). Estudos sobre avaliao externa de escolas. Porto: Porto
Editora.
Bidarra, Maria da Graa, Barreira, Carlos Folgado, Vaz-Rebelo, Maria da Piedade, &
Alferes, Valentin Rodrigues (2014). In J. A. Pacheco (Org.), Avaliao externa de
escolas: quadro terico/conceptual (pp. 229-246). Porto: Porto Editora.
Churton, Mel, & Brown, Anne (2010). Theory and method (2 ed.). New York: Palgrave
Macmillan.
47
Avaliao Externa das Escolas
CNE (2010). Parecer sobre Avaliao Externa das Escolas (2007-2009). Lisboa: CNE.
Fialho, Isabel, Saragoa, Jos, Silvestre, Maria Jos. Correia, Ana Paula, & Gomes, Snia
(2014). Relatrios internacionais e nacionais. Um olhar sobre a avaliao externa
de escolas. In J. A. Pacheco (Org.), Avaliao externa de escolas: quadro
terico/conceptual (pp. 147-180). Porto: Porto Editora.
Figueiredo, Carla, Leite, Carlinda, & Fernandes, Preciosa (2014). Modelos internacionais
de avaliao externa. A avaliao de escolas em Portugal e na Inglaterra origem,
fundamentos e percursos. In J. A. Pacheco (Org.), Avaliao externa de escolas:
quadro terico/conceptual (pp. 119-146). Porto: Porto Editora.
Gonalves, Elisabete, Fernandes, Preciosa, & Leite, Carlinda (2014). Avaliao externa
das escolas em Portugal polticas e processos. In J. A. Pacheco (Org.), Avaliao
externa de escolas: quadro terico/conceptual (pp. 71-87). Porto: Porto Editora.
IGE (2011). Propostas para um novo ciclo de avaliao externa de escolas Relatrio
Final. Grupo de trabalho para o novo ciclo da avaliao externa. Lisboa: IGE.
IGE (2012). Avaliao externa das escolas: avaliar para a melhoria e a confiana
2006-2011. Lisboa: IGE.
Lima, Jorge vila (2007). tica na investigao. In J. . Lima & J. A. Pacheco (Org.),
Fazer investigao (pp. 127-159). Porto: Porto Editora.
Merteens, Donna M, & Wilson, Amy J. (2012). Program evaluation theory and practice.
New York: The Guilford Press.
48
Avaliao Externa das Escolas
OECD (2013). School evaluation: From compliancy to quality. In Synergies for Better
Learning: An International Perspective on Evaluation and Assessment, OECD
Publishing. http://dx.doi.org/10.1787/9789264190658-10-en
Ozga, Jenny (2000). Investigao sobre polticas educacionais. Porto: Porto Editora.
Pacheco, Jos Augusto, Seabra, Filipa, & Morgado, Jos Carlos (2014). Avaliao
externa. Para a referencializao de um quadro terico sobre o impacto e efeitos
nas escolas do ensino superior no pblico. In J. A. Pacheco (Org.), Avaliao
externa de escolas: quadro terico/conceptual (pp. 15-55). Porto: Porto Editora.
Rodrigues, Eduarda, Queirs, Helena, Sousa, Joana, & Costa, Natlia (2014). Avaliao
externa de escolas: do referencial aos estudos empricos. In J. A. Pacheco (Org.),
Avaliao externa de escolas: quadro terico/conceptual (pp. 89-118). Porto:
Porto Editora.
Silvestre, Maria Jos, Fialho, Jos, & Saragoa, Jos (2014). A avaliao externa das
escolas luz das polticas educativas. In J. A. Pacheco (Org.), Avaliao externa
de escolas: quadro terico/conceptual (pp. 57-69). Porto: Porto Editora.
Stake, Robert E. (2017). A arte de investigao com estudos de caso (2 ed.). Lisboa:
Fundao Calouste Gulbenkian.
49
Avaliao Externa das Escolas
50
PAINEL
51
Avaliao Externa das Escolas
Carlinda Leite 1
ESTUDO DE CASO
Quero manifestar o meu prazer por estarmos hoje aqui reunidos nesta
grande assembleia procurando caminhos para a melhoria da educao em
Portugal e para tornar a escola mais inclusiva.
O projeto AEEENS (Avaliao Externa das Escolas do Ensino No
Superior) realizou nos ltimos dois anos vrios estudos de anlise
documental e est, neste ano de 2015, na fase de estudos de caso (Stake,
2009; 2011). O que aqui apresento tem a ver com um estudo de caso
realizado em dois agrupamentos de escolas e foca, na anlise que
selecionei, essencialmente questes de liderana. Na apresentao, num
primeiro ponto, dou conta do que nos tem sido dito pela investigao e
pelos estudos do movimento de Melhoria das Escolas. , alis, na base no
conhecimento que tem sido produzido por este movimento que tiro
algumas concluses dos dados recolhidos. Num segundo ponto, apresento
o estudo de caso com dados recolhidos em dois agrupamentos de escolas
do Norte de Portugal: um relativo a um agrupamento de escolas que subiu
as classificaes do 1. para o 2. ciclo avaliativo e outro que desceu as
classificaes que tinha obtido nesse 1 ciclo. Termino a interveno
tecendo algumas consideraes finais, no esquecendo o efeito que est a
ter, neste processo de avaliao das escolas, a hipervalorizao dos
resultados acadmicos dos alunos.
Sabemos que a bibliografia cientfica tem sustentado que os estudos que
recorrem metodologia de estudo de caso esto associados a pesquisas de
orientao qualitativa, interpretativa e situacional (Stake, 2011) e visam
promover a compreenso das situaes e no a de fazer generalizaes
(Stake, 2009). Portanto, tendo como inteno conseguir uma melhor
compreenso das situaes, no projeto AEEENS recorremos ao estudo de
caso para aprofundar a compreenso dos efeitos que a avaliao externa
1
Centro de Investigao e Interveno Educativas Universidade do Porto
52
Avaliao Externa das Escolas
53
Avaliao Externa das Escolas
54
Avaliao Externa das Escolas
Face a estas situaes questionmos: o que que aconteceu que fez com
que este agrupamento descesse as classificaes e o que fez com que o
outro subisse? Uma anlise das medidas organizacionais de um e de outro
agrupamento revelou que, no caso do agrupamento que apresentou subida
nas classificaes, e que se situa numa zona semirrural, a pessoa que
assumiu o cargo da direo tambm assumiu a melhoria como um projeto
seu. Coincidindo a entrada em funes com o final da primeira avaliao
externa, este Diretor considerou que quando o agrupamento foi avaliado
no 2. ciclo de avaliao, o que estava em causa era a sua ao e o que
tinha conseguido. Os dados recolhidos evidenciaram que este diretor tinha
institudo a abertura da escola aos pais, tinha trazido os pais escola e
tinha-os envolvido na responsabilizao pelo prazer na aprendizagem dos
seus filhos e pelo respetivo sucesso escolar. Tinha, principalmente,
institudo um clima de escola orientado para a aprendizagem de todos os
alunos e para uma melhoria contnua. Entre as medidas tomadas, recordo,
por exemplo: criar uma ideia de agrupamento como que se isto fosse o
mesmo edifcio com o mesmo projeto educativo e o mesmo
regulamento; criar maior representatividade e poder dos Pais; criar
Associaes de Pais em todas as escolas do agrupamento; dar ao Conselho
Pedaggico maior destaque (o CP antes funcionava no sentido de mais de
uma leitura das atas, e passou a funcionar mais como um rgo de gesto,
de discusso); implementar medidas que estimulam o trabalho
colaborativo e a articulao curricular, nomeadamente vertical e a
superviso pedaggica.
Ao nvel da qualidade do servio educativo, este Diretor desenvolveu
estratgias que pretenderam: controlar melhor a monitorizao dos
resultados escolares e agir imediatamente junto da instncia onde reside o
problema; melhorar a imagem da escola na comunidade e torn-la apta a
observar essa qualidade in loco; criar uma cultura de excelncia que
impede que no se aceitem menos bons resultados.
Em sntese, este Diretor mobilizou as informaes provenientes da
avaliao externa para estruturar um plano de melhoria educacional.
Como nos disse, usou todas as formas e informaes disponveis para
tomar o pulso escola, usando at essas informaes da avaliao externa
55
Avaliao Externa das Escolas
56
Avaliao Externa das Escolas
57
Avaliao Externa das Escolas
58
Avaliao Externa das Escolas
59
Avaliao Externa das Escolas
Referncias
Barber, M. & Mourshed, M. (2007). How the worlds best performing systems came out
on top. London: McKinsey & Co. (Relatrio McKinsey) ou Relatrio Mackinsey
(2007) www.mckinsey.com/global_locations/europe_and.../latest_thinking
Bolvar, A. (2012). Melhorar os processos e os resultados educativos. O que nos ensina
a investigao. V. N. Gaia: Fundao Manuel Leo.
Hopkins, D. (2008). Every School a Great School: Realizing the Potential of System
Leadership (2. ed.). Berkshire, England: Open University Press.
Hopkins, D. et al. (2011). School and System Improvement: State of the Art Review.
Keynote presentation prepared for the 24th International Congress of School
Effectiveness and School Improvement, Limassol, Cyprus, 6th January 2011.
Consultado em Agosto, 2012, em
http://www.icsei.net/icsei2011/State_of_the_art/State_of_the_art_Session_C.pdf.
OCDE (2012). OECD Reviews of Evaluation and Assessment in Education: Portugal,
Available in www.oecd.org/edu/evalutionpolicy
Pont et al., (2008). Improving school leadership, (Relatrio OCDE). Disponvel
www.oecd.org/edu/scoolaleadership
Stake, R. E. (2009). A arte da investigao com Estudos de caso 2 edio. Lisboa,
Fundao Calouste Gulbenkian.
Stake, R. E. (2011). Pesquisa qualitativa: Estudando como as coisas funcionam. Porto
Alegre, Editora Penso.
60
Avaliao Externa das Escolas
Introduo
A avaliao externa de escolas (AEE) constitui uma poltica de avaliao,
que pe em prtica um programa de ao complexo e multifacetado, e
representa uma poltica educativa que (enquanto tal) se prope contribuir
para melhorar a qualidade da educao e o desenvolvimento do
empreendimento educativo (Pacheco, Seabra & Morgado, 2014). Ela
ergue-se sobre correntes e tradies de investigao educacional diversas,
que procura articular, como a das escolas eficazes e a da melhoria da
escola (OCDE, 2013). Tais correntes desenvolvem-se em reao quer
crise da escola, aps a massificao (Azevedo, 2007), quer ao relatrio
Coleman, que parecia pr em causa o valor da interveno educacional
(Murillo, 2007). No desconsiderando a influncia dos fatores estruturais e
socioeconmicos, amplamente reconhecidos, a avaliao externa de
escolas decorre, assim, da afirmao da importncia do meso-sistema
escolar no quadro da interveno educativa (Figari, 2008), bem como dos
correlativos movimentos de descentralizao-desconcentrao e
desburocratizao dos sistemas educativos em direo autonomia da
escola (Key, 2002). A mudana preconizada, igualmente sob influncia de
um contexto nacional e internacional de crise do Estado Social/Estado
Providncia e de reforma das administraes pblicas, implica, tambm,
no plano da regulao escolar, a passagem de uma regulao baseada
1
Instituto de Educao, Universidade de Lisboa
2
Faculdade de Psicologia, Universidade de Lisboa
3
Uma verso um pouco mais desenvolvida deste texto integra o livro Barreira, C. (Ed.). (no
prelo). Estudos sobre Avaliao Externa de Escolas. Porto: Porto Editora.
Este trabalho financiado por Fundos FEDER atravs do Programa Operacional Fatores de
Competitividade COMPETE e por Fundos Nacionais atravs da FCT Fundao para a Cincia e
a Tecnologia no mbito do projeto PTDC/CPE-CED/116674/2010.
61
Avaliao Externa das Escolas
62
Avaliao Externa das Escolas
65
Avaliao Externa das Escolas
66
Avaliao Externa das Escolas
Ascher, 2006; Justino & Batista, 2013; Simes, 2011). Tal convergncia
ser tanto maior quanto o processo e referencial de avaliao tenham sido
nacionalmente consensualizados, eventualmente recorrendo
comunicao, interao e intercmbio com representantes das partes
interessadas, embora sem descurar a evidncia e o conhecimento cientfico
(Afonso & Costa, 2010; Justino & Batista, 2013; OCDE, 2013). Refira-se
que tambm em Portugal se comea a equacionar a extenso da avaliao
externa de escolas, estatal, s escolas privadas (alis prevista na Lei n
31/2002), com o argumento de influenciar/auxiliar a deciso de escolha da
escola por parte dos pais e encarregados de educao (Capela, 2015,
maio).
Definvel, assim, como instrumento do Estado Avaliador (Afonso &
Schneider, 2012) e meta-regulador (Simes, 2011), regulador ltimo do
mercado e de todos os agentes e agncias em presena, a avaliao externa
de escolas revela aqui um desgnio hegemnico. Contudo, pode
questionar-se se os interesses privados, os objetivos e critrios dos agentes
do mercado, incluindo dos pais/encarregados de educao enquanto
clientes ou consumidores individuais, coincidem com o interesse pblico,
sem dvida expresso no referencial de avaliao da inspeo, que tambm
alinha pelo desiderato da escola inclusiva, do esbatimento das
desigualdades escolares e do aprofundamento da igualdade de
oportunidades, ou da equidade (Sampaio & Leite, 2015). Alm disso,
reconhece-se que o poder de escolha se mostra desigualmente distribudo
pelos diferentes grupos sociais (Ehren et al., 2013; Gustafsson et al., 2015;
Riley, 2006; van Zanten, 2005). Por outro lado, como lembram Afonso e
Estvo (1993), as escolas pblicas estaro mais sujeitas s polticas
democrticas e ao controlo das autoridades externas (do Estado) que as
escolas privadas, mais autnomas, menos controladas pelo poder poltico e
beneficiadoras de uma maior uniformidade sociocultural do seu pblico-
alvo ou da sua clientela.
68
Avaliao Externa das Escolas
69
Avaliao Externa das Escolas
70
Avaliao Externa das Escolas
71
Avaliao Externa das Escolas
72
Avaliao Externa das Escolas
3. Mtodo
3.1. Participantes
Responderam ao questionrio 256 Diretores de Agrupamentos ou Escolas
no agrupadas, ou seja, 31,5% da populao de Agrupamentos do
Continente, o que corresponde a uma taxa de resposta acima do expectvel
para o modo de aplicao (online) utilizado na investigao (Witmer,
Colman & Katzman, 1999). Em termos de distribuio regional, 99
respostas (39%) foram provenientes de Agrupamentos situados na Regio
Norte, 43 (17%) da Regio Centro, 78 (30%) da Regio de Lisboa e Vale
do Tejo, 25 (10%) do Alentejo e 11 (4%) do Algarve. Em mdia, estes
Diretores eram docentes no Agrupamento/Escola h 18,82 anos (Desvio-
Padro = 8,88) e exerciam funes de Direo h 10,75 anos (DP = 7,12).
data da ltima avaliao externa, 82% j tinham funes diretivas no
Agrupamento/Escola.
De entre os Agrupamentos que responderam, 119 (46%) tinham sido
objeto de avaliao em ambos os ciclos de Avaliao Externa de Escolas
(AEE), 56 (22%) apenas no 1 ciclo, 18 (6%) apenas no 2 ciclo e 63
(25%) no tinham sido avaliados em nenhum dos ciclos. Note-se que,
entre os no avaliados, se incluem todos os Agrupamentos cuja
composio sofreu alteraes entre o primeiro e o segundo ciclos de
avaliao externa.
3.3. Procedimento
A aplicao do questionrio foi efetuada atravs de uma plataforma de
administrao de questionrios online (Qualtrics), com significativas
vantagens em termos de custo e funcionalidade. Com o objetivo de
assegurar que s Diretores de Agrupamento efetivamente respondiam, o
questionrio foi enviado para os endereos de correio eletrnico de todos
os Agrupamentos de Escolas pblicas do Continente. Na mensagem de
correio eletrnico, e para alm da apresentao e justificao do estudo, do
apelo participao e das instrues, estava contida uma hiperligao que
permitia aceder ao questionrio. S quem tivesse recebido essa mensagem
eletrnica poderia aceder ao questionrio e responder-lhe. Aps algumas
semanas foram sendo enviados lembretes para os endereos dos quais
ainda no tinham sido recebidas respostas.
74
Avaliao Externa das Escolas
4. Resultados
75
Avaliao Externa das Escolas
Igualmente relevante seria saber, ainda dentro deste mbito dos efeitos,
quais os aspetos especficos nos quais os Diretores percecionam efeitos
mais positivos e mais negativos (ou, pelo menos, menos positivos). Dado
que tabelas com todos os itens ocupariam um espao excessivo,
apresentamos aqui apenas os seis itens com mdias mais e menos elevadas
(Tabela II).
notrio, examinando a Tabela II, que os efeitos mais positivos (e
poderamos com igual legitimidade falar dos efeitos mais fortes, uma vez
que no se encontram efeitos com mdias negativas) se encontram na rea
da autoavaliao. Os aspetos da organizao e dinmica interna e da viso
estratgica surgem igualmente, mas de forma muito menos expressiva. Os
menores efeitos so sentidos ao nvel dos Resultados e comportamentos
dos alunos. Embora se trate de uma questo a escalpelizar nas concluses
76
Avaliao Externa das Escolas
deste trabalho, no passa despercebido que os seis itens com uma mdia
mais elevada se situam dentro do domnio de Organizao e Gesto,
enquanto os seis que apresentam mais baixas se situam no domnio dos
Resultados.
Grfico 1 Distribuio de frequncias da perceo do efeito da avaliao externa, no
domnio dos Resultados
77
Avaliao Externa das Escolas
Tabela II Itens com as mdias mais elevadas e mais baixas, na perceo dos efeitos da
avaliao externa
Item Mdia Desvio-Padro
Valorizao dos processos de autoavaliao + 1,59 1,04
Qualidade dos processos de autoavaliao + 1,58 1,04
Adoo de medidas de melhoria em articulao com a
+ 1,55 1,02
autoavaliao
Continuidade da autoavaliao + 1,55 1,03
Valorizao das lideranas intermdias + 1,53 1,07
Viso estratgica por parte dos rgos de gesto da
+ 1,49 1,06
Escola/Agrupamento
Aprendizagens reais por parte dos alunos + 0,83 0,97
Participao dos alunos na vida da Escola + 0,83 0,93
Resultados acadmicos avaliados externamente (p. ex.,
+ 0,83 1,06
exames)
Taxas de abandono e desistncia + 0,73 1,22
Solidariedade e relacionamento entre os alunos + 0,70 0,97
Comportamento e disciplina dos alunos + 0,67 0,97
78
Avaliao Externa das Escolas
79
Avaliao Externa das Escolas
que teria sido possvel ou desejvel (fatores inibidores). Esta avaliao era
feita numa escala bipolar, indo de -2 (muito inibidor) a +2 (muito
potenciador). Na Tabela IV so apresentados os resultados, por ordem
decrescente das mdias.
Tabela IV Fatores inibidores ou potenciadores do impacto da AEE
Item Mdia Desvio-Padro
Consequncias da avaliao externa no processo de
+ 1,09 0,88
autoavaliao/equipa de autoavaliao
Difuso na Escola/Agrupamento dos resultados da
+ 1,00 0,84
avaliao externa
Apropriao e uso pela Escola dos referenciais da
avaliao externa (da IGEC) na sua avaliao e + 0,98 0,89
monitorizao interna
Publicitao do relatrio de avaliao externa + 0,97 0,84
Grau de articulao entre os processos de avaliao
+ 0,88 0,86
interna e externa
Qualidade da colaborao estabelecida com a equipa de
+ 0,85 0,94
avaliao externa
Credibilidade da equipa de avaliao externa junto dos
+ 0,83 0,97
atores da Escola/Agrupamento
Grau de clareza e informao do relatrio de avaliao
+ 0,82 0,96
externa
Nvel de participao/envolvimento dos diferentes atores
+ 0,79 0,87
da Escola no processo de avaliao
Grau de focalizao da avaliao em indicadores
+ 0,74 0,85
objetivos
Grau de compreenso e considerao pela equipa de
avaliao externa das particularidades da
+ 0,58 1,07
Escola/Agrupamento, do seu contexto e da sua
evoluo
Durao da presena da equipa de avaliao externa + 0,39 0,89
Consequncias da avaliao externa na avaliao dos
+ 0,32 0,91
diretores
Consequncias da avaliao externa nas cotas de
+ 0,31 0,95
classificao do desempenho docente
80
Avaliao Externa das Escolas
81
Avaliao Externa das Escolas
82
Avaliao Externa das Escolas
83
Avaliao Externa das Escolas
84
Avaliao Externa das Escolas
85
Avaliao Externa das Escolas
86
Avaliao Externa das Escolas
87
Avaliao Externa das Escolas
Item r Sig.
Efeitos Resultados (mdia dos itens) + 0,15 0,02
Efeitos Prestao do Servio Educativo (mdia dos itens) + 0,16 0,01
Efeitos Liderana e Gesto (mdia dos itens) + 0,13 0,04
Impacto (mdia dos itens) + 0,12 0,05
Efeitos ao nvel organizacional + 0,13 0,04
Efeitos ao nvel curricular e pedaggico + 0,16 0,01
Efeitos ao nvel da participao da comunidade na vida da Escola + 0,11 0,10
Efeitos ao nvel do processo de autoavaliao da Escola + 0,15 0,02
Efeitos ao nvel dos resultados dos alunos + 0,20 0,00
Eficincia global + 0,12 0,05
88
Avaliao Externa das Escolas
Tabela VIII Diferenas nas percees dos efeitos e impactos da avaliao externa, em
funo da existncia de prticas sistemticas de autoavaliao na Escola
Com prticas Sem prticas
Item Mdia DP Mdia DP t p
Efeitos Resultados + 0,98 0,81 + 0,87 0,78 0,78 0,43
Efeitos Prestao Serv. Educativo + 1,16 0,84 + 0,94 0,81 1,45 0,15
Efeitos Liderana e Gesto + 1,35 0,88 + 1,03 0,69 1,98 0,05
Impacto + 1,88 0,95 + 1,74 1,01 0,78 0,43
Efeitos ao nvel organizacional + 1,54 1,08 + 1,26 0,95 1,44 0,15
Efeitos nv. curricular e pedaggico + 1,21 1,10 + 0,91 1,01 1,51 0,13
Efeitos nv. particip. comunidade + 1,13 1,09 + 0,91 1,01 2,02 0,04
Efeitos nv. processo de autoaval. + 1,84 1,15 + 1,40 0,88 2,15 0,03
Efeitos nv. resultados dos alunos + 0,93 1,02 + 0,69 0,87 1,32 0,19
Eficincia global + 1,46 0,92 + 1,00 1,00 2,71 0,01
Nota. Os graus de liberdade do teste t foram 253 em todos os casos.
89
Avaliao Externa das Escolas
90
Avaliao Externa das Escolas
91
Avaliao Externa das Escolas
93
Avaliao Externa das Escolas
Concluindo
Segundo os Diretores, a avaliao externa de escolas tem produzido
efeitos e impactos moderados na escola, mais ao nvel da liderana e
coordenao, que no plano curricular e pedaggico e menos ainda nos
resultados dos alunos, parecendo ter mais impacto sobre os rgos de
direo e coordenao que sobre professores, alunos e pais. Neste
contexto, a autoavaliao da escola mostra-se um mecanismo primordial
na intermediao do efeito da avaliao externa na melhoria da qualidade
escolar. Ela prpria tem sofrido melhorias em resultado da AEE,
constituindo um bom prenncio acerca do efeito futuro e sustentado da
avaliao externa de escolas, embora porventura necessite ainda de
investimento, consolidao e desenvolvimento nos planos tcnico,
cientfico e organizacional.
94
Avaliao Externa das Escolas
95
Avaliao Externa das Escolas
96
Avaliao Externa das Escolas
97
Avaliao Externa das Escolas
Referncias bibliogrficas
Afonso, A.J. (2011). Questes polmicas no debate sobre polticas educativas
contemporneas: O caso da accountability baseada em testes estandardizados e
rankings escolares. In M.P. Alves & J.-M. De Ketele (Eds.), Do currculo
avaliao, da avaliao ao currculo (pp. 83-101). Porto: Porto Editora.
Afonso, A.J. (2012). Para uma conceptualizao alternativa da accountability em
educao. Educao & Sociedade, 33 (119), 471-484.
Afonso, A.J., & Estvo, C.V. (1993). Aspectos da avaliao pedaggica na perspectiva
de professores dos ensinos pblico e privado. In A. Estrela, J. Ferreira, & P.
Caetano (Eds.), Avaliao em educao / Evaluation en education (p. 63-71).
Lisboa: Association Francophone Internationale de Recherche Scientifique en
ducation (AFIRSE) Portuguesa & Faculdade de Psicologia e de Cincias da
Educao da Universidade de Lisboa.
Afonso, A. & Schneider, M.P. (2012). Dialogando sobre polticas de regulao e
avaliao no campo da educao (Entrevista com o Professor Almerindo Janela
Afonso). Roteiro, 37 (2), 185-190. Acedido em http://hdl.handle.net/1822/20859
Afonso, N., & Costa, E. (2010). The external evaluation of public schools. The case of
Portugal. Lisboa: Universidade de Lisboa, Faculdade de Psicologia e de Cincias
da Educao. Acedido em: www.knowandpol.eu
Aguieiras, A. & Flix, M.C. (2015, maio). Superviso colaborativa entre pares.
Comunicao no Encontro SLiA Superviso, liderana(s) e avaliao: realidades,
tendncias e desafios na escola de hoje. Instituto de Educao da Universidade de
Lisboa, Lisboa, Portugal.
Alaz, V. (2000). Avaliao das escolas. In S.N. Jesus, P. Campos, V. Alaz, & J. Matias
Alves, Trabalho em equipa e gesto escolar (pp.25-38). Porto: Asa.
Alarco, I. (2015, maio). A natureza inter da superviso. Conferncia no Encontro
SLiA Superviso, liderana(s) e avaliao: realidades, tendncias e desafios na
escola de hoje. Instituto de Educao da Universidade de Lisboa, Lisboa,
Portugal.
Altrichter, H. & Kemethofer, D. (2015). Does accountability pressure through school
inspections promote school improvement?, School Effectiveness and School
Improvement: An International Journal of Research, Policy and Practice, 26 (1),
32-56, doi:10.1080/09243453.2014.927369
Alves, M.P., & Machado, E.A. (2003). Sentidos da escola e os sentidos da avaliao.
Revista de Estudos Curriculares, 1 (1),79-92.
98
Avaliao Externa das Escolas
Alves, M.P., & Machado, E.A. (2008). Para uma perspetiva dialgica da avaliao de
escolas. In M.P. Alves & E.A. Machado (Eds.), Avaliao com sentido(s):
contributos e questionamentos (pp. 96-108). Santo Tirso: De Facto Editores.
Aspinwall, K., Simkins, T., Wilkinson, J.F., & Mcauley, M.J. (2006). A Utilizao de
Critrios de Sucesso. In M. Preedy, R. Glatter, R. Levacic, & Colaboradores,
Gesto em educao. Estratgia, qualidade e recursos (pp.57-69). So Paulo:
Artmed.
Azevedo, J.M. (2007). Avaliao das escolas: fundamentar modelos e operacionalizar
processos. In Conselho Nacional de Educao, Avaliao das escolas Modelos e
processos. Actas de um seminrio realizado em 13 de Dezembro de 2005 (pp. 14-
99). Lisboa: CNE.
Barreira, J.C., Bidarra, M.G., Vaz-Rebelo, M.P., & Alferes, V. (2014). Melhoria das
escolas em Portugal. Anlise do desempenho no mbito da avaliao externa. In I.
Fialho, J. Verdasca, M. Cid & M. Favinha (Orgs.). Polticas educativas, eficcia e
melhoria das escolas (pp. 133-146). vora: Centro de Investigao em Educao e
Psicologia Universidade de vora (CIEP-EU).
Barroso, J. (2011). A autoavaliao das escolas. Revista Nova gora, 2, 47-48.
Bidarra, M.G, Barreira, J.C., Vaz-Rebelo, M.P., & Alferes, V.R. (2014). Relatrios de
avaliao externa. Da anlise das redundncias ponderao diferencial dos
resultados no 1 ciclo de avaliao. In J.A. Pacheco (Ed.), Avaliao externa de
escolas: quadro terico-conceptual (pp. 229-246). Porto : Porto Editora.
Calheiros, M., Lima, L., Martins, D., Rodrigues, R., Raimundo, R., Patrcio, J., ... Aguiar,
C. (2015). Interveno da equipa de peritos externos TEIP ISCTE-IUL: perspetiva
organizacional multinvel e multifator [OM2] na promoo do sucesso educativo.
In A. Mouraz, S. Valadas, & J.A. Pacheco (Orgs.), Avaliao externa das escolas
do ensino no superior Coordenadas e processos de um projeto de investigao,
E.book (pp. 459-465). Porto: CIIE Centro de Investigao e Interveno
Educativas.
Capela, L. (2015, maio). Olhar institucional sobre avaliao externa de escolas.
Conferncia no Seminrio Internacional Avaliao Externa de Escolas,
Universidade do Minho, Braga, Portugal.
Carvalho, S. (2003). Avaliao de programas sociais: balano das experincias e
contribuio para o debate. So Paulo em Perspectiva, 17, (3-4), 185-197.
Acedido em: http://www.scielo.br/pdf/spp/v17n3-4/a19v1734.pdf
Castro, L.C., Santos, J., Pereira, T., & Vitorino, A. (2013). Modelos para comparao
estatstica dos resultados acadmicos em escolas de contexto anlogo. Painel de
dados para apoio avaliao externa das escolas. Lisboa: Direo-Geral de
Estatsticas da Educao e Cincia/Ministrio da Educao e Cincia (DGEEC).
Acedido em: http://www.dgeec.mec.pt/np4/120
99
Avaliao Externa das Escolas
100
Avaliao Externa das Escolas
Dedering, K., & Mller, S. (2011). School improvement through inspections? First
empirical insights from Germany. Journal of Educational Change, 12, 301-322.
doi:10.1007/s10833-010-9151-9
Ehren, M.C.M., Altrichter, H., McNamara, J., & OHara, J. (2013). Impact of school
inspections on improvement of schools describing assumptions on causal
mechanisms in six European countries. Educational Assessment Evaluation and
Accountability, 25, 3-43. doi:10.1007/s11092-012-9156-4.
Ehren, M.C.M., Gustafsson, J.-E., Altrichter, H., Skedesmo, G., Kemethofer, D, &
Huber, S.G. (2015). Comparing effects and side effects of different school
inspection systems across Europe. Comparative Education, 51 (3), 375-400.
doi:10.1080/03050068.2015.1045769
Eurydice (2015). Assuring quality in Education: policies and approaches to school
evaluation in Europe. Eurydice Report. Luxembourg: Publications Office of the
European Union.
Fernandes, D. (2005). Avaliao das aprendizagens: desafios s teorias, prticas e
polticas Lisboa: Texto Editores.
Fernandes, D., Martins, A.M., & Mendes, A.N. (1997). A Evoluo do Sistema Educativo
e o PRODEP. Inovao e Resistncias numa Escola Bsica Integrada Estudo de
Caso. ME/DAPP.
Fernandes, P., Leite, C., Figueiredo, C., & Sampaio, M. (2015). Avaliao externa e
autoavaliao das escolas: que influncias? In A. Mouraz, S. Valadas, & J.A.
Pacheco (Orgs.), Avaliao externa das escolas do ensino no superior
Coordenadas e processos de um projeto de investigao, E.book (pp. 214-221).
Porto: CIIE Centro de Investigao e Interveno Educativas.
Fialho, I., Saragoa, J., Silvestre, M.J., Correia, A.P., & Gomes, S. (2014). Relatrios
internacionais e nacionais. Um olhar sobre a avaliao externa de escolas. In J.A.
Pacheco (Ed.), Avaliao externa de escolas: quadro terico-conceptual (pp. 147-
180). Porto : Porto Editora.
Fialho, I., Saragoa, J., Silvestre, M.J., Matos, M.C., Correia, A.P., & Gomes, S. (2015).
Os contraditrios na AEE. Consensos a divergncias. In A. Mouraz, S. Valadas, &
J.A. Pacheco (Orgs.), Avaliao externa das escolas do ensino no superior
Coordenadas e processos de um projeto de investigao, E.book (pp. 232-248).
Porto: CIIE Centro de Investigao e Interveno Educativas.
Figari, G. (2008). A avaliao de escolas: questes, tendncias e modelos. In M.P. Alves
& E.A. Machado (Eds.), Avaliao com sentido(s): contributos e questionamentos
(pp. 41-72). Santo Tirso: De Facto Editores.
Figueiredo, C., Leite, C., & Fernandes, P. (2013). Assessing curriculum development
through schools external evaluation Which referents in Portugal and England.
In J.C. Morgado, M.P. Alves, I. Viana, C. Ferreira, F. Seabra, N. van Hattum-
101
Avaliao Externa das Escolas
Janssen & J.A. Pacheco (Eds.), Future directions: uncertainty and possibility.
Conference proceedings of the first European Conference on Curriculum Studies
(pp. 100-103). Braga: University of Minho, Institute of Education, Research
Centre in Education (CIEd) / Porto Editora.
Figueiredo, C., Leite, C., & Fernandes, P. (2014). Modelos internacionais de avaliao
externa. A avaliao de escolas em Portugal e na Inglaterra origem,
fundamentos e percursos, In J.A. Pacheco (Ed.), Avaliao externa de escolas:
quadro terico-conceptual (pp. 119-146). Porto : Porto Editora.
Figueiredo, C., Leite, C., & Fernandes, P. (2015). Avaliao Externa e Autoavaliao de
escolas: perspetivas de escolas. In A. Mouraz; S. Valadas, & J.A. Pacheco (Orgs.),
Avaliao externa das escolas do ensino no superior Coordenadas e processos
de um projeto de investigao, E.book (pp. 207-210). Porto: CIIE Centro de
Investigao e Interveno Educativas.
Fonseca, A.M. (2015). Rankings das escolas: avaliao externa, autoavaliao e
resultados dos alunos. In A. Mouraz, S. Valadas, & J.A. Pacheco (Orgs.),
Avaliao externa das escolas do ensino no superior Coordenadas e processos
de um projeto de investigao, E.book (pp. 502-508). Porto: CIIE Centro de
Investigao e Interveno Educativas.
Gamboa, J., & Melo, N. (2009). A implementao da Norma ISO 9001 nas escolas
profissionais portuguesas: um estudo emprico. Revista Portuguesa de
Investigao Educacional, 8, 145-167.
Gis, E. & Gonalves, C. (2005). Melhorar as Escolas: Prticas Eficazes. Monitorizar e
Avaliar as Dinmicas de Transformao das Prticas de Ensino e das
Aprendizagens. Porto: Asa.
Gomes, S., & Fialho, I. (2015). Autoavaliao em escolas do Alentejo : medidas de apoio
para a construo de um processo formal. In A. Mouraz, S. Valadas, & J.A.
Pacheco (Orgs.), Avaliao externa das escolas do ensino no superior
Coordenadas e processos de um projeto de investigao, E.book (pp. 222-230).
Porto: CIIE Centro de Investigao e Interveno Educativas.
Gonalves, E., Fernandes, P. & Leite, C. (2014). Avaliao externa das escolas em
Portugal polticas e processos. In J.A. Pacheco (Ed.), Avaliao externa de
escolas: quadro terico-conceptual (pp. 71-87). Porto : Porto Editora.
Gonalves, E. & Leite, C. (2015). Referencial, processo e relatrio de avaliao externa
o olhar das escolas. In A. Mouraz, S. Valadas, & J.A. Pacheco (Orgs.), Avaliao
externa das escolas do ensino no superior Coordenadas e processos de um
projeto de investigao, E.book (pp. 15-24). Porto: CIIE Centro de Investigao
e Interveno Educativas.
Gonalves, E., Leite, C., & Fernandes, P. (2015a). Dois ciclos de avaliao externa das
escolas: efeitos percecionados por gestores escolares de topo. In A. Mouraz, S.
102
Avaliao Externa das Escolas
Valadas & J.A. Pacheco (Orgs.), Avaliao externa das escolas do ensino no
superior Coordenadas e processos de um projeto de investigao, E.book (pp.
467-473). Porto: CIIE Centro de Investigao e Interveno Educativas.
Gonalves, E., Leite, C., & Fernandes, P. (2015b). O programa de avaliao externa da
IGEC no 1 ciclo de avaliao (2006-2011) uma anlise a partir do referencial
terico e dos relatrios de avaliao de 83 escolas da rea Territorial do Norte. In
A. Mouraz, S. Valadas & J.A. Pacheco (Orgs.), Avaliao externa das escolas do
ensino no superior Coordenadas e processos de um projeto de investigao,
E.book (pp. 369-376). Porto: CIIE Centro de Investigao e Interveno
Educativas.
Gonalves, E., Leite, C., & Fernandes, P. (2015c). Perceo de efeitos da AEE o olhar
de diretores e coordenadores de equipas de autoavaliao das escolas. In A.
Mouraz, S. Valadas & J.A. Pacheco (Orgs.), Avaliao externa das escolas do
ensino no superior Coordenadas e processos de um projeto de investigao,
E.book (pp. 444-449). Porto: CIIE Centro de Investigao e Interveno
Educativas.
Greene, J.C. (2006). Evaluation, democracy, and social change. In I.F. Shaw, J.C.
Greene, & M.M. Mark (Eds.), The Sage handbook of evaluation (pp. 118-140).
London: Sage.
Gustafsson, J.-E., Ehren, M.C.M., Conyngham, G., McNamara, G, Altrichter, H., &
OHara, J. (2015). From inspection to quality: ways in which school inspection
influences change in schools. Studies in Educational Evaluation, 47, 47-57.
doi:10.1016/j.stueduc.2015.07.002
House, E.R., & Howe, K.R. (2003). Deliberative democratic evaluation. In T. Kellaghan,
D.L. Stufflebeam, & L.A. Wingate (Eds.), International handbook of educational
evaluation (pp. 79-100). Dordrecht : Kluwer Academic Publishers.
Inspeo Geral da Educao (2002). Avaliao Integrada das Escolas: apresentao e
procedimentos (2 ed.). Ministrio da Educao/IGE/DEBGEF.
Justino, D. (2015, maio). Avaliao externa de escolas : perspetivas do Conselho
Nacional de Educao. Conferncia no Seminrio Internacional Avaliao
Externa de Escolas, Universidade do Minho, Braga, Portugal.
Justino, D., & Batista, S. (2013). Redes de escolas e modos de regulao do sistema
educativo. Educao. Temas e Problemas, 12-13, 41-60.
Key, T. (2002). A avaliao escolar: a experincia OFSTED (Office Standards in
Education) em Inglaterra. In J. Azevedo (Ed.), Avaliao das escolas. Consensos
e divergncias (pp. 51-59). Porto: Asa.
Lawn, M. (2014, setembro). The shadow State: the shift to for-profit companies in
English education. Conferncia no Seminrio Inspeo, Conhecimento e
103
Avaliao Externa das Escolas
104
Avaliao Externa das Escolas
Lopes, G., Barreira, C., & Bidarra, M.G. (2015). Impactos e efeitos da avaliao externa
de escolas: Dinmicas de mudanas vividas pelas Escolas da Regio Centro. In A.
Mouraz, S. Valadas, & J.A. Pacheco (Orgs.), Avaliao externa das escolas do
ensino no superior Coordenadas e processos de um projeto de investigao, E.
book (pp. 377-384). Porto: CIIE Centro de Investigao e Interveno
Educativas.
Marques, M. & Pacheco, J.A. (2015). Avaliao externa de escolas e avaliao externa de
aprendizagens: resultados e novas perspetivas de estudo. In A. Mouraz, S.
Valadas, & J.A. Pacheco (Orgs.), Avaliao externa das escolas do ensino no
superior Coordenadas e processos de um projeto de investigao, E.book (pp.
515-522). Porto: CIIE Centro de Investigao e Interveno Educativas.
Matos, M.C., Neto, A., & Fialho, I. (2015). Mudanas fomentadas pelo processo de AE
no agrupamento de escolas M. Um estudo de caso. In A. Mouraz, S. Valadas, &
J.A. Pacheco (Orgs.), Avaliao externa das escolas do ensino no superior
Coordenadas e processos de um projeto de investigao, E.book (pp. 287-300).
Porto: CIIE Centro de Investigao e Interveno Educativas.
Moreira, J. (2004). Questionrios: teoria e prtica. Coimbra: Almedina.
Moreira, J. (2006). Investigao quantitativa: fundamentos e prticas. In J.A. de Lima &
J.A. Pacheco (Eds.), Fazer investigao: contributos para a elaborao de
dissertaes e teses (pp. 41-84). Porto: Porto Editora.
Morgado, J.C. & Seabra, F. (2015). Percees dos docentes de uma escola secundria
sobre o processo de avaliao externa. In A. Mouraz; S. Valadas & J.A. Pacheco
(Orgs.), Avaliao externa das escolas do ensino no superior Coordenadas e
processos de um projeto de investigao, E.book (pp. 346-349). Porto: CIIE
Centro de Investigao e Interveno Educativas.
Mouro, M. & Almeida, L. (2015). Efeitos da AEE: testemunho do Agrupamento
Vertical de Escolas de Grndola. In A. Mouraz; S. Valadas & J.A. Pacheco
(Orgs.), Avaliao externa das escolas do ensino no superior Coordenadas e
processos de um projeto de investigao, E.book (pp. 283-286). Porto: CIIE
Centro de Investigao e Interveno Educativas.
Mouraz, A., Fernandes, P., & Leite, C. (2015). Efeitos da AEE no desenvolvimento de
uma cultura de autoavaliao. In A. Mouraz, S. Valadas, & J.A. Pacheco (Orgs.),
Avaliao externa das escolas do ensino no superior Coordenadas e processos
de um projeto de investigao, E.book (pp. 190-196). Porto: CIIE Centro de
Investigao e Interveno Educativas.
Mouraz, A., Leite, C., & Fernandes, P. (2015a). A Avaliao externa das Escolas e os
processos curriculares: entre a determinao externa e a autonomia curricular. In
A. Mouraz, S. Valadas, & J.A. Pacheco (Orgs.), Avaliao externa das escolas do
ensino no superior Coordenadas e processos de um projeto de investigao,
105
Avaliao Externa das Escolas
106
Avaliao Externa das Escolas
Pacheco, J.A., Seabra, F., & Morgado, J.C. (2014). Avaliao externa. Para a
referencializao de um quadro terico sobre impacto e efeitos nas escolas do
ensino no superior. In J.A. Pacheco (Ed.), Avaliao externa de escolas: quadro
terico-conceptual (pp. 15-55). Porto : Porto Editora.
Pinto, D. (2015). O processo de AEE: um olhar a partir de uma experincia vivida. In A.
Mouraz, S. Valadas, & J.A. Pacheco (Orgs.), Avaliao externa das escolas do
ensino no superior Coordenadas e processos de um projeto de investigao,
E.book (pp. 274-282). Porto: CIIE Centro de Investigao e Interveno
Educativas.
Pinto, M. (2015). O ensino da Matemtica e a avaliao externa de escolas: um estudo
com professores do 1 ciclo. In A. Mouraz, S. Valadas, & J.A. Pacheco (Orgs.),
Avaliao externa das escolas do ensino no superior Coordenadas e processos
de um projeto de investigao, E.book (pp. 332-336). Porto: CIIE Centro de
Investigao e Interveno Educativas.
Portela, M.C.S. & Guerreiro, S. (2006). Clculo do valor acrescentado no Programa
AVES. In J. Azevedo (Ed.), Avaliao de escolas. Programa AVES (pp. 18-30).
Vila Nova de Gaia: Fundao Manuel Leo.
Riley, K.A. (2006). Qualidade e igualdade: objetivos competidores ou complementares?
In M. Preedy, R. Glatter, R. Levacic, & Colaboradores, Gesto em educao.
Estratgia, qualidade e recursos (pp. 33-42). So Paulo: Artmed.
Rocha, A.P.L. (2012). Avaliao externa de escolas: resultados e autoavaliao.
Que relao?, Foro de Educacin, 14, 207-223.
Rodrigues, E., Queirs, H., Sousa, J., & Costa, N. (2014). Avaliao externa de escolas:
do referencial aos estudos empricos. In J.A. Pacheco (Ed.), Avaliao externa de
escolas: quadro terico-conceptual (pp. 89-118). Porto : Porto Editora.
Rodrigues, P. (2015, janeiro). Avaliao de escolas em Portugal. Comunicao no XXII
Colquio AFIRSE Portugal Diversidade e complexidade da avaliao em
educao e formao: contributos da investigao/Diversit et complexit de
lvaluation en ducation et formation: contributions de la recherche. Instituto de
Educao da Universidade de Lisboa, Lisboa, Portugal.
Rodrigues, P., & Moreira, J. (2014). Questes de metodologia na avaliao e escolas. In
J.A. Pacheco (Org.), Avaliao externa de escolas: quadro terico/conceptual
(pp. 181-211). Porto: Porto Editora.
Roggero (2002). Avaliao dos sistemas educativos nos pases da Unio Europeia.
EccoS, Revista Cientfica, 4 (2), 31-46.
Ryan, K.E., Gandha, T., & Ahn, J. (2013). School self-evaluation and inspection for
improving U.S. schools? Boulder, CO: National Education Policy Center. Acedido
em: http://nepc.colorado.edu/publication/school-self-evaluation
107
Avaliao Externa das Escolas
Sampaio, M. & Leite, C. (2015). TEIP e Avaliao Externa de Escolas: o lugar da justia
social nas polticas de promoo do sucesso escolar e da melhoria educacional. In
A. Mouraz, S. Valadas, & J.A. Pacheco (Orgs.), Avaliao externa das escolas do
ensino no superior Coordenadas e processos de um projeto de investigao,
E.book (pp. 76-86). Porto: CIIE Centro de Investigao e Interveno
Educativas.
Santiago, P., Donaldson, G., Looney, A., & Nusche, D. (2012). Reviews of evaluation
and assessment in education: Portugal 2012. Paris: OECD Publishing. Acedido
em: http://dx.doi.org/10.1787/9789264117020-en
Saragoa, J., Silvestre, M.J., & Fialho, I. (2015). Avaliao de escolas: Gesto estratgica
e prospetiva. In A. Mouraz, S. Valadas, & J.A. Pacheco (Orgs.), Avaliao
externa das escolas do ensino no superior Coordenadas e processos de um
projeto de investigao, E.book (pp. 47-75). Porto: CIIE Centro de Investigao
e Interveno Educativas.
Silvestre, M.J., Fialho, I,, & Saragoa, J. (2014). A avaliao externa das escolas luz
das polticas educativas. In J.A. Pacheco (Ed.), Avaliao externa de escolas:
quadro terico-conceptual (pp. 57-69). Porto : Porto Editora.
Simes, G.M.J. (2011). A avaliao das escolas em Portugal. Conhecimento produzido e
questionamento sugerido. In Conselho Nacional de Educao, Avaliao das
escolas dos ensinos bsico e secundrio: perspectivas para um novo ciclo
avaliativo. Actas do seminrio realizado no CNE em 20 de Setembro 2010 (pp.
169-205). Lisboa: CNE.
Simons, H. (1992). Avaliao e reforma das escolas. In A. Estrela & A. Nvoa (Eds.),
Avaliaes em educao: novas perspectivas (pp. 139-153). Lisboa: Educa.
Sousa, J. & Costa, N. (2015). A avaliao externa de escolas na perspetiva dos Diretores
de escolas da zona Norte. In A. Mouraz, S. Valadas, & J.A. Pacheco (Orgs.),
Avaliao externa das escolas do ensino no superior Coordenadas e processos
de um projeto de investigao, E.book (pp. 488-492). Porto: CIIE Centro de
Investigao e Interveno Educativas.
Tavares, A.M. (2015). A avaliao externa das escolas e o seu impacto nas prticas de
liderana num agrupamento de escolas: um estudo de caso. In A. Mouraz, S.
Valadas, & J.A. Pacheco (Orgs.), Avaliao externa das escolas do ensino no
superior Coordenadas e processos de um projeto de investigao, E.book (pp.
483-487). Porto: CIIE Centro de Investigao e Interveno Educativas.
Terrasca, M. (2011). Reflectindo sobre a avaliao externa de escolas em Portugal:
avaliao externa dos estabelecimentos de ensino no contexto actual. In Conselho
Nacional de Educao, Avaliao das escolas dos ensinos bsico e secundrio:
perspectivas para um novo ciclo avaliativo. Actas do seminrio realizado no CNE
em 20 de Setembro 2010 (pp. 109-137). Lisboa: CNE.
108
Avaliao Externa das Escolas
Teixeira, S.C., & Alves, M. P. (2010). Percursos da avaliao das escolas em Portugal. In
M.P. Alves & M. A. Flores (Orgs.), Trabalho docente, formao e avaliao.
Clarificar conceitos, fundamentar prticas (pp. 155-191). Braga: Edies Pedago.
van Zanten, A. (2005). Efeitos da concorrncia sobre a atividade dos estabelecimentos
escolares, Cadernos de Pesquisa, 35 (126), 565-593.
Vestam, O.K., & Conner, R.F. (2006). The relationship between evaluation and politics.
In I.F. Shaw, J.C. Greene, & M.M. Mark (Ed.), The Sage handbook of evaluation
(pp. 225-242). London: Sage.
Witmer, D.F., Colman, R.W., & Katzman, S.L. (1999). From paper-and-pencil to screen-
and-keyboard. Toward a methodology for survey research on the internet. In S.
Jones (Ed.). Doing internet research. Critical issues and methods for examining
the Net (pp. 145-161). Thousand Oaks: Sage.
109
Avaliao Externa das Escolas
Isabel Fialho 1
Introduo
110
Avaliao Externa das Escolas
111
Avaliao Externa das Escolas
112
Avaliao Externa das Escolas
113
Avaliao Externa das Escolas
N. % N. % N. % N. % N. % N. %
20 29 17 25 37 54 24 35 8 12 32 47
114
Avaliao Externa das Escolas
115
Avaliao Externa das Escolas
116
Avaliao Externa das Escolas
70%
53%
60% 47%
50% Crticas positivas
40% 26% 26% 28% crticas negativas
30% 21%
Total (N=43)
20%
10%
0%
1. ciclo 2. ciclo
117
Avaliao Externa das Escolas
70%
70%
60%
50% 37% Crticas positivas
33% 30%
40% crticas negativas
30% 19%
12% Total (N=43)
20%
10%
0%
Clas mais baixas Clas mais altas
118
Avaliao Externa das Escolas
119
Avaliao Externa das Escolas
120
Avaliao Externa das Escolas
121
Avaliao Externa das Escolas
28%
30%
24% 24%
18%
20% 15% 15%
13% 13% 1. ciclo
11% 11%
8% 2. ciclo
10% 7%
6%
4% Total
1%
0%
122
Avaliao Externa das Escolas
Subjetividade da avaliao
124
Avaliao Externa das Escolas
53%
60% 47%
50%
40% 29% 29% 1. ciclo
24%
30% 17% 2. ciclo
20% Total (N=75)
10%
0%
Afirmao explcita de Afirmao implcita de
subjetividade da avaliao subjetividade da avaliao
125
Avaliao Externa das Escolas
126
Avaliao Externa das Escolas
127
Avaliao Externa das Escolas
59%
60%
50% 41%
40%
30% 23% 18% 18%
18% 18% 18% 18%
20% 9% 14%
5% 9% 9% 9%
10% 5% 5% 5%
0% 0%
0%
128
Avaliao Externa das Escolas
129
Avaliao Externa das Escolas
130
Avaliao Externa das Escolas
1. ciclo de AE 2. ciclo de AE
Total
Classif. mais Classif. mais Classif. mais Classif. mais (N=69)
Total Total
Subcategorias baixas altas baixas altas
N. % N. % N. % N. % N. % N. % N. %
Impacto e efeitos
9 13 9 13 18 26 18 26 6 9 24 35 42 61
na escola
Impacto e efeitos
1 1 1 1 2 3 0 0 0 0 0 0 2 3
na sala de aula
131
Avaliao Externa das Escolas
50%
50% 44%
35% 1. ciclo
40%
25% 2. ciclo
30%
19% Total (N=48)
20% 15%
10% 2% 2% 4% 2% 0% 2%
0%
Oportunidade Promoo da Desmotivao Diminuio da
de Melhoria Reflexo dos atores imagem externa
Interna da escola
50%
50% 44%
35%
40%
29%
30% classificaes mais
baixas
15% 15%
20%
4% 4% Classificaes mais
10% 0% 0% 2% 2% altas
0%
Oportunidade de Promoo da Desmotivao Diminuio da Total (N=48)
Melhoria Reflexo Interna dos atores imagem externa
da escola
132
Avaliao Externa das Escolas
133
Avaliao Externa das Escolas
134
Avaliao Externa das Escolas
18 26 7 10 25 36 17 25 2 3 19 28 44 64
135
Avaliao Externa das Escolas
42%
50% 34% 37% 33% 1. ciclo
31%
40% 24%
30% 2. ciclo
20%
10%
0%
Resultados Prestao do Servio Organizao e gesto
Educativo escolar + liderana +
capacidade de
autorregulao /
Liderana e gesto
2
Agregmos, aqui, alguns domnios do referencial do 1. ciclo, por forma a obter apenas 3
domnios, tal como contemplado no referencial do 2. ciclo de avaliao externa. Ainda que se
possam colocar algumas reservas a este procedimento, a eventual perda de algum rigor decorrente
da agregao dos dados compensada com a vantagem de ser possvel uma anlise comparativa.
136
Avaliao Externa das Escolas
40%
34%
classificaes
30% mais baixas
24% 24%
18% classificaes
20% 16% mais altas
14%
12%
9% 8% 9% 8%
10% 7% Total (N=74)
7%
5% 4%
0%
137
Avaliao Externa das Escolas
Figura 10. Discordncia nos diferentes domnios do relatrio no 2. ciclo avaliativo, por
classificao de escola.
37%
40% 33% 33% 33%
31%
27% classificaes mais
30% baixas
3. Consideraes Finais
138
Avaliao Externa das Escolas
139
Avaliao Externa das Escolas
Referncias Bibliogrficas
140
Avaliao Externa das Escolas
141
Avaliao Externa das Escolas
142
Avaliao Externa das Escolas
Carlos Barreira 1
1
Universidade de Coimbra. Apresentao do Estudo elaborado em coautoria com Maria da Graa
Bidarra, Maria da Piedade Vaz Rebelo e Valentim Rodrigues Alferes da Faculdade de Psicologia e
de Cincias da Educao da Universidade de Coimbra.
143
Avaliao Externa das Escolas
Metodologia
A base de dados constituda pelas classificaes obtidas em 43 Unidades
de Gesto (UG) da regio centro no primeiro e segundo ciclos avaliativos.
Para conhecer a evoluo das escolas calcularam-se as diferenas nas
classificaes entre o primeiro e segundo ciclo para cada domnio, tendo-
se procedido ainda anlise da relao entre as classificaes obtidas nos
dois ciclos avaliativos.
No que respeita s classificaes do domnio Resultados (cf. Quadro 1),
podemos constatar que, de 17UG com o nvel de Suficiente, no primeiro
ciclo de avaliao, 15UG passaram para o nvel de Bom e duas UG para o
nvel de Muito Bom, no segundo ciclo de avaliao. Por outro lado, de
23UG com o nvel de Bom, 13UG mantiveram-se no mesmo nvel,
enquanto 10UG subiram para o nvel de Muito Bom. tambm digno de
registo o facto de uma UG com nvel de Insuficiente conseguir atingir o
nvel de Muito Bom no segundo ciclo de avaliao.
2 Ciclo Total
145
Avaliao Externa das Escolas
2 Ciclo Total
1 Ciclo Bom 11 17 28
Muito Bom 3 8 11
Total 16 27 43
146
Avaliao Externa das Escolas
147
Avaliao Externa das Escolas
0 15 15 6 17 22
1 25 18 23 19 16
2 2 10 13 6 1
3 1 0 1 0 0
148
Avaliao Externa das Escolas
Concluses
149
Avaliao Externa das Escolas
Referncias bibliogrficas
150
Avaliao Externa das Escolas
151
Avaliao Externa das Escolas
Fernando Gonalves 1
Introduo
1
Universidade do Algarve. Apresentao do Estudo elaborado em coautoria com Liliana Paulos e
Sandra T. Valadas.
152
Avaliao Externa das Escolas
153
Avaliao Externa das Escolas
154
Avaliao Externa das Escolas
155
Avaliao Externa das Escolas
156
Avaliao Externa das Escolas
157
Avaliao Externa das Escolas
158
Avaliao Externa das Escolas
159
Avaliao Externa das Escolas
160
Avaliao Externa das Escolas
161
Avaliao Externa das Escolas
162
Avaliao Externa das Escolas
163
Avaliao Externa das Escolas
164
Avaliao Externa das Escolas
167
Avaliao Externa das Escolas
168
Avaliao Externa das Escolas
temos que ter em ateno que h sempre algum externo que vem c ver
as coisas.
No que se refere articulao e sequencialidade curriculares, na
generalidade, os participantes concordam que houve melhorias,
principalmente na articulao entre os ciclos de ensino, mas que ainda no
conseguiram dar resposta aos objetivos pretendidos com a AEE.
Reconhecem que estas foram questes detetadas na AEE, nas quais tm
trabalhado, verificando-se alguma evoluo, no muito significativa, nos
resultados escolares dos alunos (coordenadora do 1 ciclo). Na perspetiva
do Diretor, a questo da articulao vertical est ultrapassada, apesar de a
AEE focar veementemente essa questo. Na sua opinio, hoje em dia os
agrupamentos trabalham de uma forma horizontal, trabalham cada vez
mais em brainstorming (...), em cada ano trabalha-se em conjunto (...), e
isso o futuro, porque articular entre o 2 e o 1 ciclos no chega, tem de
se articular do 1 ano ao 4 ano e do 4 ano ao 6 ano. Acrescentou,
ainda, que a articulao horizontal fez com que os professores do 2 ciclo
trabalhassem com os do 1 ciclo e os professores do 3 ciclo trabalhassem
com os do 1 ciclo e at do pr-escolar. Tambm o CEAA mencionou
que a articulao entre o 4 e o 5 ano aquela que mais visvel, porque
onde h um maior choque dos alunos quando vm do 4 para o 5 ano.
No seu entender, ainda que j no existam compartimentos estanques
entre ciclos, cada qual para o seu lado, verifica-se, de facto, uma maior
cooperao entre ciclos e entre professores. Para as restantes CEGI, tem
sido uma evoluo positiva, sobretudo, porque o conceito de articulao
tambm evoluiu (...); temos evoludo, aprendido e ainda temos muito para
aprender (coordenadora do pr-escolar). Segundo as CEGI, a palavra
articulao surgiu em 1999, quando o Agrupamento foi iniciado, mas
somente em 2009, depois do 1 ciclo de avaliao externa, comearam a
realizar reunies de articulao. Reconhecem que foi na sequncia da AEE
que comearam a construir testes de diagnstico, elaborados em
articulao (4 com o 5 ano; 6 com 7 ano), bem como a preparao de
materiais em conjunto. No obstante, referiram que a questo da
articulao das AEC, levantada pela AEE, complicada, uma vez que os
169
Avaliao Externa das Escolas
170
Avaliao Externa das Escolas
171
Avaliao Externa das Escolas
172
Avaliao Externa das Escolas
173
Avaliao Externa das Escolas
174
Avaliao Externa das Escolas
176
Avaliao Externa das Escolas
178
Avaliao Externa das Escolas
179
Avaliao Externa das Escolas
180
Painel
A PERSPETIVA DAS ESCOLAS
181
Avaliao Externa das Escolas
Este texto no deve ser tomado como um artigo cientfico mas, apenas,
como um registo escrito, aqui e ali mais detalhado, da comunicao a que
se reporta, ela prpria, um simples testemunho pessoal, em jeito de
modesto contributo para um debate que a todos interessa e que o Conselho
Nacional de Educao entendeu, muito oportunamente, dinamizar.
As perspetivas pessoais que temos nesta matria esto, naturalmente,
marcadas por um percurso de observao e participao nas aes e nas
dinmicas que se foram desenvolvendo nos ltimos anos no sistema
educativo portugus. Sem prejuzo da qualidade de observador das
polticas educativas e, ocasionalmente, das realidades de outras
organizaes escolares, a partir da observao participante, enquanto
docente e membro dos rgos de gesto de uma escola concreta, que
alicero a minha opinio sobre a matria em debate. Assim, considerando
que as ideias e perspetivas adiante expostas foram organizadas a partir da
ao participante nas dinmicas de uma escola concreta, interessar
caracterizar e contextualizar sumariamente essa escola. Todavia, convm
salientar que no nossa pretenso conferir a este caso qualquer
representatividade que garanta a generalizao das concluses tiradas a
partir dele. Assim, quando muito, essas apreciaes s podero ser
estendidas a outros casos, por similaridades que outros encontrem em
casos que com este sejam comparveis.
1
Diretor da Escola Secundria de Caldas das Taipas - Guimares
182
Avaliao Externa das Escolas
183
Avaliao Externa das Escolas
184
Avaliao Externa das Escolas
185
Avaliao Externa das Escolas
que pode ser evocada junto das famlias para legitimar a sua ao e
reforar essa lgica de confiana.
Como principais pontos fracos do atual modelo de avaliao externa e da
forma como tem sido implementado, julgo ser de salientar o enfoque
limitado no tempo, no campo de observao e nas tcnicas de anlise. Isto
, por enquanto, a anlise est ainda demasiado circunstanciada ao
momento em que ocorre a avaliao, cuida de aspetos ainda demasiado
parcelares da ao organizacional e dos resultados dessa ao e est
constrangido pela escassez de tcnicas e tempo de anlise.2 Outras
limitaes derivam da ambiguidade de papis dos avaliadores vinculados
IGEC, potencialmente geradores de atitudes defensivas e de vises
comprometidas ou menos independentes. Por outro lado, o modelo acaba
por acolher uma participao direta bastante atomizada, na medida em que
confere voz apenas a um reduzido nmero de atores e interessados que
integram os painis de entrevistas e, s, se acaso tiverem oportunidade de
se expressar nessas entrevistas. Assim, muito embora participe uma
amostra maior nos inquritos por questionrio, o tempo limitado das
entrevistas orientadas em painel ou a estrutura de resposta fechada dos
questionrios, acaba por determinar uma reduzida participao direta na
produo de dados para a avaliao. Para alm disso, algumas colees de
dados usadas no atual modelo padecem de fragilidades que importa
atenuar. Entre elas, algumas determinadas pela qualidade dos instrumentos
de recolha, outras pela desatualizao e limitao dos dados, outras, ainda,
pela deficiente utilizao ou leitura dos dados obtidos.3 Por ltimo,
entendo ser de salientar, em especial neste segundo ciclo, o reduzido
escrutnio dos impactos locais das polticas pblicas centrais. Ou seja, ao
no cuidar de circunstanciar os efeitos locais das polticas centrais, as
2
Compare-se, por exemplo, com o modelo da Avaliao Integrada das Escolas a que j fizemos
referncia.
3
Nomeadamente quando so convocadas colees parcelares de dados de um ano escolar para
conjugar e complementar dados diversos de outro ano escolar; quando os questionrios integram
alguns itens de formulao dupla pedindo uma resposta nica; quando toma alguns resultados de
alguns exames de alguns cursos para concluir implicitamente sobre (todos) os resultados de uma
escola ou quando se faz a leitura da expresso de opinies relativas baseadas em percees
individuais como se se tratasse da descrio de factos universalmente mensurveis.
186
Avaliao Externa das Escolas
4
Atente-se, por exemplo, no momento atual, na inexistncia de ofertas de segunda oportunidade na
generalidade das escolas, designadamente, de ensino recorrente e/ou de educao de adultos, merc
de uma rede muito incipiente determinada pela tutela.
5
Alis, continua a ser pouco compreensvel a omisso de avaliao externa das escolas,
designadamente, das que funcionam com base em financiamento predominantemente ou
exclusivamente pblico, como no caso dos colgios e cooperativas com contrato de associao ou
da maioria das escolas profissionais.
187
Avaliao Externa das Escolas
188
Avaliao Externa das Escolas
189
Avaliao Externa das Escolas
190
Avaliao Externa das Escolas
191
Avaliao Externa das Escolas
192
Avaliao Externa das Escolas
10
A ttulo de exemplo, e como evidncia dos efeitos de isomorfismo a que aludimos anteriormente,
observe-se o que se verificou no campo da organizao da avaliao interna de escolas (designada
autoavaliao). A existncia de dispositivos de autoavaliao no s uma condio legal, como
tambm a base essencial para a autorregulao, para a definio e implementao de processos de
melhoria e para a prestao local de contas. Contudo, num dado momento a IGEC entendeu
prescrever ou, pelo menos, sugerir um modelo operacional assente numa estrutura formal que
designa por equipa de autoavaliao. Depois, muito rapidamente, passou a focalizar a sua anlise
na verificao da existncia dessa equipa de autoavaliao em cada escola, seguindo, em muitos
casos para a verificao (e/ou aferio) da sua composio. Daqui at prescrio da existncia
formal de uma equipa de autoavaliao e, at, fixao da sua composio foi um passo. Como
consequncia, emergiram as respostas tpicas de mera conformao formal ou de adaptao ritual,
eventualmente sem alterao de prtica, mas com adaptao dos discursos sobre as prticas e, em
particular, sem efeito na ao organizacional. Assim se foi criando, num grande nmero de escolas,
a equipa de autoavaliao esperada pela IGEC, por via de um fenmeno de isomorfismo que, por
si s, no garante a mudana das prticas ou do seu contedo. Na verdade, a este propsito,
193
Avaliao Externa das Escolas
194
Avaliao Externa das Escolas
197
Avaliao Externa das Escolas
1
Agrupamento de Escolas Frei Gonalo de Azevedo S. Domingos de Rana - Cascais
198
Avaliao Externa das Escolas
200
Avaliao Externa das Escolas
Introduo
1
Agrupamento de Escolas Marqus de Marialva, Cantanhede
201
Avaliao Externa das Escolas
202
Avaliao Externa das Escolas
203
Avaliao Externa das Escolas
204
Avaliao Externa das Escolas
205
Avaliao Externa das Escolas
206
Avaliao Externa das Escolas
2 Propsitos do OQP
Com este dispositivo pretendemos atingir os propsitos que podem e
devem ser esperados de qualquer processo de autoavaliao, alguns j
conseguidos, outros ainda muito distantes e outros que sabemos de difcil
avaliao. Podemos organiz-los em trs dimenses, seguindo documentos
da coordenao interna: organizacionais, profissionais e educacionais.
2.1.- Organizacionais:
Administrativo, permite uma maior racionalidade de processos
instrumento tcnico.
Poltico, com mais participao e negociao por parte de todos
instrumento estratgico de gesto mais democrtica.
Social, promove uma maior transparncia de processos
instrumento de comunicao.
207
Avaliao Externa das Escolas
2.2. Profissionais:
2.3. Educacionais
208
Avaliao Externa das Escolas
209
Avaliao Externa das Escolas
210
Avaliao Externa das Escolas
Concluso
211
Avaliao Externa das Escolas
Alexandre Costa1
1
Escola Secundria de Loul
2
Alves, G. l. (2005) A produo da Escola Pblica contempornea, 3ed., Autores Associados,
p.21.
212
Avaliao Externa das Escolas
mesmo que, e passo a citar, o colono deve ser instrudo para ser
colono e no magistrado. Assim, o arteso deve receber na infncia uma
instruo que possa afast-lo do vcio e conduzi-lo virtude, ao amor
Ptria, ao respeito s leis, mas nunca uma instruo que possibilite a
direo dos negcios da Ptria e a administrao do governo3.
Devo dizer que ao nvel do ensino secundrio esta a grande alterao que
ocorreu ao longo dos ltimos dois sculos. Cada um poder escrever o seu
prprio destino ao decidir o seu percurso educativo. No entanto, a
conceo da gnese est inalterada. A Escola Pblica existe para servir os
interesses do Estado. neste momento que urge esclarecer o que entendo
serem as principais vertentes do Estado servidas pela Escola Pblica no
regime democrtico em que vivemos.
Da perspetiva da definio de polticas so os governos, que representam a
maioria dos eleitores, e que definem, consoante o seu projeto de governo,
revises curriculares de cumprimento obrigatrio que, no caso do ensino
secundrio, pouco ou nenhum azo do autonomia da Escola, j que a
avaliao externa final dos alunos, no caso do ensino regular, incide sobre
contedos inegociveis e que so independentes do contexto social,
econmico e geogrfico dos alunos. Dada a sua centralizao seria de
esperar, que aps um consenso nacional, estes currculos e as
aproximaes a desenvolver permaneceriam essencialmente inalterveis,
j que consistem de contedos bsicos com um nvel de especializao
ainda relativamente baixo. No entanto, a intervalos temporais reduzidos,
existem reformulaes que vo ao encontro das concees do poder
vigente ou de maior exigncia e rigor no mbito dos resultados da
avaliao externa dos alunos ou de maior sucesso. Uma vez que muito
difcil conseguir uma simultaneidade de ocorrncias, necessrio uma
posio equilibrada que permita, sem grandes alteraes, uma alterao de
procedimentos relativamente rpida. Note-se, no entanto, que os
resultados de uma Escola analisados na perspetiva dos resultados
acadmicos definidos politicamente, podero ser positivos num contexto e
ser negativos no seguinte. Este talvez o aspeto mais difcil de gerir por
parte de um diretor, que deve estar atento s inflexes polticas e agir de
modo clere e em conformidade. No entanto, a alterao da dinmica da
escola nem sempre tem uma resposta to expedita quanto a que o diretor
3
Ibidem.
213
Avaliao Externa das Escolas
4
Inspeo-Geral da Educao (2007) Avaliao Externa das Escolas Relatrio -Escola
Secundria de Loul, p.12.
214
Avaliao Externa das Escolas
5
Ibid, p.7.
215
Avaliao Externa das Escolas
comeando por mim, que comeassem a abrir as portas da sua aula para
que os professores comeassem a deixar de se sentir intimidados e isso
comeasse a ser encarado como uma prtica natural. No entanto, embora
isso j esteja quase generalizado, existem ainda grupos de docncia onde
no est totalmente conseguido. A este propsito alerto que, apesar de
estar legalmente prevista a superviso do coordenador, a assistncia de
aulas apenas est prevista na lei da avaliao de desempenho docente, e
apenas atravs da avaliao externa tendo apenas carter obrigatrio
unicamente para os docentes do 2 e 4 escales, caso pretendam progredir
na carreira. Nos restantes casos, existe apenas quando o docente de sua
livre vontade se submete a ela para a eventual meno qualitativa de
Excelente, no sendo, neste momento, sequer necessria para a meno de
Muito Bom. Peo por isso que, se existe vontade de que a superviso do
coordenador inclua a observao da prtica letiva (j que existem muitas
outras formas de superviso), tal seja espelhado na legislao de modo a
dar enquadramento a essa ao. De contrrio, no faz sentido pressionar as
escolas para realizar uma ao para a qual no tem enquadramento
Em novembro de 2013 a Escola recebeu novamente a ao inspetiva da
Avaliao Externa das Escolas.
Em qualquer escola normal a avaliao externa introduz uma tenso que
a muitos parecer desnecessria, j que creem que no h nada que possa
ser melhorado ou, alternativamente, que esto a fazer o melhor possvel.
Como em qualquer avaliao, a tenso faz parte do processo. Mas
tambm, como em qualquer avaliao, os resultados que a mesma produz
esto claramente condicionados pela recetividade que o avaliado apresenta
s suas concluses.
O processo da avaliao externa obriga a uma sobrecarga burocrtica que
pesada para a Escola e que obriga a muitas reunies para que a Escola
possa produzir um documento de apresentao que seja representativo da
viso de todos os stakeholders. tambm necessrio organizar os painis
e nesse caso proceder a trocas nos horrios de modo a garantir que os
alunos no ficam sem aulas pelo facto dos seus docentes estrarem nos
painis, o que constitui uma logstica pesada. Alm disso existe a
perturbao das aulas para passar os inquritos requeridos pela IGEC aos
alunos e famlias.
216
Avaliao Externa das Escolas
217
Avaliao Externa das Escolas
6
Inspeo-Geral da Educao (2014) Avaliao Externa das Escolas Relatrio -Escola
Secundria de Loul, p.11.
218
Avaliao Externa das Escolas
219
Painel
A PERSPETIVA DOS INVESTIGADORES
E AVALIADORES
220
Avaliao Externa das Escolas
1
Universidade do Minho
2
O projeto Qualidade XXI nasceu do projeto-piloto sobre Avaliao da Qualidade na Educao
Escolar que foi uma iniciativa da Comisso Europeia para promover a autoavaliao e a avaliao
da qualidade. Maria do Carmo Clmaco, para alm da anlise do projeto-piloto atrs indicado,
refere tambm no seu trabalho um dos primeiros projetos de autoavaliao de escolas que foi
lanado em Portugal e de que mentora o Observatrio da Qualidade da Escola/PEPT 2000. Cf.
Clmaco, M. C. (2005). Avaliao de Sistemas em Educao. Lisboa: Universidade Aberta.
3
O texto corresponde a uma comunicao ao painel A perspetiva dos investigadores e
avaliadores, integrado no Seminrio Avaliao Externa das Escolas, promovido pelo Conselho
Nacional de Educao. Coimbra, Auditrio do Conservatrio de Msica de Coimbra, 13 de maro
de 2015.
221
Avaliao Externa das Escolas
4
Cf. Inspeo-Geral da Educao e Cincia. (http://www.ige.min-
edu.pt/content_01.asp?BtreeID=03/01&treeID=03/01/03/00)
222
Avaliao Externa das Escolas
5
Cf. Afonso, A. J. (2001). As escolas em avaliao: avaliabilidade e responsabilizao.
Administrao Educacional Revista do Frum de Administrao Educacional, n 1, p.24.
6
Cf. IGEC, Quadro de Referncia para a Avaliao Externa das Escolas. (http://www.ige.min-
edu.pt/upload/AEE_2014-2015/AEE_14-15_(1)_Quadro_de_Referencia.pdf)
224
Avaliao Externa das Escolas
7
Cf. Azevedo, J. M. (2007). Avaliao das Escolas: Fundamentar modelos e operacionalizar
processos. In Avaliao das Escolas: Modelos e Processos, Lisboa: CNE, p.57.
226
Avaliao Externa das Escolas
227
Avaliao Externa das Escolas
229
Avaliao Externa das Escolas
1
CCDR Norte
230
Avaliao Externa das Escolas
231
Avaliao Externa das Escolas
233
Avaliao Externa das Escolas
234
Avaliao Externa das Escolas
235
Avaliao Externa das Escolas
237
Avaliao Externa das Escolas
238
Avaliao Externa das Escolas
Helena Peralta1
1
Instituto da Educao da Universidade de Lisboa
239
Avaliao Externa das Escolas
240
Avaliao Externa das Escolas
241
Avaliao Externa das Escolas
242
Avaliao Externa das Escolas
2
Peter Handke (1972). Die Angst des Tormanns beim Elfmeter (A angstia do guarda redes perante
o penalty). Berlin: Suhrkamp Verlag.
243
Avaliao Externa das Escolas
244
Avaliao Externa das Escolas
3
Seria interessante, mas aqui deslocado, discutir a contradio terica e prtica entre a base
criterial da construo do referencial e os efeitos normativos implcitos no seu uso.
245
Avaliao Externa das Escolas
246
Avaliao Externa das Escolas
5
Sublinhado do autor
6
Ttulo do 1 captulo do livro de Douglas Reeves (2010) - Transforming Professional
Development into Student Results
247
Avaliao Externa das Escolas
Paul Black e Dylan William, no seu artigo seminal Inside the Black
Box (1998), questionam a possibilidade de que algum possa concluir
que determinado conjunto de inputs possa produzir melhores outputs, sem
que se estude o que se passa no interior da caixa negra e, abrindo um
pouco a caixa, sustentam que toda a aprendizagem depende do que os
professores e os alunos fazem na sala de aula Teachers have to manage
complicated and demanding situations, channeling the personal,
emotional, and social pressures of a group of 30 or more youngsters in
order to help them learn immediately and become better learners in the
future. Standards can be raised only if teachers can tackle this task more
effectively. (p. 139).
Tambm Richards (2001) acentua essa impossibilidade Some
[educational outcomes) can only be assessed outside the examination
room in the general life of class and school through some process of
observation and judgement. Similarly, the processes of teaching and
learning cannot be directly tested but can be only evaluated through
observation and judgement (p. 655).
Ser, pois, incomportvel e irrealista, pedir escola que preste contas
sobre a melhoria das aprendizagens dos alunos, baseada apenas em
testemunhos indiretos, em percees e opinies e, sobretudo, em dados
fornecidos por provas finais e exames externos, sem que, de facto, se
conhea, por observao, o que pode ter levado a esses resultados, ou seja,
como se ensina e como se aprende, num dado contexto concreto.
Temo, no entanto, que a razo por que muitos professores tm receio de
deixar que observem as suas aulas no seja a que aventada por Chapman
we have entered an era where teachers are becoming more willing to trust
their own expertise and definitions of effective teaching rather than rely
solely on those of an external inspector and are therefore more reluctant to
change their practice as result of inspection (p. 70).
De que mecanismos dispe a escola para potenciar essa expertise no
sentido do sucesso dos alunos? E a expertise dos avaliadores?
248
Avaliao Externa das Escolas
249
Avaliao Externa das Escolas
250
Avaliao Externa das Escolas
Referncias bibliogrficas
251
ENCERRAMENTO
O FUTURO DO MODELO DE
AVALIAO EXTERNA DAS ESCOLAS
252
Avaliao Externa das Escolas
Lus Capela1
1
Inspeo-Geral da Educao e Cincia
253
Avaliao Externa das Escolas
Mas para que o processo tenha naturalmente sucesso e para que continue,
porque uma exigncia de todos, temos de pensar tambm na evoluo do
modelo e, por isso, gostaria de chamar a vossa ateno para as questes
que se seguem.
Em primeiro lugar, deveremos ou no optar por um modelo compreensivo,
aplicvel a todo o sistema de ensino no superior pblico e privado,
reconhecendo explicitamente as especificidades em presena? Neste
momento, temos um modelo de avaliao externa do pas, mas que apenas
foi aplicado a uma parte do pas, isto , escola pblica. urgente que o
modelo da avaliao externa seja claramente alargado, aplicado ao
universo dos estabelecimentos de ensino, sejam pblicos, privados,
cooperativos, de dupla tutela, profissionais, etc. Todos os
pais/encarregados de educao tm direito a informao clara, no
momento em que escolhem a escola dos seus filhos, evitando-se, assim,
que a informao disponvel se resuma a rankings (que o que temos
neste momento). A avaliao externa feita em todos os estabelecimentos
de ensino pode disponibilizar essa informao de qualidade e abrangente.
A bem da informao, do esclarecimento e da liberdade de escolha
fundamental que a avaliao externa se aplique a todo o universo em
presena. Um modelo aplicado a todo o pas tem de ser capaz de
reconhecer as especificidades das escolas, tem que ser um modelo, ao
mesmo tempo, muito forte, mas tambm muito inclusivo, muito
compreensivo.
A segunda questo diz respeito ao foco na avaliao das opes
pedaggicas e da sua concretizao em todos os nveis de gesto do
currculo envolvendo, sobretudo, os professores e as lideranas
pedaggicas. Embora produzindo melhoria na escola, como j
observmos, este um modelo que se tem centrado mais na documentao
que a escola produz e nas estruturas de topo, pelo que, naturalmente, no
tem gerado a necessria transformao nas prticas pedaggicas.
No deveremos centrar a avaliao externa claramente na gesto, nas
opes pedaggicas e na gesto do currculo?! Deixo essa questo no ar.
Qual ser, ento, a base de trabalho? A base de trabalho centrar-se- no
254
Avaliao Externa das Escolas
255
Avaliao Externa das Escolas
256
Conselho Nacional de Educao
Rua Florbela Espanca
1700-195 Lisboa
Portugal