Avaliação e Indicadores Educacionais:
A Experiência da Reformulação do
ENEM
Sumário
1. Avaliação e Indicadores Educacionais:
aspectos gerais
2. O caso da Reformulação do ENEM em 2009
I.
O Problema dos vestibulares descentralizados
II. A insuficiência da ENEM original
III. O Projeto de reformulação do ENEM
Avaliação e Indicadores Educacionais:
Aspectos Gerais
Avaliação Educacional
 Avaliar é o ato de atribuir valor ou mérito a alguma
coisa.
 Avaliação educacional: expressa uma conclusão
normativa acerca da qualidade (ou sucesso) de
estudantes, professores, escolas, programas,
políticas ou sistemas educacionais.
 A avaliação educacional está associada a idéia
medir e julgar resultados educacionais.
Avaliação X Indicadores Educacionais
 Indicadores não são, necessariamente,
avaliações. Enquanto avaliação educacional
exprime julgamento, indicadores podem ter
um caráter mais descritivo.
Indicador de Resultados X Avaliação Educacional
 Ainda que indicadores de resultados educacionais
não podem, necessariamente, ser entendidos
como avaliações educacionais, uma de suas
principais funções é justamente a de propiciar ao
público interessado que realizem avaliações
educacionais mais embasadas.
 A importância de determinado indicador de
resultados educacionais está em sua capacidade
de fornecer informações relevantes para quem
necessita realizar tais avaliações.
Avaliação Educacional e Exames Externos
 Embora usualmente chamados de
avaliação, o desempenho de estudantes em
exames padronizados é, mais precisamente,
um indicador de resultado educacional.
Indicador de Resultados X Avaliação Educacional
 Por vezes, indicadores de resultados educacionais
são tomados como avaliação.
 Por exemplo, alunos que se saem melhor em um
teste padronizado podem ser considerados como
obtendo mais sucesso educacional do que alunos
que se saem pior
 Nesse caso, o indicador (pontuação no teste) é
transformado em avaliação devido ao critério
(normativo) de que estudantes com maiores
pontuações são estudantes de mais sucesso.
Funções da Avaliação
1. Diagnóstico, Credenciamento, Seleção e
Accountability (avaliação somativa)
2. Aprimoramento das escolas, cursos ou
instituições (avaliação formativa)
3. Para fins administrativos (promoções,
regulação etc)
Impactos da Avaliação
1. Se o desempenho em um determinado
indicador é tomado como avaliação;
2. Se o resultado na avaliação traz
conseqüências importantes para os avaliados
Então,
 Há um incentivo para que os avaliados moldem
suas ações para terem um bom desempenho
no indicador considerado
Impactos da Avaliação
 Mudanças de comportamento
induzidas pela avaliação:
1. Mudanças na direção almejada
2. Gaming e fraude.
A Experiência da Reformulação do
ENEM
ENEM: Uma Avaliação de Final de Ciclo
– Final do Ensino Médio
De modo geral, as principais funções de uma
avaliação do final do Ensino Médio são:
1) Orientar o currículo do Ensino Médio
2) Contribuir para o processo de Seleção para o Ensino
Superior
3) Credenciar estudantes
4) Diagnóstico de Accountability (prestação de contas)
Avaliações ao Final do Ensino Médio
 Buscam avaliar as habilidades e conhecimentos
adquiridos pelo conjunto dos estudantes na
escola básica e, assim, servir de credencial para
cada estudante específico buscar uma
colocação no mercado de trabalho e,
principalmente, na universidade.
 Dado que o desempenho nesses exames
produz conseqüências para escolas e
estudantes eles acabam por orientar o currículo
do ensino médio.
Reformulação do ENEM: Objetivos
1)Unificação dos Vestibulares
2)Orientar melhor o currículo do Ensino Médio
O Problema dos vestibulares
descentralizados
Avaliação ao Final do Ensino Médio
– O Vestibular
 Até a criação do ENEM em 1998, o Brasil não
possuía um exame externo ao final Ensino
Médio (Nacional ou Regional)
 Diferentemente da experiência internacional, o
Brasil caminhou para a prática de exames
descentralizados para ingresso nas
Universidades. Cada Universidade possuía seu
próprio exame
Avaliação ao Final do Ensino Médio
– O Vestibular
 Exames descentralizados são ineficientes por
limitar o número de instituições a que um
estudante pode concorrer. Nesse sistema é
difícil pleitear uma vaga numa universidade
distante.
 Na presença de um exame centralizado, o
estudante pode realizar a prova em sua cidade
e se candidatar para qualquer universidade do
país.
 Mas a dificuldade logística para os estudantes
não era o principal inconveniente dos
vestibulares.
Avaliação ao Final do Ensino Médio
– O Vestibular
 Objetivo: prever o desempenho acadêmico dos
candidatos e, assim, selecionar os mais
promissores
 Embora não seja sua finalidade, o vestibular acaba
por interferir no currículo do ensino médio. É muito
difícil para dirigentes educacionais adotar um
currículo que, embora considerem o mais
apropriado, reduza a probabilidade de seus
estudantes de ingressar numa boa Universidade.
 No Brasil, os vestibulares convergiram para um
formato padrão: baseado no acumulo de conteúdos,
exigindo dos estudantes um conhecimento
enciclopédico e com ênfase exagerada na
memorização.
Avaliação ao Final do Ensino Médio
– O Vestibular
 As escolas acabavam por se preocupar mais em
cobrir os conteúdos exigidos pelos vestibulares
do que aprofundar e consolidar aqueles
conhecimentos e habilidades mais
fundamentais.
 O resultado era tornar a escola desinteressante
para muitos estudantes.
 Os vestibulares acabam “definindo” os
currículos do ensino médio.
A insuficiência do ENEM original
Avaliação ao Final do Ensino Médio
– O Enem
 Criado em 1998, o Enem teve por objetivo
avaliar o desempenho do estudante ao fim da
escolaridade básica (auto-avaliação)
 Na prática, no entanto, sua principal função foi o
acesso ao ensino superior. Era utilizado por
várias instituições e era obrigatório para o
ProUni
 A partir de 2005, com a divulgação do resultado
por escolas, passou a ser também um
instrumento de accountability
Avaliação ao Final do Ensino Médio
– O Enem
 Vantagens: não exigia excesso de memorização
e se concentrava em aspectos fundamentais
como a construção de argumentações
consistentes e solução de problemas (prova
baseada em habilidades e competências)
 No entanto, no formato original, o Enem não
tinha como exercer plenamente o papel de um
exame de final de ciclo.
Avaliação ao Final do Ensino Médio
– O Enem
 Problema 1 - por não exigir conhecimento de
ciências (humanas e da natureza) e se basear
em habilidades mais elementares, as principais
universidades resistiam a utilizar o Enem como
critério exclusivo de seleção
 Problema 2 - Por não abordar conhecimentos
de ciências, ele também falhava em organizar o
currículo do ensino médio.
O Projeto de reformulação do ENEM
Avaliação ao Final do Ensino Médio
– O Novo Enem
 Proposta: manter o aspecto mais inovador do
Enem, que é o de focar mais na compreensão e
na utilização dos conhecimentos escolares nas
vidas dos estudantes, e agregar mais conteúdo
cientifico e habilidades matemáticas mais
complexas
 Partiu da Matriz do Encceja e incluiu questões
com maior nível de complexidade. Não perdeu o
foco em habilidades e competências
Avaliação ao Final do Ensino Médio
– O Novo Enem
 Como o formato da prova é importante, tanto
para o perfil dos selecionados para as
universidades como para orientar o ensino
médio, criou-se um comitê de governança, com
participantes das universidades, dos secretários
de educação e do próprio MEC, para definir o
desenho futuro do exame
 Estabelecimento de escalas, de forma a
possibilitar a comparação entre estudantes que
realizaram provas distintas, inclusive em anos
diferentes
Diferenças
‘Velho’ Enem
‘Novo’ Enem
 Prova Clássica – não
 Prova estruturada na
permite comparação
entre anos
 pouca articulação direta
com os conteúdos
ministrados no ensino
médio
 63 questões
interdisciplinares e
redação
metodologia da TRI –
permite comparação
entre os anos
 aborda diretamente o
currículo do ensino
médio
 quatro grupos de provas
diferentes, com 45 itens
cada e redação
A prova
 Quatro áreas do conhecimento:
 linguagens, códigos e suas tecnologias (incluindo
redação);
 ciências humanas e suas tecnologias;
 ciências da natureza e suas tecnologias; e
 matemáticas e suas tecnologias.
 Cada grupo de testes é composto por 45 itens de
múltipla escolha, aplicados em dois dias.
Objetivos
 Avaliação Somativa do Final do ensino médio (ao
menos duas edições por ano)
 Servir como credencial para os estudantes
 Ingresso no Universidade;
 Cerificação de EJA; e
 Ingresso no Mercado de Trabalho.
 Avaliação das escolas e sistemas de ensino médio
(accountability)
 Orientar o currículo do ensino médio
Característica Básica da Prova
 Palavra Chave: contextualização
 O objetivo não é tanto avaliar os conhecimentos
e habilidades obtidos na escola, mas a
utilização de tais conhecimentos e habilidades
nas vidas dos estudantes – Uma avaliação a
partir do lado de fora da escola.
 Os que não se consegue colocar em um
problemas que os estudantes podem enfrentar
na vida cotidiana (no trabalho, na família e na
coletividade) não cai no Enem.
Problemas a Serem Superados
 Problemas logísticos e Institucionais (Ministério
Publico, TCU..) têm impedido que se faça mais de
uma edição da prova por ano.
 A Prova do ENEM tem convergido para o padrão
das provas dos vestibulares. Mais perto dos
vestibulares e mais distante do PISA
 Pelo que eu saiba, o comitê de governança nunca
mais se reuniu. O objetivo de selecionar para as
Universidades Federais tem dominado. A questão
de orientar o currículo do EM tem perdido força.