Avaliação de Impacto:
Transformando Promessas em
Evidência
Primeira Avaliação de Impacto do Programa de
Premiação por Desempenho nas Escolas da Rede Pública
Municipal de Ensino da Cidade do Rio de Janeiro:
Meta de Acréscimo do IDEB
Secretaria Municipal de Educação do Rio de Janeiro
Rio de Janeiro, Brasil
Abril 2010
http://www.worldbank.org/hdchiefeconomist
1. Antecedentes

Intervenção: diferentes metas de acréscimo
no IDEB.

Objetivo: Aumento do Índice da Educação
Básica de cada escola:


Melhoria de desempenho do aluno.
Estágio: Iniciado.
2
1
2. Cadeia de Resultados
Insumos
Atividades
Produtos
Resultados
Resultados
de longo
prazo
ATIVIDADES
• Decreto que institucionalizou a Política
Pública;
INSUMOS
RESULTADOS
RESULTADOS
PRODUTOS
•
Termo definanceiros;
compromisso
do gestor;A LONGO
•Recursos
PRAZO
•Desempenho
doInformação
gestor
professor;
• Campanha
de
da MultiRio;
Recursos materiais;
Aevariação
•Número
professores
e gestores
• Capacitação
dos professores,
gestores
e
Recursosde
Humanos
(comunidade
escolar)

Salto
percentual
da
qualidade
do
IDEB.
da
capacitados;
estagiários
nos projetos específicos;
• Recursos tecnológicos
Educação
carioca.
•Número
de de
projetos
implementados
• Aplicação
avaliações
bimestrais.
•Número
de alunos
participantes;
 Desenvolver
projetos
pedagógicos
•Aperfeiçoamento
do Projeto Político
específicos;
3
Pedagógico
das escolas.
 Elaborar materiais
pedagógicos.
3. Pergunta básica da pesquisa

Qual o impacto na aprendizagem,
observado no primeiro ano de implantação
do Programa Prêmio Anual de
Desempenho, considerando as diferentes
metas de acréscimo do IDEB?
4
2
4. Indicadores de Resultado

Variações do IDEB ocorridas entre 2007 e
2009 (desempenho e aprovação).
5
5. Estratégia/Método de Identificação

Descontinuidade do desenho (Regressão descontínua),
capturando efeito local, uma vez que existem metas
diferentes para cinco faixas de IDEB.
IDEB - Município do Rio de Janeiro (EF - Anos Iniciais)
IDEB - Município do Rio de Janeiro (EF - Anos Finais)
6,1
2007
meta2009
Na
2007 estratégia,
6,1
5,6
5,6
5,1
4,6
4,1
IDEB
IDEB
5,1
será aplicada a Regressão Descontínua
meta2009
Multivariada
(para controlar as características como: bairro,
área conflagrada, tamanho da escola, outros programas
pedagógicos etc.).
4,6

4,1
Os grupos são comparáveis, já que os Grupos de Tratamento
e de Controle serão definidos pelos limites das faixas de IDEB intervalo próximo ao ponto de corte.
3,6
3,6
3,1
Obs.: O resultado poderá estar contaminado por não ter sido corrigido
pela Reversão à Média, já que é possível uma apresentação de IDEB
baixo ou alto, apenas naquele ano-base que determinou a meta, tendo
histórico anterior de IDEB fora da média.
Escolas
Escolas
3,1
2,6
E.M. LEONIDAS
SOBRINO
PORTO
E.M. BARAO2,6
E.M. PROF
E.M. FLORIPES
E.M. HAITI
CIEP 06.25.501
E.M. RUBEN
E.M. PEDRO
E.M. DENISE
E.M. PEDRO
E.M. MANUEL DE E.M. ABRAHAM
E.M. CONDE
E.M. MAL
E.M. NELSON E.M. NORONHA CIEP 03.12.503
E.M. PROF
E.M.GIUSEPPE E.M. BARAO DE
HOMEM DEE.M. PEDRO
ARTUR THIRE
ANGLADAS
DR ADAO
BERTA
ERNESTO
MARIA TORRES
AMERICO
AFONSO
CELSO
ITACURUSSA
E.M. EQUADOR
E.M. JORGE DE
E.M. MAL
CIEP FRANCISCO
E.M. PRESIDENTE
E.M. GUSTAVO
E.M. MAESTRO
EM PROF ABREU
E.M. GAL JOAOLINCOLN
E.M. ORESTES
E.M.
THOMASESPIRIDIÃO
E.M. MONTE ROMERO
E.M. MIGUEL SANTOS
E.M. EMB B CORONEL
E.M. SAO JOAO ALVARO
E.M. ALBERTO MELCHIORI
E.M. JOSE
E.M. EMB
MELLO
LUCAS GOUVEA
PEREIRA NUNES
ROSAS
ESPINHEIRA
JOSÉ
ALEIXO
MASCARENHAS
C P. DE
ROOSEVELT
ARMBRUST
PIXINGUINHA
TEOFILO
MENDONCA
BARBOZA
MANN
CASTELO
RAMALHO
HURTADO SARMENTO
BATISTA
JOSE SAMPAIO PADRE
PIQUET
ARAUJO
DE MORAES
MIRANDAMOREIRA DA
LIMA
NOVO
CARNEIRO
CASTRO
COSTA
E.M. SANTA
ISABEL
E.M.
PEREIRA
PASSOS
E.M.
GUATEMALA
E.M. SILVIO
ROMERO
E.M.
PROFESSOR
E.M. PROFA
AUGUSTO
LEOCADIA
PAULINO
FILHO
TORRES
CIEP ZUMBI DOS
PALMARES
E.M. PRES
E.M. CARLOS
DE LAET
E.M.
STA
CAMILO
DE
E.M.
ACRE
EURICO DUTRA
CATARINA
E.M. SAO
LELLIS
6
E.M. ESTADO DE
E.M. EMA
E.M. BRICIO
E.M. JOAQUIM E.M. ANTONIO
ISRAEL
NEGRAO
FILHODE E.M. MANOEL
AUSTREGESILO
E.M.
GIL
E.M.
EMILIODE E.M. NERVAL
PROF ARYDE E.M.
MARIA
E.M.
LIMA
MACEDO BAPTISTINA D T CASTELNUOVO
VICENTE
CARLOS
GOUVEIA
QUINTELLA
LOTT
3
6. Dados e Amostra
Dados:
 IDEB 2007 (T0) e 2009 (T1);
 Metas estabelecidas para cada escola;
 Outras variáveis de controle (ex: localização
das escolas)
Amostra:
Escolas da Rede Pública Municipal do Rio de
Janeiro.
7
7. Calendário/Plano de Trabalho
Iniciado em julho de 2009, com base no
IDEB de 2007.
 Primeiro resultado do IDEB a ser divulgado,
provavelmente, em julho de 2010.
 O prêmio será pago após a divulgação do
IDEB.

Possibilidades de desdobramento:
assiduidade do professor, desempenho
do professor, aperfeiçoamento do
Projeto Pedagógico da escola,
aprimoramento da gestão da escola.
8
4
8. Fontes de Financiamento

Orçamento do Município.
9
Equipe
SME:
Ana Lucia de Moraes Barros
André Ramos
Antonio Augusto Alves Mateus Filho
Beatriz Alqueres
Denise Palha
Heloisa Mesquita
Jurema Holperin
Lucinda Faria
Luiz Eduardo Conde
Natalino Pontual Filho
Simone Monteiro
Sonia Mercadante
PUC:
Clarissa Gandour
Natalia Cupello
IPP:
Alcides Carneiro
5