AVALIAÇÃO DE IMPACTO DO PROGRAMA
DE DPI (DESENVOLVIMENTO DA PRIMEIRA
INFANCIA) DA SAVE THE CHILDREN NA
PROVINCIA DE GAZA - MOÇAMBIQUE
Sebastian Martinez, Sophie Naudeau & Vitor Pereira
IDB
World Bank
PUC-Rio
Conteúdo
2
1.
2.
3.
4.
5.
6.
Por quê esta Avaliação e Por quê em Moçambique?
O Modelo de DPI da Save the Children
Perguntas Chaves da Avaliação
Desenho da Avaliação
Resultados
Impacto Sobre o Diálogo Político
1. Por quê esta Avaliação?
O DPI é um primeiro passo crítico no desenvolvimento
humano


Forte evidencias existem sobre a importancia e custo-efectivade de
investir no DPI:
 Melhor preparação das crianças para a escola primaria; sucesso e
completação mais altos.
 Melhor saude / Menos comportamentos de risco e menos crime.
 Productividade e renda mais altas
Quando ha atrasos na primera infancia, é mais difficil e caro
mudar/recuperar mais tarde na vida
 A desnutrição crónica de uma criança de 2 anos prediz o
crecimento futuro desta criança.
 A maior parte do desenvolvimento do cerébro humano acontece
nos primeros 5 anos de vida– e a “plasticidade” do cerébro baixa
com a idade da pessoa.
1. Por quê esta Avaliação?...
4
Mas como podemos investir mais e de melhor
forma?

Ha pouca evidência no mundo sobre as melhores opções para investir
no DPI quando os recursos financeiros são limitados, particularmente no
contexto dos paises em desenvolvimento.


Muito poucas avaliações rigorosas (i.e., countrafactual válido) foram feitas na
área do DPI em países em desemvolvimento
Entre essas, muito poucas usavam uma seleção aleatória, e a maioria tinha
amostras < 500
Grande lacuna de conhecimento (especialmente na AFR):
Que tipos de programas de DPI têm mais custo-efectividade
em contextos de desenvolvimento?
Isso é a primeira avaliação de impacto do DPI que seja
randomizada e a larga escala na África
1. Por quê em Moçambique?
5
Uma oportunidade
única de parceria
Save the
Children
Implementação
do projecto &
monitoria
World
Bank
+
Avaliação
de Impacto
= Resultados
Forte potential para ter um
impacto político
Em 2008:
 47 % das crianças de menos de 5
anos com desnutrição crónica
 42.6% das crianças de 6 anos
fora das escolas primárias
 Taxas altas de repetição e
abandono escolar
 Só 4% das crianças de menos de
5 anos matriculadas em
programas de DPI (principalmente
privados).
2. O Modelo de DPI da Save the Children
6
A. Um meio ambiente
favorável à
aprendizagem
 Curriculum
bem
desenvolvido
 1 “animadora” por 15
crianças
 Nenhuma turma com mais
de 35 crianças
 Bastante rico em materiais
feitos localmente (livros,
brinquedos, jogos)
2. O Modelo de DPI da Save the Children…
7
B. Custos baixos e
sustentáveis
 Modelo
gerido pela
comunidade através de um
comité de gestão da escolinha
 Construções simples, feitas com
materiais locais
 “Animadoras” da
communidade que recebem
uma remuneração de $10-20
por mês
 Custo total < $30
/criança/ano
2. O Modelo de DPI da Save the Children…
8
C. Apoio continuo e monitoria intensiva
 Uma
semana de formação inicial + 1 dia de formação em
serviços todos os meses
 Agentes de desenvolvimento comunitário bem formados (1
agente por 5 escolinhas)
 Visitas regulares de monitoria e apoio a todas as escolinhas
3. Perguntas e Indicadores Chaves da
Avaliação
9
Qual e o impacto deste modelo communitário de DPI
sobre:

A taxa de matrícula na escola primária e aprendizagem
O
desenvolvimento infantil, incluindo: cognitivo, sócioemocional, linguístico, físico
 O comportamento dos encarregados em relação à(s)
sua(s) criança(s)
 O desenvolvimento das outras crianças dentro da família
 A productividade e participação dos encarregados no
mercado de trabalho.
4. Desenho da Avaliação
10
A. Amostra:

76 comunidades dividas de maneira
aleátoria entre o grupo de tratatmento (30) e
o grupo de control (46).

2000 crianças entre 3 e 5 anos
na linha de base

76 líderes comunitários

1020 crianças na primeira classe
(questionário pelos professores)
B. Coleta de dados:

Linha de base: Maio - Agosto 2008

Dados de impacto: Abril –Dezembro 2010
4. Desenho da Avaliação
11
C. Instrumentos da avaliação:
 Pesquisa domiciliar (renda, riqueza, consumo, educação, uso
do tempo, etc.)
 Medidas de desenvolvimento infantil para crianças entre 3 e 5
anos na linha de base (2008) e entre 5 e 7 anos após a
intervenção (2010):
 Teste de Vocabulário por Imagens Peabody (TVIP):
 Questionário de idades e estágios(ASQ):
 Questionário de aptidões e dificuldades (SDQ):
 Medidas antropométricas:
 Pesquisa nas escola primárias (primeira classe):
 Instrumento de desenvolvimento infantil (EDI)
 Questionário aos líderes comunitários
5. Resultados
12
Resumo dos dados da linha de base:



Sem intervenção de DPI, crianças pobres entre 3 e 5
anos nas áreas rurais de Moçambique estão atrasadas
em termos de desenvolvimento físico, linguístico, e
cognitivo.
Estes resultados indicam que as crianças na nossa
amostra são pouco preparadas para aprender na escola
primária e para ter sucesso na vida. Elas têm um risco
alto de repetir classes e de abandonar a escola cedo.
Tudo isso contribue para caras ineficiências orcamentais
no sector da educação.
Equilíbrio entre os dos grupos na linha de
base (2008): Características das crianças
13
Variável
Tratamento
Controle
T-stat
Meninas
51%
49%
0.88
Idade em anos
3.45
3.48
-0.91
Fala Português
13%
12%
0.27
Orfão (mãe)
3%
2%
1.29
Orfão (pai)
7%
8%
-0.86
z-score de peso pela idade
-0.33
-0.27
-0.64
z-score de altura pela idade
-1.99
-1.85
-1.45
ASQ Total
198.97
196.54
0.72
TVIP Changana (score estandarizado censurado)
78.85
74.40
78.66
74.20
0.18
0.36
TVIP Portuguese (score estandarizado censurado)
Equilíbrio entre os dos grupos na linha de base
(2008): Características dos encarregados
14
Variable
Treatment
Control
T-stat
Mulher=1
81%
88%
-2.40
Idade em anos
34.75
34.16
0.69
Fala Português
50%
48%
0.35
Sabe ler e escrever
62%
62%
0.10
Anos de educação
3.40
3.45
-0.20
Casado/a (formal ou informal)
68%
65%
1.00
Viuvo/a
12%
13%
-0.58
Lê livros com a criança
40%
40%
0.05
Brinca com a criança
33%
36%
-0.77
Matrícula nas escolinhas
15
Probability of enrollment in escolinhas across time
0
.05
.1
.15
.2
.25
By Treatment and Control
01jan2000
01jan2002
01jan2004
Control
01jan2006
Time
01jan2008
Treatment
01jan2010
Impacto na matrícula escolar
(escola primária)
Tabela: Atualmente matriculados na escola=1
Comunidade de tratamento
(R1)
ITT
OLS
(1)
ITT
OLS
0.055**
(0.021)
0.058***
(0.022)
Escolinha=1
(R2)
TOT
IV
(2)
TOT
IV
0.148***
(0.053)
0.154***
(0.053)
Escolinha x Rapaz =1
0.167*
(0.092)
0.142**
(0.068)
Escolinha x Rapariga =1
Caracteristicas geograficas
Caracteristicas domiciliares e individuais
Observações
R-squared
Medía dos controles:
Tamanho do efeito % mudança
Medía dos controles-Grup o1:
Medía dos controles-Grupo 2:
Tamanho do efeito % mudança – Grupo 1
Tamanho do efeito % mudança – Grupo 2
(3)
TOT
IV
Não
Não
Sim
Sim
Não
Não
Sim
Sim
Sim
Sim
2,591
0.050
0.633
0.087
2,591
0.212
0.633
0.0919
2,591
0.032
0.633
0.233
2,591
0.210
0.633
0.242
2,591
0.210
0.594
0.671
0.281
0.212
16Notas: Erros estandares robustos em parentése , cluster ao nível de comunidade. * Significativo a 10%,
** Significativo a5% , *** Significativo a 1%.
Impacto na matrícula escolar
(escola primária)
Tabela : Educação
Escolinha=1
Observações
R-quadrado
Medía dos controles:
Tamanho do efeito % mudança
Atualmente
matriculado
Tem ido à escola
Nível aproppriado Abandonou a escola
pela idade
(1)
(2)
(3)
(4)
TOT
TOT
TOT
TOT
IV
IV
IV
IV
0.154***
(0.053)
0.134**
(0.051)
0.102**
(0.046)
-0.014
(0.026)
2,591
0.210
0.633
0.242
2,686
0.221
0.672
0.200
2,891
0.090
0.469
0.217
1,872
0.039
0.038
-0.377
Notas: Erros estandares robustos em parentése , cluster ao nível de comunidade. * Significativo a
10%, ** Significativo a5% , *** Significativo a 1%.
17
Uso do tempo das crianças
Tabela : Uso do tempo (Horas passadas na atividade por semana)
Assistir escola
e fazer
Tempo para
deveres de
brincar
casa
LABELS
Escolinha= 1
Observações
R-quadrado
Medía dos
controles:
Tamanho do efeito
% mudança
Trabalho na
machamba
familiar
Tarefas
domésticas
Cuidados de
crianças,
Reuniões
idosos,
comunitarias
doentes
(1)
TOT
IV
(2)
TOT
IV
(3)
TOT
IV
(4)
TOT
IV
(5)
TOT
IV
(6)
TOT
IV
(7)
TOT
IV
7.212***
(2.019)
2,891
0.108
-0.684
(1.921)
2,891
0.093
-1.316**
(0.637)
2,891
0.080
-0.529
(0.407)
2,891
0.067
0.056
(0.320)
2,891
0.048
-1.403***
(0.507)
2,891
0.009
3.712
(2.416)
2,891
0.052
15.560
22.046
2.540
0.748
0.569
1.099
61.417
0.463
-0.031
-0.571
-0.707
0.098
-1.276
0.060
Notas: Erros estandares robustos em parentése , cluster ao nível de comunidade. *
Significativo a 10%, ** Significativo a5% , *** Significativo a 1%.
18
Sono
Desenvolvimento das crianças: EDI
Tabela: Resultados de PDI por áreas
Comunicação e Desenvolviment
Saúde física e
Competência
conhecimentos o cognitivo e
bem-estar
social
gerais
lenguagem
Escolinha= 1
Observações
R-quadrado
Medía dos controles:
Tamanho do efeito %
mudança
Maturidade
emocional
(1)
TOT
IV
(2)
TOT
IV
(3)
TOT
IV
(4)
TOT
IV
(5)
TOT
IV
1.828
(1.962)
862
0.149
5.551
0.291
(2.164)
862
0.233
2.864
12.199**
(5.393)
862
0.026
14.015
6.338
(10.316)
862
0.192
11.479
1.1767
(4.562)
862
0.212
3.596
0.329
0.102
0.870
0.552
0.491
Notas: Erros estandares robustos em parentése , cluster ao nível de comunidade. * Significativo a 10%,
** Significativo a5% , *** Significativo a 1%.
19
EDI: Resultados por área
20
Preschool
Control
Impact (%)
26.21
17.82
14.01
11.48
7.38
5.55
32%
3.152.86
10%
87%
Physical Health Communication
Cognitive
and Well Being and General
Development
Knowledge and Language**
55%
Social
Competence
5.37
3.60
49%
Emotional
Maturity
Desenvolvimento das crianças: ASQ
Tabela: ASQ
Score ASQ Total Comunicação
Escolinha= 1
Observações
R-quadrado
Medía dos controles:
Tamanho do efeito %
mudança
Resolução de
problemas
Coordinação
motriz fina
Coordinação
motriz grossa
(1)
TOT
IV
(2)
TOT
IV
(3)
TOT
IV
(4)
TOT
IV
(5)
TOT
IV
14.668**
(6.976)
1,831
0.179
283.735
4.452*
(2.357)
1,831
0.095
83.746
5.350**
(2.634)
1,831
0.189
84.022
3.746*
(2.108)
1,831
0.180
59.470
1.120
(0.974)
1,831
0.06
56.497
0.052
0.053
0.064
0.063
0.020
Notas: Erros estandares robustos em parentése , cluster ao nível de comunidade. * Significativo a 10%,
** Significativo a5% , *** Significativo a 1%.
21
Desenvolvimento das crianças: TVIP
Tabela: TVIP
Escolinha= 1
Observações
R-quadrado
Medía dos controles:
Tamanho do efeito %
mudança
Português
(bruto)
(1)
TOT
IV
Português
(estandardizado)
(2)
TOT
IV
Changana
(bruto)
(3)
TOT
IV
Changana
(estandardizado)
(4)
TOT
IV
0.351
(0.301)
1,839
0.094
3.757
0.335
(0.262)
1,839
0.145
55.992
0.463
(0.921)
1,839
0.106
9.047
1.086
(0.998)
1,839
0.139
59.443
0.093
0.006
0.051
0.018
Notas: Erros estandares robustos em parentése , cluster ao nível de comunidade. * Significativo a 10%,
** Significativo a5% , *** Significativo a 1%.
22
Desenvolvimento das crianças:
Estatura e Peso
Table: Child Anthropometrics
(1)
TOT
IV
(2)
TOT
IV
Desnutrição
crónica
(haz_avg<=-2)
(3)
TOT
IV
0.007
(0.027)
1,839
0.041
0.094
0.034
(0.099)
1,818
0.085
-0.739
-0.017
(0.056)
1,811
0.071
0.357
0.169
(0.179)
1,811
0.069
-1.578
0.078
-0.045
-0.047
-0.107
Desnutrição aguda Peso pela idade
(waz_avg<=-2)
Z-Score
Escolinha= 1
Observações
R-quadrado
Medía dos controles:
Tamanho do efeito %
mudança
Estatura pela
idade Z-Score
(4)
TOT
IV
Notas: Erros estandares robustos em parentése , cluster ao nível de comunidade. *
Significativo a 10%, ** Significativo a5% , *** Significativo a 1%.
23
Desenvolvimento das crianças: Saúde
Tabelas : Saúde das crianças
Doente nas
Problemas de
Diarrhea nas
últimas 4
pele nas últimas
últimas 4
semanas
4 semanas
semanas
(1)
(2)
(3)
TOT
TOT
TOT
IV
IV
IV
Escolinha= 1
Observações
R-quadrado
Medía dos controles:
Tamanho do efeito %
mudança
0.122**
(0.057)
1,836
0.079
0.358
-0.035
(0.048)
1,837
0.038
0.148
-0.027
(0.022)
1,832
0.054
0.082
Tosse nas
últimas 4
semanas
(4)
TOT
IV
0.131
(0.083)
1,839
0.060
0.447
0.341
-0.236
-0.325
0.293
Notas: Erros estandares robustos em parentése , cluster ao nível de comunidade. *
Significativo a 10%, ** Significativo a5% , *** Significativo a 1%.
24
Crianças mas velhas (10-15) nas famílias
com crianças em idade pre-escolar
Tabela: Matricula escolar
Atualmente
matriculado
Tem ido à
escola
(1)
TOT
IV
(2)
TOT
IV
Nível
Abandonou a
adequado
escola
pela idade
(3)
(4)
TOT
TOT
IV
IV
0.043
0.054***
0.058
0.018
(0.026)
(0.017)
(0.038)
(0.023)
1,802
1,895
1,553
1,766
Observações
0.089
0.064
0.285
0.060
R-quadrado
0.854
0.923
0.443
0.066
Medía dos controles:
0.050
0.059
0.131
0.267
Tamanho do efeito % mudança
Notas: Erros estandares robustos em parentése , cluster ao nível de comunidade. *
Significativo a 10%, ** Significativo a5% , *** Significativo a 1%.
Escolinha= 1
25
Comportamento e esperanças do/as
encarregado/as
Tabela: Encarregado/as
Número de
reuniões
atendidades
nas ultimas 4
semanas
Você acha que é
correto castigar
uma criança
físicamente
Lê livros com a Brinca com a
criança
criança
Satisfeita pela
Pratica rótinas Pratica rótinas de
preparção da
diarias com a independendizaçã
criança para a
criança
o com a criança
escola futura
-1
TOT
IV
-2
TOT
IV
-3
TOT
IV
-4
TOT
IV
-5
TOT
IV
-6
TOT
IV
-7
TOT
IV
Escolinha= 1
1.006**
(0.424)
-0.128**
(0.059)
-0.06
(0.066)
0.051
(0.053)
0.210***
(0.050)
0.093**
(0.045)
0.064**
(0.030)
Observações
R-quadrado
Medía dos
controles:
1,839
0.04
1,834
0.077
1,833
0.098
1,835
0.087
1,837
0.078
1,837
0.061
1,818
0.044
3.706
0.279
0.598
0.693
0.666
0.769
0.899
Tamanho do
efeito %
mudança
0.271
-0.459
-0.1
0.073
0.315
0.121
0.071
Notas: Erros estandares robustos em parentése , cluster ao nível de comunidade. * Significativo a 10%, **
Significativo a5% , *** Significativo a 1%.
26
Participação dos encarregados no
mercado do trabalho
Tabela: Oferta de trabalho dos adultos
Caregiver
Mãe
Pai
Trabalhou nos últimos Trabalhou nos últimos Trabalhou nos últimos
30 dias
30 dias
30 dias
Escolinha= 1
Observações
R-quadrado
Medía dos controles:
Tamanho do efeito % mudança
27
(1)
TOT
IV
(2)
TOT
IV
(3)
TOT
IV
0.062*
(0.036)
1,726
0.056
0.240
0.260
0.076
(0.047)
1,323
0.082
0.203
0.373
0.095*
(0.049)
1,113
0.151
0.582
0.164
Notas: Erros estandares robustos em parentése , cluster ao nível de comunidade. *
Significativo a 10%, ** Significativo a5% , *** Significativo a 1%.
5. Resumo dos resultados
28




Matrícula mais alta na escola primária, e na idade certa de 6 anos.
Melhor preparação das crianças para a escola primária, especialmente nas
áreas cognitiva, sócio-emocional, psicomótrica, e de communicação:
PDI
ASQ
Cognitivo/solução de prob.
+
+
Socio-emocional
0
+
Motriz fina
0
+
Motriz grossa
0
Communicação
+
TVIP
0
Impactos mistos nas áreas da saúde e do desenvolvimento físico
Impactos positivos na matrícula escolar dos irmões/das irmãs mais
velho/as, e sobre os encarregados (mercado do trabalho e
comportamento em casa).
6. Impacto Sobre o Diálogo Político
29

Os resultados da linha de base
foram apresentados ao Governo
de Moçambique e aos parceiros
no mês de Março 2010.
Nessa altura, O Sr. Ministro
da Educação formalmente
solicitou apoio técnico e
financeiro ao Banco Mundial
para o desenvolvimento duma
estratégia multi-setoral na área
do DPI e de um projeto de
desenvolvimento do pre-escolar.
6. Impacto Sobre o Diálogo Político...
30

Os dados de impacto foram apresentados ao
Governo e aos parceiros de cooperação em
Maputo no mês de Junho de 2011.
Estos resultados informaram diretamente o
desenho do novo projeto de desenvolvimento pre-escolar
e de uma nova avaliação de impacto (juntamente com o
MINED) no contexto do projeto.
Obrigada!
31
[email protected]
www.worldbank.org/afr/hd