Day 3 - Technical Track
Session V: Regression Discontinuity
Impact Evaluation
Linha Técnica
TitleV
Sessão
RegressãoPresenter:
Descontínua
(RD)
XXX
Place, Date
Human Development
HumanNetwork
Development
Network
Middle East and North Africa
World Bank Institute
Spanish Impact
Evaluation
Fund
XXXXXXXXXXXXXXXXX
Spanish
Impact Evaluation
Region
www.worldbank.org/sief
Region
Fund
Lembrete: objetivo principal de uma avaliação...

Estimar o efeito de uma intervenção D sobre um
indicador de resultados Y

Por exemplo:



Qual é o efeito de um aumento no salário mínimo sobre o
emprego?
Qual é o efeito de um programa de merenda escolar sobre
o aprendizado?
Qual é o efeito de um programa de capacitação sobre o
emprego e os salários?
2
1
Day 3 - Technical Track
Session V: Regression Discontinuity
Índices são comuns na focalização de programas
sociais

Programas de combate à pobreza


Programas de pensão


focalizados à população acima de uma determinada idade
Bolsas de estudo


focalizados a domicílios abaixo de um determinado índice de
pobreza
focalizadas a alunos com pontuação alta em provas padronizadas
Programas CDD

fundos concedidos a ONGs que alcançam maiores pontuações
3
Regressão descontínua

Quando usar este método?





Os beneficiários/não-beneficiários podem ser ordenados ao
longo de uma dimensão quantificável
Essa dimensão pode ser usada para computar um índice ou
parâmetro bem definido
O índice/parâmetro tem um ponto de corte para elegibilidade
O valor do índice é o que orienta a designação de um
beneficiário potencial ao tratamento (ou não-tratamento)
Explicação intuitiva do método:


Os beneficiários potenciais (unidades) logo acima do ponto de
corte são muito parecidos com aqueles logo abaixo do ponto de
corte
Comparamos resultados para unidades logo acima e logo abaixo
do ponto de corte
4
2
Day 3 - Technical Track
Session V: Regression Discontinuity
Exemplo:
Efeito de uma transferência de renda sobre consumo

Objetivo: direcionar a transferência para os domicílios mais
pobres

Método:




Implementação:


Construir um índice de pobreza de 1 a 100 a partir das
características pré-intervenção
Domicílios com escore  50 são pobres
Domicílios com escore > 50 são não-pobres
Transferência de renda para domicílios pobres
Avaliação:

Medir resultados (i.e. consumo, taxas de frequência escolar)
antes e depois da transferência, comparando domicílios logo
acima e logo abaixo do ponto de corte.
5
Não pobre
Pobre
6
3
Day 3 - Technical Track
Session V: Regression Discontinuity
Efeito de Tratamento
7
Descontinuidade clara e cinzenta

Descontinuidade clara




A descontinuidade determina o tratamento de forma precisa
Equivalente a designação aleatória em uma vizinhança
Ex. pagamento de seguro social depende direta e
imediatamente da idade de uma pessoa
Descontinuidade cinzenta



Descontinuidade é altamente correlacionada com
tratamento
Ex. regras determinam elegibilidade, mas há margem para
erro administrativo
Usar a designação como VI para participação no programa
8
4
Day 3 - Technical Track
Session V: Regression Discontinuity
Identificação para descontinuidade clara
yi   0  1 Di   scorei    i
Onde:
Di = 1 se domicílio i recebe transferência
Di = 0 se domicílio i não recebe transferência
 scorei  é uma função contínua em torno do ponto de corte
Regra de designação sob descontinuidade clara:
Di  1

scorei  50
Di  0

scorei  50
9
Identificação para descontinuidade cinzenta
yi   0  1 Di   scorei    i
Onde:
Di = 1 se domicílio i recebe transferência
Di = 0 se domicílio i não recebe transferência
MAS Tratamento depende de:
• scorei > < 50
E
• fatores endógenos
10
5
Day 3 - Technical Track
Session V: Regression Discontinuity
Identificação para descontinuidade cinzenta
yi   0  1 Di   scorei    i
Estimação VI:
Primeiro estágio:
Di   0   1I scorei  50  
variável binária
Segundo estágio:
yi  0  1Di   scorei    i
função contínua
11
Exemplos

Efeito de transferências sociais sobre oferta de trabalho
(Lemieux e Milligan, 2005)

Efeito de pensões para a terceira idade sobre consumo BONOSOL na Bolívia
(Martinez, 2005)

Efeitos de reduções nas taxas cobradas de usuários sobre
matrícula escolar
(Barrera, Linden e Urquiola, 2006)
12
6
Day 3 - Technical Track
Session V: Regression Discontinuity
Exemplo 1: Lemieux & Milligan
Efeitos de Incentivo da Assistência Social

Assistência social aos desempregados:



Baixos pagamentos de assistência social para indivíduos
com menos de 30 anos
Pagamentos mais altos para indivíduos com 30 anos ou
mais
Qual o efeito de maior assistência social sobre o
emprego?
13
14
7
Day 3 - Technical Track
Session V: Regression Discontinuity
15
Exemplo 2: Martinez
BONOSOL

Pensão para todos os bolivianos na terceira idade



Transferência de pensão para um amplo grupo de
domicílios pobres
Pensões pagas a partir de 2001
Critério de elegibilidade conhecido: 65+ anos

Há dados sobre consumo pré- (1999) e pós- (2002)
intervenção

Objetivo: estimar o efeito do BONOSOL sobre o
consumo
16
8
Day 3 - Technical Track
Session V: Regression Discontinuity
17
Possíveis desvantagens da RD

Efeito de tratamento médio local



Poder


Estimamos o efeito do programa em torno do ponto de corte
Isso nem sempre é generalizável
O efeito é estimado na descontinuidade, então geralmente temos
menos observações do que em um experimento aleatório com
amostra de igual tamanho
A especificação pode ser sensível à forma funcional:
certifique-se que a relação entre a variável de designação e a
variável de resultado está modelada corretamente, incluindo:


Relações não-lineares
Interações
18
9
Day 3 - Technical Track
Session V: Regression Discontinuity
19
Vantagens da RD para avaliação

RD produz uma estimativa não-viesada do efeito de
tratamento na descontinuidade

Podemos aproveitar uma regra conhecida para designar o
benefício


Isso é comum no desenho de intervenções sociais
Não há necessidade de “excluir” do tratamento um grupo
de domicílios/indivíduos elegíveis
20
10
Day 3 - Technical Track
Session V: Regression Discontinuity
Primeiro passo da validação Escore Sisben vs. Nível de Benefício: a
descontinuidade é clara em torno dos pontos de corte?
28
Exemplo do segundo passo da validação Renda: é suave em torno
dos pontos de corte?
29
11
Day 3 - Technical Track
Session V: Regression Discontinuity
Exemplo do segundo passo da validação Anos de educação do chefe
domiciliar: é suave em torno dos pontos de corte?
30
Resultados RD
Sisben vs. Matrícula Escolar: resultados gráficos
31
12
Day 3 - Technical Track
Session V: Regression Discontinuity
Referências




Angrist, J. and V. Lavy “Using Maimonodes Rule to Estimate
the Effect of Class Size on Scholastic Achievement” Quarterly
Journal of Economics, 114, 533-575
Lemieux, T. and K. Milligan “Inentive Effects of Social
Assistance: A Regression Discontinuity Approach”. NBER
working paper 10541.
Hahn, J., P. Todd, W. Van der Klaauw. “Identification and
Estimation of Treatment Effects with a RegressionDiscontinuity Design”. Econometrica, Vol 69, 201-209.
Barrera, Linden y Urquiola (2006), “The Effects of User Fee
Reductions on Enrollment: Evidence from a quasi-experiment”
32
13