Instituto Nacional de Estudos e Pesquisas Educacionais Anísio Teixeira Diretoria de Tecnologia e Disseminação de Informações Educacionais III Encontro Estadual do Censo Escolar – Mato Grosso Qualidade da Educação, Rendimento dos Estudantes e Índice de Desenvolvimento da Educação Básica - IDEB Carlos Eduardo Moreno Sampaio [email protected] Brasília, fevereiro de 2010. Avaliação do rendimento dos estudantes Procedimento tradicional Os estudantes são avaliados com base em exames preparados por seus professores. Os professores utilizam tais exames para determinar aqueles que possuem condições de avançar no sistema. Procedimento mais recente Avaliação externa em larga escala Avaliação do rendimento dos estudantes Avaliação externa em larga escala 1. Diagnóstico: Avaliação da situação dos alunos em determinados momentos do ciclo e/ou avaliação dos sistemas de ensino. Ao explicitar os resultados, a avaliação gera um sistema de incentivos para mobilização (de professores, gestores, alunos e da sociedade em geral) em prol da melhoria de ensino. Ex.: SAEB. 2. Rendição de contas: Debate que se inicia nos últimos anos e promove um salto no processo de avaliação, agregando à perspectiva de avaliação para o diagnóstico as noções de rendição de contas, transparência e responsabilização. Avaliação com divulgação dos resultados por escola. O objetivo é tornar escolas, professores, dirigentes e estudantes comprometidos com desempenho escolar. E, assim, mobilizar dirigentes, professores, estudantes, pais e a sociedade em geral na busca da melhoria da qualidade de ensino. Ex.: Prova Brasil Avaliação do rendimento dos estudantes Avaliação externa em larga escala – Rendição de contas Polêmica 1. Defensores: Accountability melhora a qualidade das escolas. a) maior transparência gera um sistema de incentivos para a melhoria da qualidade de ensino; b) desfazer certas percepções equivocadas sobre o desempenho da escola e mobilizar o corpo de professores e dirigentes na busca de melhorias. c) melhorar a qualidade de ensino pode exigir mudanças de práticas e hábitos enraizados no processo escolar, difíceis de modificar sem pressão social. Avaliação do rendimento dos estudantes Avaliação externa em larga escala – Rendição de contas Polêmica 2. Críticos: além de não melhorar o desempenho dos estudantes, gera “efeitos colaterais” indesejáveis. a) Os indicadores de desempenho são medidas imperfeitas da qualidade da escola: efeito aluno X efeito escola Responsabilizar a escola por algo que ela não tem “culpa” pode gerar desânimo e piorar o desempenho; b) Busca de meios não desejados de aumentar a proficiência nos exames: Estreitamento do currículo/ Exclusão dos alunos de baixo rendimento. Balanço: trabalhos científicos mostram efeito positivo Avaliação do rendimento dos estudantes Rendimento - Proficiência É uma medida de habilidades e competências que os alunos desenvolveram até aquele momento de sua trajetória escolar, dado um determinado conjunto de aspectos pré-definidos (nas matrizes de referência da avaliação). É apresentada em uma escala única e cumulativa para toda a Educação Básica, por disciplina, que vai de 0 a 500. A escala pode ser interpretada pedagogicamente de distintas formas (atualmente o Inep faz uma descrição). O conceito de qualidade social da educação • A garantia da qualidade é o principal desafio educacional que o Brasil tem pela frente. • O conceito “qualidade” aparece associado a duas vertentes diferentes: (i) com sentido de qualidade do “produto”, aferida pelos resultados da aprendizagem; (i) com sentido de qualidade socialmente referenciada, que valoriza a construção dos conhecimentos e de valores na escola. Dimensões da qualidade da educação • Garantia de acesso universal à educação básica • Igualdade de oportunidades educacionais • Permanência e sucesso escolar de todos os alunos • Conclusão de cada nível de ensino no tempo adequado • Desenvolvimento das competências e habilidades requeridas para o exercício pleno da cidadania Principais características do Ideb • Indicador sintético e de fácil compreensão • Combinação de informações sobre fluxo e desempenho escolar • Relaciona o tempo gasto pelos alunos para concluir cada nível/etapa de ensino com o desempenho alcançado em testes padronizados • Referência sobre a qualidade da educação que permite comparação por UF, rede de ensino e escolas • Possibilita monitorar o desempenho ao longo do tempo A lógica e as características do Ideb • O Ideb é a combinação de dois indicadores: (i) o desempenho obtido pelos alunos nos testes padronizados (Prova Brasil ou Saeb) (ii) a taxa de aprovação • Quanto melhor o desempenho dos alunos nos testes e maior a taxa de aprovação, mais elevado será o Ideb. • Para melhorar o Ideb, as redes de ensino e as escolas têm que trabalhar nas duas dimensões do indicador, simultaneamente. • O Ideb varia de 0 a 10 Entendendo o Ideb Ideb ij N ij Pij Ideb ij N ij Índice de desenvolvimento da educação básica da etapa/nível de ensino i na unidade j (onde j pode ser escola, rede de ensino, Região Geográfica, Unidade da Federação, Brasil etc.) Proficiência média padronizada (Prova Brasil ou Saeb) obtida pelos alunos da etapa/nível i na unidade j N ij Pij Desempenho ij Min Max Min 10 Taxa média de aprovação da etapa/nível i na unidade j Entendendo o Ideb Língua Portuguesa Matemática 60,0 49,0 322,0 324,0 Exemplo de cálculo - Brasil 2005 Mínimo Máximo Taxa de Aprovação Prova Brasil 4a série Dependência soma Ano Inicial 1ª série 2ª série 3ª série 4ª série Administrativa 1/P T Média Língua Portuguesa Média Matemática Padronização Matemática Padronização Língua Portuguesa P = 1/T N = Média Nota IDEB = N x P Padronizada Municipal 88,9 71,7 76,1 81 82,4 6,28 1,256 172,2 179,7 4,57 4,48 0,80 4,52 3,6 Público 89,4 74,1 78,1 83 83,4 6,15 1,230 174,1 181,1 4,62 4,55 0,81 4,59 3,7 Estadual 91,7 82,4 84,1 88,6 85,7 5,79 1,158 177,6 183,6 4,72 4,68 0,86 4,70 4,1 Federal 90,5 94,4 94,4 96 95,6 5,31 1,062 220,8 228,3 6,43 6,25 0,94 6,34 6,0 172,2 - 49,0 324,0 - 49,0 Média Metas até 2021: Projeções do Ideb o O esforço de cada rede deve contribuir para o Brasil atingir a meta de 2021 (metas individuais diferentes) o As trajetórias do Ideb, por rede, devem contribuir para reduzir as desigualdade (esforços diferentes) o Supõem-se comportamento de uma função Logística o Informações necessárias para projetar a trajetória do Ideb o Ideb inicial (Ideb de 2005) o Meta (Ideb de 2021) o Tempo para a Meta, em anos (16 anos) o Esforço necessário Projeção do Ideb Gráfico ilustrativo 10 9 8 Ideb 2021 7 6 5 4 Esforço necessário Ideb 2005 3 2 Tempo 1 0 1 3 5 7 9 11 13 15 17 19 21 23 25 27 29 31 33 35 37 39 41 43 45 47 49 Projeção para o Brasil 4ª Série do Ensino Fundamental Esforço? Tempo de convergência? Esforço:0,056 10,00 9,00 8,00 7,00 6,00 5,00 4,00 3,00 2,00 1,00 0,00 Ideb 2095: 9.90 Ideb 2021: 6.0 ano 2107 2101 2095 2089 2083 2077 2071 2065 2059 2053 2047 2041 2035 2029 2023 2017 2011 91 anos para convergência 2005 IDEB -Ideb 2005 Brasil = 3,8 -Meta Brasil 2021 = 6 -Tempo para a Meta = 16 Convergência em 9,90 10 igualdade estrita: Ideb = 9.90 λ=91 9 8 Ideb UF 2: 6.8 7 Ideb Brasil: 6.0 5 4 Ideb UF 1: 5.0 3 2 1 ano Brasil Estado 1 Estado 2 2095 2090 2085 2080 2075 2070 2065 2060 2055 2050 2045 2040 2035 2030 2025 2020 2015 2010 0 2005 Ideb 6 O que mostra o Ideb? Prevalecem acentuadas disparidades regionais, intraregionais, entre redes de ensino e entre escolas. As disparidades estão refletidas tanto nas taxas de aprovação como no desempenho nos testes padronizados. O Ideb para o Brasil, em 2005, foi de 3,80. A meta para 2021 é chegar a 6,00. O PDE fixa metas para todos os 5.564 municípios brasileiros. O Inep já calculou as metas para todas as escolas públicas que participaram da Prova Brasil em 2005 e/ou em 2007. Os Resultados do Ideb 1ª fase do Ensino Fundamental - Rede Pública - 2007 Taxa de aprovação 2007 - 1ª fase EF Unidade da Federação Rondônia Acre Amazonas Roraima Pará Amapá Tocantins Maranhão Piauí Ceará R. G. do Norte Paraíba Pernambuco Alagoas Sergipe Bahia Minas Gerais Espiríto Santo Rio de Janeiro São Paulo Paraná Santa Catarina R. G. do Sul M. G. do Sul Mato Grosso Goiás Distrito Federal SI 94,5 95,0 88,5 96,4 81,6 77,7 96,4 90,9 83,5 89,8 90,6 83,5 90,4 88,3 87,7 83,7 96,9 97,2 87,4 98,4 98,3 97,7 98,2 96,6 94,3 94,2 96,2 SAEB 2007 4ª série EF T= tempo médio para a Nota Língua 1ª série 2ª série 3ª série 4ª série conclusão de Matemática padronizada Portuguesa 1(uma) série Matemática 76,3 65,0 72,8 78,2 58,6 71,5 83,1 82,5 68,9 81,6 89,2 67,3 70,6 72,0 61,6 68,0 90,6 82,2 86,0 95,1 90,4 88,8 81,4 72,9 89,0 84,8 86,8 82,7 80,3 69,8 87,4 69,3 77,8 87,8 81,0 74,0 80,9 83,8 72,2 71,5 72,5 71,5 71,6 85,4 84,4 79,0 93,9 85,4 90,2 88,2 81,9 84,0 87,2 83,2 86,3 85,4 81,7 89,1 74,6 81,0 89,8 82,8 79,4 83,6 75,2 77,7 81,7 76,5 75,4 74,3 92,5 87,4 88,4 96,9 92,5 93,2 89,7 83,7 91,1 89,0 87,0 89,0 89,3 80,3 91,1 77,9 85,5 91,5 84,3 80,0 83,9 70,2 79,3 80,6 79,6 78,0 78,6 88,5 90,7 86,9 91,2 93,9 93,7 88,5 87,0 92,1 90,2 90,3 IDEB Nota padronizada Língua portuguesa P = 1/T N = média nota IDEB = padronizada NxP 1,17 184,53 168,51 4,76 4,35 0,85 4,55 3,9 1,23 182,75 171,13 4,69 4,44 0,82 4,57 3,7 1,28 179,84 164,94 4,58 4,22 0,78 4,40 3,4 1,14 185,34 170,65 4,79 4,42 0,88 4,61 4,1 1,40 175,14 160,41 4,40 4,05 0,71 4,23 3,0 1,28 173,71 160,08 4,35 4,04 0,78 4,19 3,3 1,12 181,15 166,35 4,63 4,27 0,90 4,45 4,0 1,19 174,56 157,56 4,38 3,95 0,84 4,16 3,5 1,30 178,03 162,62 4,51 4,13 0,77 4,32 3,3 1,19 174,60 159,40 4,38 4,02 0,84 4,20 3,5 1,23 168,92 150,97 4,16 3,71 0,81 3,94 3,2 1,32 178,53 161,22 4,53 4,08 0,76 4,31 3,3 1,28 174,05 157,79 4,36 3,96 0,78 4,16 3,3 1,29 171,95 154,98 4,28 3,85 0,77 4,07 3,1 1,35 177,78 161,27 4,50 4,08 0,74 4,29 3,2 1,34 177,23 162,08 4,48 4,11 0,75 4,30 3,2 1,10 199,65 179,87 5,34 4,76 0,91 5,05 4,6 1,14 195,19 178,25 5,17 4,70 0,88 4,93 4,3 1,17 192,79 176,62 5,08 4,64 0,85 4,86 4,1 1,05 198,85 180,48 5,31 4,78 0,95 5,04 4,8 1,09 205,20 184,62 5,55 4,93 0,92 5,24 4,8 1,08 199,82 181,14 5,34 4,81 0,93 5,08 4,7 1,13 197,77 179,89 5,27 4,76 0,89 5,01 4,5 1,19 195,81 178,20 5,19 4,70 0,84 4,95 4,1 1,11 189,41 172,91 4,95 4,51 0,90 4,73 4,3 1,12 186,45 170,69 4,83 4,43 0,89 4,63 4,1 1,13 208,76 191,20 5,69 5,17 0,88 5,43 4,8 Os Resultados do Ideb Rede Pública - Anos Iniciais do Ensino Fundamental Unidade da Federação Ideb 2005 Ideb 2007 Projeções 2007 2009 2011 2013 2015 2017 2019 2021 Brasil 3,6 4,0 3,9 4,2 4,6 4,9 5,2 5,5 5,7 6,0 Norte Rondônia Acre Amazonas Roraima Pará Amapá Tocantins 2,9 3,5 3,3 2,9 3,6 2,7 3,0 3,4 3,3 3,9 3,7 3,4 4,1 3,0 3,3 4,0 3,0 3,6 3,4 3,0 3,7 2,7 3,1 3,5 3,3 3,9 3,7 3,3 4,0 3,0 3,4 3,8 3,7 4,3 4,1 3,8 4,4 3,4 3,8 4,2 4,0 4,6 4,4 4,0 4,7 3,7 4,1 4,5 4,3 4,9 4,7 4,3 5,0 4,0 4,4 4,8 4,6 5,2 5,0 4,6 5,3 4,3 4,7 5,1 4,9 5,5 5,3 4,9 5,6 4,6 5,0 5,4 5,2 5,8 5,6 5,2 5,8 4,9 5,3 5,7 Nordeste Maranhão Piauí Ceará R. G. do Norte Paraíba Pernambuco Alagoas Sergipe Bahia 2,7 2,7 2,6 2,8 2,5 2,7 2,8 2,4 2,8 2,5 3,3 3,5 3,3 3,5 3,2 3,3 3,3 3,1 3,2 3,2 2,7 2,8 2,7 2,9 2,5 2,8 2,9 2,5 2,9 2,6 3,1 3,1 3,0 3,2 2,8 3,1 3,2 2,8 3,2 2,9 3,5 3,5 3,4 3,6 3,2 3,5 3,6 3,2 3,6 3,3 3,7 3,8 3,7 3,9 3,5 3,8 3,9 3,4 3,9 3,6 4,0 4,1 4,0 4,2 3,8 4,1 4,2 3,7 4,2 3,8 4,3 4,4 4,3 4,5 4,1 4,4 4,5 4,0 4,5 4,1 4,6 4,7 4,6 4,8 4,4 4,7 4,8 4,3 4,8 4,5 4,9 5,0 4,9 5,1 4,7 5,0 5,1 4,6 5,1 4,8 Sudeste Minas Gerais Espírito Santo Rio de Janeiro São Paulo 4,4 4,6 3,9 4,0 4,5 4,6 4,6 4,3 4,1 4,8 4,4 4,6 4,0 4,1 4,6 4,8 4,9 4,4 4,4 4,9 5,2 5,3 4,8 4,8 5,3 5,4 5,6 5,0 5,1 5,6 5,7 5,9 5,3 5,4 5,8 6,0 6,1 5,6 5,6 6,1 6,2 6,4 5,9 5,9 6,3 6,5 6,6 6,1 6,2 6,6 Sul Paraná Santa Catarina R. G. do Sul 4,3 4,4 4,3 4,1 4,6 4,8 4,7 4,5 4,3 4,5 4,4 4,2 4,7 4,8 4,7 4,5 5,1 5,2 5,1 4,9 5,4 5,5 5,4 5,2 5,6 5,8 5,6 5,5 5,9 6,0 5,9 5,7 6,1 6,3 6,2 6,0 6,4 6,5 6,4 6,3 Centro-Oeste M. G. do Sul Mato Grosso Goiás Distrito Federal 3,8 3,4 3,5 3,8 4,4 4,2 4,1 4,3 4,1 4,8 3,8 3,4 3,6 3,9 4,5 4,2 3,8 3,9 4,2 4,8 4,6 4,2 4,3 4,7 5,2 4,9 4,5 4,6 4,9 5,5 5,1 4,8 4,9 5,2 5,8 5,4 5,0 5,2 5,5 6,0 5,7 5,3 5,5 5,8 6,3 6,0 5,6 5,7 6,0 6,5 Fonte: MEC/Inep. Tabela elaborada por Inep/DTDIE. Os Resultados do Ideb Ensino Fundamental Regular - Séries Iniciais (Até a 4ª série) Taxa de Aprovação, Prova Brasil, IDEB e Projeções - Brasil 2005 e 2007 Taxa de Aprovação -2005 Taxa de Aprovação -2007 Rede SI a 4ª Total Pública Privada Municipal Estadual 81,6 80,0 97,1 78,1 85,5 SI 1ª 89,5 89,4 95,1 88,9 91,7 2ª 76,2 74,1 96,5 71,7 82,4 3ª 80,1 78,1 97,4 76,1 84,1 4ª 84,6 83,0 97,6 81,0 88,6 SI a 4ª 84,8 83,4 97,3 82,4 85,7 SI 85,8 84,6 97,4 83,5 88,0 93,0 92,5 97,3 92,1 94,0 1ª 2ª 3ª 4ª 81,9 80,3 97,8 78,6 86,3 83,3 82,0 98,1 80,6 86,2 87,5 86,5 97,8 85,2 90,6 87,2 86,2 97,7 85,9 86,8 Fonte: MEC/Inep. Rede Nota SAEB - 2005 Língua Nota Média Matemática Portuguesa Padronizada Total Pública Privada Municipal Estadual Fonte: MEC/Inep. 182,38 177,08 226,14 174,86 181,14 172,31 167,58 211,41 165,07 172,20 4,58 4,39 6,12 4,30 4,55 Nota Prova Brasil/SAEB - 2007 Língua Nota Média Matemática Portuguesa Padronizada 193,48 189,14 227,73 190,06 192,95 175,77 171,40 210,18 172,35 175,96 4,86 4,69 6,14 4,73 4,85 IDEB 2005 3,8 3,6 5,9 3,4 3,9 Projeções 2007 4,2 4,0 6,0 4,0 4,3 2007 3,9 3,6 6,0 3,5 4,0 2009 4,2 4,0 6,3 3,8 4,3 2011 4,6 4,4 6,6 4,2 4,7 2013 4,9 4,7 6,8 4,5 5,0 2015 5,2 5,0 7,0 4,8 5,3 2017 5,5 5,2 7,2 5,1 5,6 2019 5,7 5,5 7,4 5,4 5,9 2021 6,0 5,8 7,5 5,7 6,1 Os Resultados do Ideb 1ª fase do Ensino Fundamental – Rede Municipal Distribuição do número de escolas segundo faixas de Ideb - 4ª série - Rede Municipal - Brasil 2005 e 2007 Número de escolas Faixas de Ideb Ano / Unidade Geográfica Com ideb calculado Menor que 3,0 Maior ou igual a 3,0 e Menor que 3,8 Maior ou igual a 3,8 e Menor que 5,0 Maior ou igual a 5,0 Maior ou igual a 6,0 e Menor que 6,0 2005 19.188 25,3% 27,4% 38,7% 8,1% 0,4% 24.731 14,1% 26,9% 42,9% 14,3% 1,8% 2007 Fonte: MEC/Inep; Nota: Tabela elaborada pela DTDIE Número de escolas que alcançaram a meta do Ideb em 2007 4ª série - Rede municipal Número de escolas com Ideb calculado em 2005 e em 2007 Unidade Geográfica Brasil Total Que alcançaram a Meta de 2007 Que NÃO alcançaram a meta de 2007 18.383 72,8% 27,2% Fonte: MEC/Inep; Nota: Tabela elaborada pela DTDIE Os Resultados do Ideb 1ª fase do Ensino Fundamental – Rede Pública Percentual de municípios que alcançaram a meta 2007 - 4ª série do Ensino Fundamental Ro raima M . G. do Sul A cre M ato Gro sso Espírito Santo P araná A mazo nas R. G. do No rte A lago as Santa Catarina R. G. do Sul P araíba M aranhão Ro ndô nia B ahia P iauí Sergipe P ará Ceará São P aulo To cantins P ernambuco Rio de Janeiro Go iás M inas Gerais A mapá 0,0 10,0 20,0 30,0 40,0 50,0 60,0 70,0 80,0 90,0 100,0 1a Fase do Ensino Fundamental Rede municipal Brasil 2007 Brasil 2005 Até 3,7 De 3,8 a 5,9 6,0 ou mais Sem Ideb Muito Obrigado! Carlos Eduardo Moreno Sampaio MEC/INEP (61) 3799-3720 [email protected]