Avaliação da Educação Básica Saeb/Prova Brasil e Ideb Saeb/Prova Brasil O desafio de planejar uma avaliação Matriz de Referência Elaboração de Itens - Capacitação IES - Laboratório Cognitivo Pré-Teste - Avaliação - Análise Psicométrica dos Itens Concepção das provas Aplicação Logística Resultados - Correção/Consolidação da base/Publicação BNI O que é o Saeb? O Sistema de Avaliação da Educação Básica – Saeb – é uma avaliação externa em larga escala aplicada a cada dois anos. Objetivos Constituem objetivos do Sistema de Avaliação da Educação Básica: I - Oferecer subsídios à formulação, reformulação e monitoramento de políticas públicas e programas de intervenção ajustados às necessidades diagnosticadas; II - Identificar os problemas e as diferenças regionais do ensino; Objetivos III - Produzir informações sobre os fatores do contexto socioeconômico, cultural e escolar que influenciam o desempenho dos alunos; IV - Proporcionar aos agentes educacionais e à sociedade, uma visão dos resultados dos processos de ensino e aprendizagem e das condições em que são desenvolvidos; V - Desenvolver competência técnica e científica na área de avaliação educacional, ativando o intercâmbio entre instituições educacionais de ensino e pesquisa. PROVA BRASIL SAEB (SISTEMA NACIONAL DE AVALIAÇÃO DA EDUCAÇÃO BÁSICA) (CENSITÁRIO PARA ESCOLAS PÚBLICAS) ANEB (AMOSTRAL) Escolas Particulares: • 5º e 9º ano do EF e 3ª série do EM: Urbanas – mais de 10 alunos. 5 e 9 ano do EF Escolas públicas, de localização urbana ou rural, com 20 ou mais alunos matriculados no ano/série. Escolas Públicas: • 5º ano EF: Urbanas e Rurais 10 a 19 alunos • 9º ano EF: Urbanas 10 a 19 alunos • 3ª série EM: Urbanas Mais de 10 alunos O que o SAEB/Prova Brasil avalia? Desempenho das escolas em Língua Portuguesa e Matemática em turmas de : - 5º e 9º anos do Ensino Fundamental e - 3ª série do Ensino Médio Escala de Interpretação de Resultados: 0 a 500 pontos O Saeb/Prova Brasil não avalia aluno. Estratégias • Aplicar testes de Matemática e de Língua Portuguesa, com foco em resolução de problemas e em leitura, respectivamente, definidos nas Matrizes de Referência do Sistema de Avaliação da Educação Básica. Estratégias • Produzir informações sobre o desempenho dos alunos, assim como sobre as condições intra e extra-escolares que incidem sobre o processo de ensino e aprendizagem, no âmbito das redes de ensino e unidades escolares. Estratégias Questionário do Aluno Questionário do Professor Questionário do Diretor Questionário da Escola •Perfil •Caracterização Sociodemográfica •Infraestrutura •Nível de renda •Formação •Estrutura familiar •Experiência Profissional •Estado de Conservação •Hábitos de leitura •Condições de Trabalho •Segurança •Trajetória escolar •Violência na Escola •Práticas escolares e cotidianas •Práticas pedagógicas e/ou de gestão •Utilização dos espaços •Expectativas •Participação e avaliação em políticas, programas e projetos. •Características gerais Processo de Realização Elaboração de Itens BNI Montagem das Provas Impressão Chamada Pública para elaboradores Divulgação de Resultados Distribuição Aplicação DAEB Processamento de Dados DTDIE Unidade de Operações Logísticas Operação Reversa Utilização dos Resultados Critérios para não divulgação de resultados 1 - Escolas e Municípios que não atingiram 50% de participação em relação ao quantitativo de alunos declarados no Censo Escolar do ano da aplicação. 2 - Escolas públicas com menos de 20 alunos matriculados em cada uma das séries avaliadas, de acordo com o Censo Escolar do ano da aplicação. 3 - Escolas da Aneb (parte amostral) 4 - Escolas que optaram pela não aplicação da Prova Brasil, com registro em Formulário de Controle da Aplicação. Boletins de Desempenho • Desempenho da Escola na Prova Brasil – Quantitativos de Estudantes – Proficiências médias em Língua Portuguesa e Matemática – Dados Comparativos (Brasil, Estado, Município) • Distribuição percentual dos alunos na escala de desempenho • Resultados do Ideb na Escola – Taxa de aprovação – Média de horas aula – Docentes com curso superior – Ideb (2005 – 2009) e Metas (2007 – 2011) – Dados Comparativos (Brasil, Estado, Município) Ideb Índice de Desenvolvimento da Educação Básica Índice de Desenvolvimento da Educação Básica - Ideb Definição • Indicador sintético e de fácil compreensão. • Combinação de informações sobre fluxo e desempenho escolar. • Relaciona o tempo gasto pelos alunos para concluir cada nível/etapa de ensino com o desempenho alcançado em testes padronizados. • Referência sobre a qualidade da educação que permite comparação por UF, rede de ensino e escolas. • Possibilita monitorar o desempenho ao longo do tempo. Lógica e características O Ideb é a combinação de dois indicadores: • O desempenho obtido pelos alunos padronizados (Prova Brasil ou Saeb); • A taxa de aprovação. nos testes Quanto melhor o desempenho dos alunos nos testes e maior a taxa de aprovação, mais elevado será o Ideb. Para melhorar o Ideb, as redes de ensino e as escolas têm que trabalhar nas duas dimensões do indicador, simultaneamente. O Ideb varia de 0 a 10. Cálculo do Ideb Idebij Nij Pij Índice de desenvolvimento da educação básica da etapa/nível de ensino i na unidade j (onde j pode ser ij escola, rede de ensino, Região Geográfica, Unidade da Federação, Brasil etc.) Ideb N ij Proficiência (Prova Brasil ou Saeb) média padronizada obtida pelos alunos da etapa/nível i na unidade j Pij Taxa média de aprovação da etapa/nível i na unidade j Exemplo hipotético Exemplo 1 Escola A Escola B Escola C Proficiência média padronizada Taxa média de aprovação 4,8 0,9 4,8 0,8 4,8 0,5 Ideb 4,3 3,8 2,4 Exemplo 2 Escola A Escola B Escola C Proficiência média padronizada Taxa média de aprovação 6,0 0,7 5,0 0,7 4,0 0,7 Ideb 4,2 3,5 2,8 Metas até 2021: Projeções do Ideb • O esforço de cada rede deve contribuir para o Brasil atingir a meta de 2021 (metas individuais diferentes) • As trajetórias do Ideb, por rede, devem contribuir para reduzir as desigualdade (esforços diferentes) • Supõem-se comportamento de uma função Logística • Informações necessárias para projetar a trajetória do Ideb: o Ideb inicial (Ideb de 2005) o Meta (Ideb de 2021) o Tempo para a Meta, em anos (16 anos) o Esforço necessário Anos iniciais do ensino fundamental 1º ao 5º ano Brasil 3,8 4,2 4,6 Ideb 2005 Ideb 2007 Ideb 2009 3,9 4,2 Metas 5,0 Ideb 2011 4,6 Anos iniciais do ensino fundamental 5º ano 6,0 Ideb 2011 Meta 2011 5,0 4,0 3,0 2,0 1,0 0,0 Nordeste Norte Brasil Centro-Oeste Sul Sudeste Metas IDEB 2011 3,7 3,8 4,6 4,8 5,2 5,4 IDEB 2011 4,2 4,2 5,0 5,3 5,5 5,6 IDEB 2009 3,8 3,8 4,6 4,9 5,1 5,3 Anos iniciais do ensino fundamental Rede Municipal 2007 2005 Até 3,7 De 3,8 a 4,9 5,0 a 5.9 2009 6,0 ou mais Sem Ideb 2011 Anos iniciais do ensino fundamental Evolução da dimensão P (Aprovação) do IDEB Brasil 0,91 0,89 0,86 0,83 2005 2007 2009 2011 Anos finais do ensino fundamental 9º ano Brasil 3,5 Ideb 2005 Metas 3,8 4,0 Ideb 2007 Ideb 2009 3,5 3,7 4,1 Ideb 2011 3,9 Anos finais do ensino fundamental 6º ao 9º ano 6,0 Ideb 2011 Meta 2011 5,0 4,0 3,0 2,0 1,0 0,0 Nordeste Norte Brasil Centro-Oeste Sul Sudeste Metas IDEB 2011 3,3 3,6 3,9 3,9 4,3 4,4 IDEB 2011 3,5 3,8 4,1 4,3 4,3 4,5 IDEB 2009 3,4 3,6 4,0 4,1 4,3 4,3 Anos finais do ensino fundamental Rede Pública 2007 2005 Até 3,4 De 3,5 a 4,4 4,5 a 5,4 2009 5,5 ou mais Sem Ideb 2011 Anos finais do ensino fundamental Evolução da dimensão P (Aprovação) do IDEB Brasil 0,83 0,82 0,8 0,77 2005 2007 2009 2011 Ensino Médio Brasil 3,7 3,4 3,5 3,6 Ideb 2005 Ideb 2007 Ideb 2009 Ideb 2011 3,5 3,7 Metas 3,4 Ensino Médio 6,0 Ideb 2011 Meta 2011 5,0 4,0 3,0 2,0 1,0 0,0 Norte Nordeste CentroOeste Brasil Sudeste Sul Metas IDEB 2011 3,2 3,3 3,6 3,7 3,9 4,0 IDEB 2011 3,2 3,3 3,6 3,7 3,9 4,0 IDEB 2009 3,3 3,3 3,5 3,6 3,8 4,1 Ensino Médio Evolução da dimensão P (Aprovação) do IDEB no ensino médio - Brasil 0,8 0,8 2009 2011 0,78 0,77 2005 2007 Alexandre André dos Santos Diretor da Daeb – INEP [email protected] (61) 2022-3305 (61) 2022-3306