COMO INTERPRETAR OS RESULTADOS DO BOLETIM DA ESCOLA O que é o Sistema de Avaliação de Rendimento Escolar do Estado de São Paulo - SARESP? • O SARESP é uma avaliação do sistema de ensino paulista e verifica, anualmente, o desempenho dos alunos do ensino Fundamental e Médio. • Retrata o desempenho dos estudantes nos diversos anos/séries e disciplinas avaliadas e busca identificar quais fatores interferem no rendimento escolar, desde os que são referentes à escola, até àqueles que tratam de características socioeconômicas e culturais dos alunos. Para que serve o SARESP? • Os resultados do SARESP permitem estabelecer áreas de atuação prioritárias por parte da Secretaria da Educação do Estado de São Paulo para atingir os objetivos traçados pelas políticas públicas de educação e a melhoria da qualidade de ensino. • Desde 2007, os resultados do SARESP são utilizados na elaboração do plano de metas das escolas. 1 Como são divulgados os resultados do SARESP? •Os resultados do SARESP são divulgados no Boletim da Escola, que traz um resumo do desempenho obtido pela escola por ano/série e por disciplina. • São produzidos dois tipos de Boletins: Boletim da Escola do 3o ano do Ensino Fundamental Contém os dados de participação dos alunos no primeiro dia de avaliação, a classificação e a descrição dos seis níveis da escala de desempenho, agrupados em cinco padrões (insuficiente, regular, bom, muito bom e excelente) e os resultados sobre o desempenho geral em Língua Portuguesa e Matemática. INDICADORES • Médias de pontos e percentual; • Distribuição percentual dos alunos nos níveis de desempenho. Boletim da Escola do 5o, 7o e 9o anos do Ensino Fundamental e 3a série do Ensino Médio Mostra os dados de participação dos alunos no primeiro dia de avaliação, a classificação e a descrição dos alunos nos quatro níveis de proficiência (abaixo do básico, básico, adequado e avançado), e os resultados sobre o desempenho geral em Língua Portuguesa, Matemática, Geografia e História. INDICADORES • Médias de proficiência; • Distribuição percentual dos alunos nos pontos da escala e nos níveis de proficiência; • Nota de Redação e a distribuição percentual dos alunos nos quatro níveis de desempenho. 2 Como interpretar os resultados do Boletim da Escola? Boletim de Resultados do 3o Ano do Ensino Fundamental PARTICIPAÇÃO Apresenta o número de alunos presentes no primeiro dia de avaliação, por ano/série da escola e nas outras instâncias da SEE. MÉDIA Indica os resultados obtidos a partir da atribuição de pontos às respostas dadas pelos alunos nas provas de Língua Portuguesa e de Matemática, da escola e das várias instâncias. Os resultados de cada prova foram calculados em médias de pontos e, posteriormente, transformados em percentuais de pontos. TOTAL DE PONTOS POSSÍVEL Língua Portuguesa = 72 Matemática = 100 3 NÍVEL Classifica o desempenho dos alunos do 3º ano do Ensino Fundamental em escalas diferenciadas por disciplina avaliada (língua portuguesa e matemática). Cada escala é composta por seis níveis (de 1 a 6) e agrupados em cinco padrões de desempenho (insuficiente, regular, bom, muito bom e excelente), que agregam intervalos de pontos e que representam o domínio das habilidades específicas descritas no quadro “Classificação e Descrição dos Níveis da Escala de Desempenho”. 4 Exemplo de interpretação do Boletim da Escola Consideremos, como exemplo, o caso de uma escola do 3º ano do Ensino Fundamental e examinemos os seus resultados em Língua Portuguesa: Dos alunos que realizaram a prova, a maior parte (61,3%) encontra-se distribuída nos níveis 5 e 6 (muito bom e excelente) de Língua Portuguesa, que requerem competências mais complexas. Nos níveis 3 e 4 localizam-se 34,8% dos alunos, o que significa que esses estudantes são capazes de apresentar as habilidades descritas nos níveis regular e bom. No entanto, quase 4% dos alunos apresentam conhecimentos insuficientes para o ano cursado, distribuindo-se, respectivamente, pelos níveis 1 e 2, indicando que 2,7% escrevem sem correspondência sonora e 1,2% escrevem com correspondência sonora ainda não alfabética. Os resultados da escola mostram que, em comparação com o desempenho da rede estadual, há um percentual de alunos ligeiramente maior localizado nos níveis superiores da escala. 5 Como interpretar os resultados do Boletim da Escola? Boletim de Resultados do 5º, 7º e 9º Anos do Ensino Fundamental e 3ª Série do Ensino Médio PARTICIPAÇÃO Apresenta o número de alunos presentes no primeiro dia de avaliação, por ano/série da escola e nas outras instâncias da SEE. MÉDIA Mostra os resultados obtidos no SARESP 2011 em cada disciplina avaliada – Língua Portuguesa, Matemática, Geografia e História – por ano/série da escola e nas várias instâncias. As médias de proficiências obtidas na escola em cada ano/série e disciplina permite comparação com o resultado do município onde a escola está situada, com o desempenho do conjunto das escolas da Diretoria de Ensino e da Coordenadoria e, por fim, com a rede estadual como um todo. 6 NÍVEL Indica a classificação e a descrição dos quatro níveis de proficiência utilizados no SARESP e os intervalos de cada nível de proficiência por disciplina e ano/série avaliados. Nesse conjunto também é sugerido, a partir dos resultados alcançados, a medida pedagógica a ser adotada para o conjunto dos alunos situados em cada um dos quatro níveis, lembrando que o padrão de desempenho esperado é o nível adequado. A escola pode analisar o seu desempenho considerando a distribuição dos alunos nos pontos da escala (< 125, 125, 150, 175, 200, 225, 250, 275, 300, 325, 350, 375, ≥ 400) e no agrupamento desses pontos da escala adotados no SARESP (abaixo do básico, básico, adequado e avançado). Cada ponto da escala representa diferentes níveis de desenvolvimento e aprendizagem. 7 REDAÇÃO Contém os resultados da REDAÇÃO por meio da atribuição de notas ao conjunto dos alunos avaliados da Diretoria de Ensino e da distribuição percentual de alunos por nível de desempenho. Como a redação foi aplicada em uma amostra, o seu resultado representa a Diretoria de Ensino e não cada escola. TOTAL DE PONTOS POSSÍVEL = 100 Exemplo de interpretação do Boletim Escolar Consideremos, como exemplo, o caso de duas escolas e examinemos os seus resultados em Língua Portuguesa para o 9º ano do Ensino Fundamental: 8 DISTRIBUIÇÃO DOS ALUNOS NOS NÍVEIS ESCOLA MÉDIA Escola A 225,6 Abaixo do Básico 48,8% Escola B 223,5 38,4% 43,0% 17,4% 1,2% Rede Estadual 229,6 28,0% 55,0% 15,2% 1,8% Básico Adequado Avançado 23,3% 18,6% 9,3% • A média da Escola A (225,6) é superior à média da Escola B (223,5). Ambas, no entanto, são menores do que a média da Rede Estadual (229,6) e inferiores ao nível adequado (275 a < 325). • A Escola B, embora tenha obtido uma média inferior à Escola A, apresenta uma distribuição dos alunos mais próxima ao esperado em termos de aprendizagem, pois o número de alunos no nível abaixo do básico é bem inferior ao da Escola B, cuja diferença alcança mais de 10%. • Na Escola B, o maior percentual de alunos (43,0%) está localizado no nível básico, enquanto que na Escola A esse percentual (48,8%) encontra-se no nível abaixo do básico. Na Escola A, a presença de maiores percentuais de alunos situados nos níveis adequado (18,6%) e avançado (9,3%) contribuiu para o aumento da média da escola. É necessário não julgar os resultados apenas pela média, sem considerar a distribuição das notas que a produziram. Seria o mesmo que ficar contente porque o PIB per capita do Brasil em 2011 foi de aproximadamente R$ 21.500,00*, sem observar que, por se tratar de uma média, esconde várias disparidades na distribuição de renda ainda bastante desigual no Brasil, apesar da tendência de redução observada nos últimos anos. * Fonte: IBGE; Banco Central do Brasil 9 O que a escola pode fazer com os dados do seu Boletim da Escola? • Analisar a média de desempenho de cada disciplina avaliada e se situar em relação a sua Diretoria de Ensino, ao município onde a escola se localiza e ao conjunto de escolas estaduais; • Verificar a distribuição dos alunos nos níveis de desempenho; • Examinar a média de proficiência, verificar em que nível de proficiência está localizada e observar o distanciamento ou não da média de proficiência com o padrão esperado (adequado). Outros aspectos importantes a considerar com base nos dados do Boletim: O que pode indicar um resultado positivo? • Quanto maior o percentual de alunos nos níveis mais altos da escala e menor o percentual nos níveis mais baixos, melhor o resultado; • Analisar a distribuição dos alunos nos níveis é muito importante, porque uma escola pode ter uma média no nível adequado, mas ainda ter alguns alunos nos níveis inferiores (abaixo do básico e básico), indicando a necessidade de garantir a aprendizagem e a evolução desses alunos; 10 • O movimento de análise dos resultados do SARESP 2011 deve ser feito comparando com o desempenho obtido nas edições anteriores. Com isso, é possível descobrir avanços. Mesmo que os índices, na comparação com as demais instâncias estejam inferiores, um avanço em relação a resultados anteriores da própria escola é bastante positivo. • É importante verificar como ocorreu a distribuição dos percentuais de alunos nos níveis de proficiência da sua Diretoria de Ensino e nas outras instâncias. Essa comparação pode fornecer novos indicadores para compreender o desempenho dos alunos. Quais os resultados comuns? Se os resultados são comuns ou muito diferentes, o que eles indicam? Refletindo sobre os resultados do Boletim Escolar O que se espera em uma avaliação de sistema em larga escala é que, num ensino de boa qualidade, não deve haver dispersão muito grande de resultados. Isto é, oferecendo-se as condições necessárias e adequadas a todos os alunos de um grupo, a expectativa é que as discrepâncias observadas sejam muito pequenas e que decorram apenas de diferenças individuais. Se o resultado numérico é importante, mas ainda é a sua interpretação. É fundamental que a escola se indague sobre o significado pedagógico dos resultados da avaliação e sobre os fatores que contribuem para explicar os desempenhos. Esta reflexão é fundamental para além de quantificar, qualificar os resultados. OS RESULTADOS PRECISAM SER QUALIFICADOS! 11