AVALIAÇÃO COMO FERRAMENTA DE GESTÃO PAULA LOUZANO FRANCISCO SOARES SEMINÁRIO UNDIME RECIFE, 27 DE OUTUBRO DE 2010 ROTEIRO Importância da avaliação em larga escala para a gestão educacional Pressupostos e funcionamento da avaliação O uso da avaliação Gerencial Pedagógico MARCOS NA GESTÃO EDUCACIONAL 1995 – SAEB 2005 – Prova Brasil Coloca aprendizado no centro do debate educacional Dá visibilidade à escola como locus da aprendizagem IDEB Cria um sistema de accountability PORQUE AVALIAÇÃO EM LARGA ESCALA É IMPORTANTE? Garantir direito à educação = direito à aprender Se não há aprendizado, não há atendimento dos direitos educacionais dos alunos Cabe ao Estado verificar o atendimento desse direito identificando TODOS e CADA UM dos indivíduos, sujeitos do direito à educação COMO VERIFICAR O ATENDIMENTO AO DIREITO? Há vagas para todos? Censo Demográfico. Há recursos suficientes? Dados de orçamento. Há funcionamento regular? Dados Escolares: faltas, alocação alunos, material didático, clima escolar. Há aprendizado? – Avaliação em larga escala (Prova Brasil). APRENDER O QUE? Aprendizado contempla várias competências e habilidades: Há diversos paradigmas: cognitivas (ex. linguagens), pessoais (ex. autonomia), sociais (ex. conviver com diferenças). Delors, PISA/OECD, Constituição Federal 1988. Avaliação em larga escala: Foco nas habilidades cognitivas O QUE MEDIR? Art. 210. Serão fixados conteúdos mínimos para o ensino fundamental, de maneira a assegurar formação básica comum e respeito aos valores culturais e artísticos, nacionais e regionais. É sobre esse núcleo comum que as avaliações em larga escala, como a Prova Brasil, são organizadas. POR QUE UM PADRÃO ÚNICO? O sistema educacional brasileiro deve ser analisado usando-se uma métrica comum a todos os alunos porque a expectativa deve ser a mesma para todos. ORGANIZAÇÃO DA PROVA Muitos Itens: 370 questões 21 cadernos Blocos Balanceados Incompletos – BIB 1 2 3 4 5 6 7 2 3 4 5 6 7 1 4 5 6 7 1 2 3 APRESENTAÇÃO E USO DOS RESULTADOS Como sintetizar os resultados de forma útil? Uso gerencial IDEB Nível socioeconômico Uso pedagógico Os níveis de aprendizado como proposta de solução. INDICADORES GERENCIAIS IDEB – pondera pela reprovação Nível Socioeconômico – pondera pelas diferenças entre os alunos NÍVEL SOCIOECONÔMICO Síntese de Indicadores de Renda, Educação, Ocupação. O questionário contextual da Prova Brasil 2007 permite seu cálculo. USO PEDAGÓGICO 1. Estabelecer níveis de desempenho 2. Estabelecer pontos de corte 3. Estabelecer metas para cada nível de proficiência 4. Apresentar os resultados segundo este critério 5. Fazer interpretação pedagógica dos resultados 6. Transpor habilidades para itens concretos 7. Monitorar resultados segundo os níveis estabelecidos 8. Ir além da interpretação: apoiar o uso dos resultados pelas escolas ESTABELECER NÍVEIS DE DESEMPENHO Abaixo do Básico ou Insuficiente Básico Proficiente ou Adequado Avançado ESTABELECER PONTOS DE CORTE Níveis 4ª SérieLeitura Abaixo do Básico Básico Adequado Avançado < 150 Entre 150 e 200 Entre 200 e 250 Acima de 250 ESTABELECER META Abaixo do Básico Básico Adequado Avançado 4ª SérieLeitura < 150 Entre 150 e 200 Entre 200 e 250 Acima de 250 META 5% 25% 45% 25% Níveis APRESENTAR OS RESULTADOS SEGUNDO ESTE CRITÉRIO Recife Níveis de Aprendizado Quarta Leitura Matemática Oitava Leitura Matemática META Insuficiente 38,1 48,3 39,4 53,8 5,0 Básico 44,1 39,0 51,3 41,4 25,0 Proficiente 16,0 11,6 8,1 3,7 45,0 Avançado 1,8 1,1 1,2 1,1 25,0 QUAL É A MELHOR ESCOLA? NÍVEL (%) ESCOLA MÉDIA 1 199.90 2 Abaixo Básico Básico Adequado Avançado 9.1 45.5 45.5 0.0 199.28 18.8 30.4 39.1 11.6 3 199.26 16.7 32.3 35.4 15.6 4 200.04 4.3 48.6 37.1 10.0 5 200.39 2.9 44.1 47.1 5.9 6 200.64 13.3 30.0 38.9 17.8 7 199.62 9.4 34.4 40.6 15.6 FAZER INTERPRETAÇÃO PEDAGÓGICA ABAIXO DO BÁSICO Compreender as relações de causa e conseqüência entre idéias em uma tirinha. Compreender, em uma tirinha o sentido de uma palavra. Recuperar informações explícitas, com auxílio de imagens, em cartazes. Localizar informação implícita no texto em um bilhete eletrônico. FAZER INTERPRETAÇÃO PEDAGÓGICA BÁSICO Selecionar legenda apropriada para uma foto de revista. Localizar informação explícita em um texto narrativo simples. Identificar o tema ou assunto principal do texto. Recuperar a informação explícita do texto. Identificar personagem de uma narrativa literária simples. Identificar o efeito de sentido produzido em um texto pelo uso intencional de recursos expressivos gráfico-visuais. FAZER INTERPRETAÇÃO PEDAGÓGICA ADEQUADO Recuperar informação do texto, localizando o locutor e o interlocutor por marcas lingüísticas. Localizar e organizar, na seqüência em que aparecem, itens de informação explícita, distribuídos ao longo de um texto. Interpretar o efeito de sentido que provoca o humor. Estabelecer relações lógico-semânticas entre partes do texto que dão coesão às idéias. FAZER INTERPRETAÇÃO PEDAGÓGICA AVANÇADO Inferir o assunto principal de um texto, com base em informações contidas em título, subtítulo ou corpo do texto. Identificar os possíveis elementos constitutivos da organização interna de um bilhete pessoal. Identificar marcas de variação lingüística de natureza social ou geográfica, no léxico de um texto literário narrativo. Identificar o efeito de sentido produzido em um texto literário pelo uso intencional de pontuação expressiva (interrogação, exclamação, reticências etc.). TRANSPOR HABILIDADES PARA ITENS CONCRETOS NÍVEL ADEQUADO – 4 SÉRIE MONITORAR RESULTADOS SEGUNDO NÍVEIS % DE ALUNOS ABAIXO DO ADEQUADO - REDE ESTADUAL DE SP SAEB - 4ª Serie SAEB - 8ª Serie 100% 100% 90% 90% 80% 80% 70% 70% 60% 60% 50% 50% 40% 40% 30% 30% 20% 20% 10% 10% 2008 Abaixo 300 EST 2007 2006 2005 2004 2003 2002 Abaixo 200 EST 2001 2000 1999 1998 1997 1996 1995 2008 2007 2006 2005 2004 2003 2002 2001 2000 1999 1998 1997 1996 1995 1994 Abaixo 200 EST 1994 0% 0% MONITORAR RESULTADOS SEGUNDO NÍVEIS % DE ALUNOS ABAIXO DO ADEQUADO - REDE ESTADUAL DE SP SAEB - 3ª ano EM 100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% 1994 1995 1996 1997 1998 1999 Abaixo 200 EST 2000 2001 2002 Abaixo 300 EST 2003 2004 2005 Abaixo 350 EST 2006 2007 2008 ALÈM DA INTERPRETAÇÃO DOS DADOS: USO DOS RESULTADOS PELAS ESCOLAS 1. Compreender resultados: estudo detalhado das planilhas de resultados das avaliações. 2. Buscar outras evidências que corroboram ou não estes resultados 3. Buscar causas objetivas e não genéricas para os problemas. 4. Identificar o que fazer, pedagogicamente, para tirar os alunos dos níveis mais baixos e colocálos nos níveis de desempenho mais altos. 5. Apoiar escolas na melhoria do seu ensino Paula Louzano [email protected] www.lideresemgestaoescolar.org.br