AVALIAÇÃO DO PROGRAMA EXCELÊNCIA EM GESTÃO EDUCACIONAL Projeto Piloto • Parceria entre a Secretaria de Educação do Estado de São Paulo e Fundação Itaú Social • Período: 2009 a 2011 - Coordenação técnica do Projeto Piloto: Instituto Fernand Braudel - Coordenação técnica da Transferência de Tecnologia: Cenpec • Regional de Ensino Leste 3 • 10 escolas de Ensino Fundamental II e Ensino Médio - Critério de escolha: IDESP • Inspirado na Reforma Educacional de Nova York Tutoria Objetivo: Fortalecer as práticas da coordenação escolar e do corpo docente na oferta de uma aprendizagem de qualidade, criando mecanismos de gestão e supervisão do trabalho pedagógico Estratégia: • Tutor: par avançado também atuante na rede pública de ensino • Formação continuada em serviço • Caráter prático e modelar • Realizada no cotidiano da escola, especialmente na sala de aula Foco: Professores Coordenadores Professores de Língua Portuguesa e Matemática Adesão voluntária FOCO EM COMPETÊNCIAS • Criação de ferramentas formativas de apoio: descritivo de função, matrizes de competência, rubricas formativas • • Professor Coordenador: • Diagnóstico e Planejamento • Comunicação e Gestão de Prioridades • Currículo e Dados • Supervisão e Desenvolvimento Profissional Professor: • Planejamento; • Prática de ensino; • Gestão de sala de aula; • Avaliação; FOCO EM COMPETÊNCIAS FOCO EM COMPETÊNCIAS Matriz Avaliativa Desempenho do Professor Gestão Pedagógica Formação do aluno • Planejamento • Gestão da sala de aula • Avaliação • HTPC • Liderança Pedagógica • • • • Participação na vida escolar Relação entre alunos Relação do aluno com conhecimento Desempenho Escolar Estratégias de Avaliação Perspectivas complementares: I - Monitoramento das estratégias de intervenção no campo (relatórios, visitas técnicas, questionários) II - Avaliação de resultados: modelo misto com uso de metodologias quantitativas e qualitativas para as 3 dimensões III - Avaliação Econométrica: análise de impacto com foco em desempenho dos alunos nas notas (SARESP) de Língua Portuguesa e Matemática Avaliação de Resultados Dados quantitativos • Questionários: Professores de LP e M tutorados; Tutores de LP e M; Alunos de 5ª série EF e 3º ano do EM; Diretores e Professores Coordenadores; • Duas aplicações com intervalo de 6 meses: maio e novembro / 2011; Dados qualitativos • Grupos focais: Professores de LP e M tutorados (10); PCs (2); Professores não tutorados (4); Coordenadoras de Pais (1); Famílias (2); Jovens Lideranças (2); Alunos (4) e Tutores de professores (1); • Entrevistas: Tutores de PCs e Tutora de Coordenadores de Pais; Avaliação Econométrica Coortes laranja: 3 anos do programa; Coortes azul: 2 anos do programa; • Linha de base (pré-tratamento): 2007 e 2008 • Pós-tratamento: 2011 • Grupo controle: escolas estaduais da região metropolitana de São Paulo, pareadas a partir da semelhança com os alunos tratados; Resultados 1. Em que medida o Programa contribuiu com o desempenho dos professores? Desempenho do Professor Planejamento Gestão da Sala de Aula Avaliação Resultados positivos de mudanças técnicas em todos os indicadores desta dimensão Resultados Desempenho do Professor: I - Planejamento: • Compreensão sobre o significado das competências desejadas para os alunos • Compreensão do sentido e lógica das sequências didáticas • Apoio no uso dos Cadernos • Ampliação da possibilidade de uso de recursos didáticos em sala de aula • Ampliação de observação individualizada de necessidades aprendizagem dos alunos para orientar novos planos de aula específicas de Resultados Desempenho do Professor: II - Gestão de sala de aula: • Maior participação dos alunos em sala • Atenção ao tempo de uso de fala, circulação física pela classe, configuração de dinâmicas para estudos individuais • Maior cuidado com as etapas de aprendizagem dos alunos Resultados Desempenho do Professor: III - Avaliação: • Compreensão do significado da avaliação e seu papel como dispositivo pedagógico • Uso da avaliação como instrumento de aprendizagem dos alunos • Elaboração de provas com clareza sobre quais competências e habilidades se quer conhecer e a confecção de exercícios adequados • Realização de devolutivas das provas para os alunos Resultados 2. Em que medida o Programa contribuiu com a gestão pedagógica* das escolas? Gestão Pedagógica Liderança Pedagógica HTPC Não foram verificadas mudanças consistentes * Iniciado em 2010, com Professores Coordenadores Resultados Gestão Pedagógica: • Professores Coordenadores indicam melhor compreensão de sua função. Entretanto, essa compreensão não se transformou em ação prática na gestão pedagógica das escolas • Percepção pelos PCs de que o modelo de HTPC das escolas é uma reprodução das reuniões formativas da DRE • Reconhecimento de que o HTPC se tornou mais formativo, mas ainda distante da realidade concreta da sala de aula e das necessidades dos professores • PCs ainda se encontram em situação de certo isolamento nas escolas Resultados 4. Em que medida o Programa contribuiu com a formação dos alunos? Formação do Aluno Relação entre alunos Relação com o conhecimento Participação na vida escolar Desempenho escolar Resultados desta dimensão indicam perspectivas de progresso Resultados Formação dos Alunos: • Melhora a relação entre alunos • Relação dos alunos com conhecimento mais positiva • Alunos reconhecem ter maior possibilidade para participação em sala de aula • Professores de português e matemática são indicados como referência de bons professores • Inquietação dos jovens para serem melhor percebidos e cuidados na escola Obs: Mudanças do desempenho e expectativas dos alunos do professor convergem com inquietações Resultados Formação dos Alunos III - Desempenho Escolar: O indicador de Desempenho Escolar, medido pelas notas do SARESP, com metodologia da avaliação econométrica, mostra que: 1- Alunos concluintes do 7º ano em 2010 Impacto positivo de 3.3 (12%) em Matemática Impacto positivo de 3.1 (11%) em Língua Portuguesa 2 - Alunos concluintes do 9º ano em 2010 Não foi identificado impacto 3 – Alunos concluinte do 3º ano do Ensino Médio em 2010 Não foi identificado impacto 4 - Alunos concluintes do 9º ano em 2011 Impacto negativo de 5.9 (-11%) em Matemática 5 - Alunos concluintes do 3º ano do Ensino Médio em 2011 Impacto positivo de 5.7 (17%) em Língua Portuguesa Resultados Formação dos Alunos - Hipóteses 1. Maior facilidade de obter resultados com alunos mais novos ajuda resultados no início do fundamental 2. Acúmulo da estratégia ao longo dos 3 anos pode explicar impacto em língua portuguesa só aparecer no último ano 3. Diferença de resultados entre língua portuguesa e matemática, a favor da primeira, pode ser explicada em parte pela percepção da diferença da formação destes professores e abertura para o trabalho com a tutoria 4. Se houve impacto em evasão (não há dados para análise mais aprofundada), este pode no curto prazo ter diminuído o impacto médio em nota Considerações • Avaliação mostrou convergência entre as expectativas dos alunos (espaço para participação, maior atenção dos professores) e as mudanças das práticas dos professores (planejamento, avaliação e gestão da sala de aula) • A implantação do Programa aconteceu de forma gradativa nos 3 anos de duração: - 1º ano de aprendizagem: identificação dos papéis; fortalecimento do vínculo com as escolas e a Regional de Ensino; estratégias de comunicação - 2º e 3º anos: intensificação da estratégia de tutoria e das ações com as famílias e os alunos • Heterogeneidade das unidades escolares (gestão; composição das equipes; porte) • Necessidade de atuação conjunta entre diferentes líderes escolares (supervisor, diretor, coordenador pedagógico)