AVALIAÇÃO DO PROJETO AIPS - RESULTADOS PRELIMINARES Eduardo Marino, MSc e Thomaz Chianca, PhD ENSP/FIOCRUZ; 07/12/2009 Conteúdo Abordagem avaliativa adotada Passos da avaliação Resultados preliminares Fatores: facilitadores e dificultadores Limitações da avaliação Próximos passos Abordagem Avaliativa Auto-avaliação participativa, facilitada por consultores externos Reflexão crítica e aprofundada feita pelos principais atores do projeto sobre processos, resultados e lições aprendidas Utilização da abordagem de avaliação de sistemas complexos Projeto planejado – Causalidade Linear Obj. Esp. 1 – Indicadores Obj. Esp. 2 – Indicadores Obj. Esp. n.. – Indicadores Situação Esperada Se.. Ações previstas Então Situação Inicial Tempo Implantação – Complexidade Resultado 1 Obj. Esp. 1 – Indicadores Obj. Esp. 2 – Indicadores Obj. Esp. n.. – Indicadores Situação Esperada Ações previstas Resultado 2 Resultado 3 Situação Incial Tempo Como avaliar processos complexos ? Resultado 1 Obj. Esp. 1 – Indicadores Obj. Esp. 2 – Indicadores Obj. Esp. n.. – Indicadores Ações previstas Circunstâncias... Novas necessidades... Desejos... Interações ... Situação Esperada Resultado 2 Resultado 3 Situação Incial Tempo Como avaliar processos complexos? Resultado 1 Sinais da Realidade Obj. Esp. 1 – Realidade Obj. Esp. 2 – Realidade Obj. Esp. n..– Realidade Sinais Circunstância... Desejos... S Interação ... Ações previstas S Situação Esperada Resultado 2 Sinais da Realidade Resultado 3 Sinais da Realidade Situação Incial Tempo Abordagem Avaliativa de Sistemas Complexos Distante do Planejado CONTEXTO Dinâmicas autoorganizadas Dinâmicas desorganizadas (aleatóriedade, sem padrões, caos) Próximo do Planejado (padrões emergentes não previsíveis, mas coerentes) Dinâmicas organizadas (ordem, predição, controle) Menor incerteza INCERTEZA Maior incerteza Estratégias da avaliação Identificação dos principais eventos que definem a “linha do tempo” do projeto Identificação dos resultados e impactos mais relevantes do projeto Determinação das forças geradoras ou dificultadoras das mudanças identificadas Definição das principais lições aprendidas Passos da avaliação 1. 2. 3. 4. 5. 6. Oficina preparatória (Recife, ago 2009) Revisão de documentos (marco lógico, sistematizações e artigos; set-out 2009) Oficinas de avaliação dos projetos (6 oficinas; set-nov 2009) Sistematização das oficinas (nov-dez 2009) Oficina de discussão dos resultados (dez 2009) Relatório final (dez 2009) Resultados preliminares 1. Fortalecimento dos serviços de saúde e da universidades na perspectiva da promoção da saúde Manguinhos: Fortalecimento do Centro de Saúde Escola Germano Sinval Faria na ENSP Goiânia: Unidade de Atenção Básica Saúde da Família tem melhora na qualidade do serviço dos Agentes Comunitários de Saúde (ACS) Curitiba: Iniciativas de promoção da saúde por meio de parcerias têm sido institucionalizadas pelas organizações que participam do projeto em Sobral: ações do AIPS colocaram a promoção da saúde na pauta de discussões do município (profissionais incorporaram ações de PS) Sobral: Criação de laboratório de pesquisa social, educação transformadora e saúde coletiva no CNPq, tendo como linha de pesquisa a promoção da saúde e a intersetorialidade Resultados preliminares 2. Fortalecimento da capacidade técnica e de interação dos profissionais que atuam nos territórios dos projetos Em Manguinhos: (i) aquisição de novos conhecimentos e habilidades pelas pesquisadoras locais que podem ser usados no futuro e (ii) pesquisadores e alunos de mestrado com maior conhecimento sobre metodologias de avaliação de políticas públicas e sobre os conceitos e práticas em promoção da saúde Em Goiânia: Agentes Comunitários de Saúde (ACS) elaboram projetos de promoção da saúde de maneira autônoma, buscando parcerias, e contribuindo para a diversificação e melhoria da qualidade dos serviços Em Curitiba: parcerias e ações em rede nas ações de promoção de saúde possibilitaram ganhos de capacidades e ampliação das redes de relacionamentos dos envolvidos Em Americana: ACS se sentem mais confiantes em seu trabalho e em suas potencialidades Em Sobral: ações do AIPS possibilitaram maior vínculo entre os profissionais ligados ao projeto que estão na universidade, Residência e serviços, tornando-se base para o desenvolvimento de novas ações Resultados preliminares 3. Fortalecimento de grupos/organizações locais nos territórios Americana: Território de Praia-Azul aumenta sua participação na pauta de governo (construção de área de lazer, melhoria do esgotamento sanitário e asfaltamento de ruas) Recife: (i) Maturidade p/ discussão de temas relevantes em Eventos Estaduais (Recife) e (ii) poder público local vem demandando produtos de artesanato como forma de divulgação do artesanato do Município Manguinhos: Fortalecimento de espaços colegiados/coletivos e de organizações sociais (Fórum Social, GT Cultura) Sobral: (i) participantes do grupo de adolescentes “mentes brilhantes” aumentaram auto-estima e confiança para agirem em seus locais de moradia; (ii) fortalecimento, reconfiguração e revitalização das ações do Pacto Intersetorial Resultados preliminares 4. Contribuição para aperfeiçoamento de serviços ou resgate da história dos territórios através do desenvolvimento de novos bancos de dados, instrumentos e livros Manguinhos: Construção de banco de dados com informações sobre todos os equipamentos sociais Goiânia: (i) implantação da ficha de avaliação do desempenho dos ACS; (ii) manuscrito do “Resgate da Infância” – história oral da comunidade pelos ACS Curitiba: Publicação do livro das experiências Americana: Publicação do livro “Era uma vez a Praia Azul...” – resgate da história de formação do território pelos ACS Sobral: Redação e publicação de cartilha “Promoção da Saúde: O que é? Como faz? Com quem faz?” Resultados preliminares 5. Geração de renda (fixa ou temporária) para membros da equipe do projeto ou da comunidade Manguinhos: Geração de renda temporária para as pesquisadoras locais (a maioria estava desempregada no início do Projeto) Recife: O grupo de mulheres preparou produtos para comercialização num curto espaço de tempo; foi bem sucedido nas vendas e na divulgação do trabalho Americana: ACS ensinam artesanato para membros da comunidade como parte do trabalho de PS; participantes das oficinas de artesanato tem vendido sua produção Resultados preliminares 6. Promoção de maior integração entre universidade, serviços e comunidades Manguinhos: O Projeto AIPS propiciou oportunidades para que líderes e membros das comunidades do Complexo de Manguinhos conhecessem um pouco mais sobre os serviços oferecidos pela FIOCRUZ/ENSP que podem ser usados por seus moradores (ex: Museu da Vida) Sobral: No processo de preparação da oficina AIPS, houve um trabalho forte junto a estas organizações para apresentação e discussão dos temas chave da oficina (território, cultura e identidade) Houve avanços em todos os demais projetos Resultados preliminares 7. Maior disseminação do saber sobre Promoção da Saúde e intersetorialidade gerado pelo Projeto Lançamento do segundo livro que traz o relato das experiências de todos os seis projetos AIPS. (Todos) Três dissertações de mestrado relacionadas ao Projeto defendidas, artigos produzidos, apresentações em congressos (Manguinhos) Aumento de produção científica na área de promoção da saúde em todos os demais projetos Resultados preliminares 8. Fortalecimento do sentimento de vínculo e orgulho por parte dos moradores aos seus territórios através do resgate e sistematização de histórias, tradições, cultura e práticas Recife: A participação na pesquisa etnográfica possibilitou uma redescoberta do valor de Barra do Guabirada e contribuiu para o fortalecimento dos vínculos com a localidade. Americana: Na percepção dos agentes, os moradores passaram a ter um maior sentimento de valorização de suas raízes depois que participaram da criação do livro e tiveram acesso ao produto final Goiânia: (resgate da infância) Resultados preliminares 9. Aumento do sentimento de responsabilidade em relação ao outro e ao meio ambiente por parte dos participantes dos projetos Recife: Utilização de materiais recicláveis pelas artesãs e estabilidade do número de participantes do grupo Americana: Curso de alfabetização em Praia Azul Goiânia: Projeto do bosque Resultados preliminares 10. Aumento da politização dos moradores dos territórios Americana: Havia grande resistência e agressividade entre os moradores com relação a representantes políticos ou ativistas sociais; o projeto, por ser desenvolvido por um conjunto de organizações, incluindo a universidade (que possui postura independente e tem credibilidade entre os moradores), teve um papel mediador, possibilitando uma maior disposição dos membros da comunidade para se engajarem em processos políticos de mobilização social. Goiânia: participação dos ACS nas associação de bairros Resultados preliminares 11. Fortalecimento de redes de promoção da saúde Redes locais (entre diferentes atores dos projetos locais – universidade/serviços; organizações comunitárias/universidade, etc) Redes nacionais (AIPS, rede nacional de promoção da saúde, GT ABRASCO, RMPS, etc) Fatores facilitadores Princípios do Projeto AIPS: Participação, Autonomia, Empoderamento, Politização e Intersetorialidade projetos COM a comunidade; esforço de diálogo e tradução dos diferentes conhecimentos – aprendizagem recíproca (comunidade, universidade, serviço); ação reflexiva constante sobre a prática – ação/reflexão/ação; Respeito ao tempo das pessoas e organizações para envolvimento nas ações; desenvolvimento de capacidades locais Fatores facilitadores Compromisso dos diferentes atores coordenação, agentes de saúde, gestores, etc); dispostos a atuar com poucos recursos Importância do recorte (definição do território, mapeamento de interesses e atores) Fatores dificultadores Sobrecarga de trabalho de todos os envolvidos Demora na definição do foco de ação local Recursos financeiros limitados Dificuldade inicial de comunicação (linguagem muito acadêmica) Etc... Limitações da avaliação Tempo limitado para ampliar coleta de dados Ausência da “voz” de alguns atores-chaves Foco limitado nas aprendizagens dos líderes Outras? Próximos passos Feedback equipes sobre sistematização Revisão da sistematização e eleaboração de relatório Feedback equipes sobre relatório Relatório final