FURG Fundação Universidade Federal do Rio Grande Pró-Reitoria de Planejamento e Desenvolvimento Secretaria de Avaliação Institucional Auto-Avaliação Institucional Experiências da FURG 1 SINAES / CONAES - CPA / SAI SINAES/CONAES - Portaria MEC n.º 2.051, de 09 de julho de 2004: “Regulamenta os procedimentos de avaliação do Sistema Nacional de Avaliação da Educação Superior (SINAES), instituído na Lei no 10.861, de 14 de abril de 2004”. CPA - Comissão Própria de Avaliação: Criada pela RESOLUÇÃO Nº 034/2004, DO CONSELHO UNIVERSITÁRIO e PORTARIA Nº1037/2005, do Reitor da FURG. SAI – Secretaria de Avaliação Institucional: criada pelo ATO EXECUTIVO Nº 013/2005 de 18 de abril de 2005, do Reitor da FURG. 2 Prof. Roní de Azevedo e Souza SINAES / CONAES - CPA / SAI Auto-Avaliação AVALIES Avaliação Externa Avaliação das Instituições de Educação Superior SINAES 3 Prof. Roní de Azevedo e Souza Necessidade e Utilidade PDI PPP 4 Auto Avaliação SINAES Prof. Roní de Azevedo e Souza Etapas Auto-Avaliação 1ª etapa: Preparação a. Constituição da CPA; b. Sensibilização; c. Elaboração do Projeto de Auto-Avaliação. 2ª Etapa: Desenvolvimento a. Ações e levantamento de dados e informações; b. Seminários nos Cursos e reuniões setoriais; c. Análise das informações- relatórios parciais; d. Congresso Institucional de Auto-Avaliação. 5 3ª Etapa: Consolidação a. Relatório Final; b. Divulgação; c. Balanço Crítico. Prof. Roní de Azevedo e Souza Etapas Auto-Avaliação 2ª Etapa: Desenvolvimento a.Ações e levantamento de dados e informações; 1.Ensino de Graduação – pesquisa direta; 2.Pós-Graduação – reuniões e informações Pró-Reitoria; 3.Pesquisa – reuniões e informações Pró-Reitoria; 4.Extensão – reuniões e informações Pró-Reitoria; 5.Gestão - pesquisa direta; 6.CTI - pesquisa direta; 7.HU - pesquisa direta; 8.Biblioteca - pesquisa direta; 6 Prof. Roní de Azevedo e Souza Primeiros Passos Resgatar e analisar os processos de avaliação até então ocorridos; Manter processos em curso (Avaliação do Docentes pelos Discentes e Sistema de Avaliação de Desempenho dos Servidores); Utilizar os exemplos válidos (Pesquisa de Satisfação dos Alunos da Eng. Civil com o Curso) adequando-os à realidade; Cotejar e adequar às dez dimensões do SINAES; Construir instrumentos de pesquisa. 7 Prof. Roní de Azevedo e Souza O Que Foi Mantido Avaliação dos Docentes pelos Discentes Pesquisa anual do desempenho dos docentes, a partir de um instrumento de pesquisa com oito questões, onde cada discente pontua cada docente em cada disciplina a ele oferecida. Sistema de Avaliação de Desempenho dos Servidores Avaliação anual do desempenho dos Servidores Técnicos Administrativos em Educação, a partir de questionário eletrônico preenchido pelo servidor e pela chefia imediata, sendo os resultados discutidos e 8 ajustados por ambos. Prof. Roní de Azevedo e Souza AUTO-AVALIAÇÃO INSTITUCIONAL Pró-Reitorias Dados e Informações Institucionais Pesquisa com os Técnicos em Educação Seminários de Auto-Avaliação dos Cursos COMCUR’S Pesquisa com os Docentes Avaliação de Desempenho de Servidores Satisfação Servidores do HU Satisfação Servidores do NID 9 Congresso de Auto-Avaliação Institucional S I N A E S Reuniões com Departamentos e Unidades Plano Institucional Projeto Político Pedagógico Prof. Roní de Azevedo e Souza Auto-Avaliação do Ensino de Graduação Dilemas e soluções adotadas Análise Qualitativa ou quantitativa? Meio eletrônico ou papel? Questionário com máximo de 40 questões; Via papel aplicado pelos cursos com questões objetivas com possibilidade de manifestação livre no verso; Análise qualitativa feita pelas Comissões de Curso e digitação pela SAI; Eng. Civil 2002/01, Pedagogia 2001; Adaptação do questionário aos SINAES; Amostra Piloto – Biblioteconomia, testado e validado; 10 Prof. Roní de Azevedo e Souza Auto-Avaliação do Ensino de Graduação Metodologia: o Análise de Componentes Principais (ACP), técnica multivariada que permite identificar relações subjacentes entre as várias variáveis (questões do instrumento) e determinar se a informação pode ser condensada ou resumida em um conjunto menor de fatores ou componentes. Resulta em um novo conjunto de variáveis denominadas Componentes Principais, onde cada componente principal representa um conjunto de variáveis inter-relacionadas que identificam os padrões existentes nos dados. 11 Prof. Roní de Azevedo e Souza Auto-Avaliação do Ensino de Graduação Metodologia: o Discurso do Sujeito Coletivo (Curso), consiste no agrupamento das expressões mais relevantes dos discursos individuais a partir do estabelecimento de categorias chamadas de idéias centrais que facilitam a associação das falas, com o objetivo de construir um discurso coletivizado o Utilizada para análise das manifestações feitas livremente, no verso dos instrumentos de pesquisa. 12 Prof. Roní de Azevedo e Souza Auto-Avaliação do Ensino de Graduação Retorno Obtido enviados 5.937 questionários aos alunos da graduação, retornando 3.178 questionários, equivalendo a 53,5% do total. manifestações discursivas pelos discentes em 1.453 questionários, equivalendo a 45,7% do número de questionários que retornaram; docentes retornaram 425 questionários referentes à avaliação dos mesmos em relação aos cursos onde atuam; Destes, 140 registraram manifestações discursivas 33 %. 13 Prof. Roní de Azevedo e Souza Auto-Avaliação do Ensino de Graduação QUESTIONÁRIO AOS DISCENTES DE GRADUAÇÃO Instruções Gerais (Leia atentamente): Atribua uma nota entre zero e dez quanto ao nível de concordância para cada uma das afirmativas abaixo. Caso não queira ou não possa opinar a respeito de determinado assunto, deixe o espaço correspondente à nota em branco. Discordo Totalmente = 0 1 2 3 4 5 6 7 8 9 10 = Concordo Totalmente I - QUANTO AOS PROFESSORES 14 NOTA 1 Possuem domínio dos assuntos tratados. 7,7 2 Relacionam o conteúdo teórico apresentado com a prática. 6,7 3 Possuem habilidade em despertar o interesse dos estudantes pela disciplina. 6,1 4 Apresentam clareza na exposição dos temas abordados. 7,0 5 Demonstram satisfação em ensinar. 7,1 6 Têm interesse pelo aprendizado dos estudantes. 6,8 7 Possuem disposição ao diálogo, respeitando pontos de vista contrários. 7,1 8 Apresentam disposição para atender aos estudantes fora dos horários das aulas. 7,7 9 Dispensam aos estudantes tratamento cordial e respeitoso. 7,8 10 Há incentivo ao uso dos livros e periódicos disponíveis. 7,3 11 Elaboram avaliações compatíveis com o conteúdo desenvolvido. 7,3 12 Promovem ações que ajudam na formação dos estudantes (atitude, normas valores). 6,8 13 São assíduos (não faltam às aulas). 8,1 14 Cumprem os horários de início e término das aulas. 7,6 15 Dê uma nota geral entre 0 (zero) e 10 (dez) para os PROFESSORES do curso. Prof. Roní de Azevedo e 7,4 Souza Auto-Avaliação do Ensino de Graduação II - QUANTO ÀS DISCIPLINAS 15 NOTA 16 Há clareza quanto à utilidade das disciplinas para a capacitação profissional. 6,9 17 Há integração entre teoria e prática. 6,4 18 A relação entre a carga horária teórica e prática é adequada. 6,0 19 Há integração entre as disciplinas do curso. 6,3 20 A bibliografia utilizada nas disciplinas é de boa qualidade. 7,6 21 Dê uma nota geral entre 0 (zero) e 10 (dez) para as DISCIPLINAS do curso. 7,2 Prof. Roní de Azevedo e Souza Auto-Avaliação do Ensino de Graduação III - QUANTO À INFRA-ESTRUTURA DISPONÍVEL 22 Os livros disponíveis na biblioteca atendem às necessidades das disciplinas. 5,8 23 Os periódicos existentes na biblioteca atendem às necessidades das disciplinas. 5,8 24 A biblioteca conta com espaço físico adequado para estudo e consulta. 7,7 25 As salas de aula são salubres (boa iluminação, conforto térmico e acústico). 6,9 26 As cadeiras das salas de aula são confortáveis. 5,4 27 As dependências em geral apresentam níveis adequados de limpeza e conservação. 7,9 28 Os equipamentos utilizados são compatíveis com as necessidades do curso. 6,5 29 Os equipamentos disponíveis são em quantidade adequada à demanda. 5,6 30 A alimentação oferecida nas lancherias e restaurantes é de boa qualidade. 6,6 31 16 NOTA As condições de segurança no campus (vias de acesso, salas de aula, laboratórios, gabinetes etc.) são satisfatórias. 6,9 32 Os horários dos ônibus atendem às necessidades dos estudantes. 4,8 33 Dê uma nota geral entre 0 (zero) e 10 (dez) para a INFRA-ESTRUTURA 6,7 Prof. Roní de Azevedo e Souza Auto-Avaliação do Ensino de Graduação IV - QUANTO AOS ESTUDANTES NOTA 34 Os estudantes apresentam interesse pelo processo ensino aprendizagem. 7,0 35 O relacionamento entre os colegas é bom. 7,7 36 O nível de preparo dos colegas da turma é adequado às necessidades do curso. 7,0 37 38 Os estudantes utilizam os canais institucionais para apresentação de suas demandas e sugestões. Dê uma nota geral entre 0 (zero) e 10 (dez) para os ESTUDANTES do seu curso. V – AVALIAÇÃO GERAL DO CURSO 39 5,8 7,2 NOTA Dê uma nota geral entre 0 (zero) e 10 (dez) para o seu CURSO. 7,4 Escreva aqui no verso suas considerações adicionais: 17 Prof. Roní de Azevedo e Souza Auto-Avaliação do Ensino de Graduação Resultados Obtidos Componentes Principais e Proporções de Variações Explicadas. 18 Componente Principal Proporção Total Proporção Acumulada 1 14,4 14,4 2 12,8 27,2 3 10,1 37,3 4 7,40 44,7 5 7,20 51,9 6 5,10 57,0 7 5,00 62,0 Prof. Roní de Azevedo e Souza Resultado da primeira componente principal 14,4 % de variação explicada Nº Carga Nota 0,74 7,1 06 Têm interesse pelo aprendizado dos estudantes. 0,68 6,8 05 Demonstram satisfação em ensinar. 0,68 7,1 07 1ª Componente Principal Possuem disposição ao diálogo, respeitando pontos de vista contrários. 08 Apresentam disposição para atender aos estudantes fora dos horários das aulas. 0,66 7,7 09 Dispensam aos estudantes tratamento cordial e respeitoso. 0,65 7,8 11 Elaboram avaliações compatíveis com o conteúdo desenvolvido. 0,62 7,3 0,61 7,0 04 Apresentam clareza na exposição dos temas abordados. 19 12 Promovem ações que ajudam na formação dos estudantes (atitude, normas e valores). 0,54 6,8 03 Possuem habilidade em despertar o interesse dos estudantes pela disciplina. 0,50 6,1 Prof. Roní de Azevedo e Souza Resultado da segunda componente principal 12,8% de variação explicada Nº 2ª Componente Principal 17 Há integração entre teoria e prática. 02 18 16 03 Relacionam o conteúdo teórico apresentado com a prática. A relação entre a carga horária teórica e prática é adequada. Há clareza quanto à utilidade das disciplinas para a capacitação profissional. Possuem habilidade em despertar o interesse dos estudantes pela disciplina. 19 Há integração entre as disciplinas do curso. 20 Carga Nota 0,82 6,4 0,74 6,7 0,73 6,0 0,66 6,9 0,59 6,1 0,55 6,3 Prof. Roní de Azevedo e Souza Resultado da terceira componente principal 10,1 % de variação explicada. Nº 25 27 26 28 29 21 3ª Componente Principal As salas de aula são salubres (boa iluminação, conforto térmico e acústico). As dependências em geral apresentam níveis adequados de limpeza e conservação. As cadeiras das salas de aula são confortáveis. Os equipamentos utilizados são compatíveis com as necessidades do curso. Os equipamentos disponíveis são em quantidade adequada à demanda. Carga Nota 0,79 6,9 0,79 7,9 0,72 5,4 0,66 6,5 0,60 5,6 Prof. Roní de Azevedo e Souza Seminários das Comissões de Curso Participação de 24 das 25 Comissões de Curso. Boa participação dos alunos e regular dos docentes. Níveis diferentes de demandas: unidades; instituição e mantenedor – MEC. Reação imediata quanto às demandas cuja solução era possível pela ComCur. Visibilidade de demandas comuns da alçada da administração da instituição. Maior peso para as demandas de responsabilidade do MEC. 22 Prof. Roní de Azevedo e Souza Seminários das Comissões de Curso Pontos Positivos – Potencialidades A FURG possui boa formação acadêmica. Boa qualificação dos professores. Professores são responsáveis, assíduos e dão atenção aos alunos. As condições de limpeza e conservação das instalações são boas. A biblioteca dispõe de espaço para consulta e estudo. 23 Prof. Roní de Azevedo e Souza Seminários das Comissões de Curso Pontos Negativos – Fragilidades Diversos cursos necessitam reformulação curricular. Excesso de professores substitutos, queixas pontuais quanto a docentes (avaliação do docente pelo discente). O acervo bibliográfico é insuficiente e desatualizado, na opinião da maioria dos cursos. O corpo discente não se utiliza dos canais institucionais, dificultando a comunicação com a instituição. Problemas de infra-estrutura, como transporte, xerox, RU, laboratórios, salas de aula e segurança pessoal. 24 Prof. Roní de Azevedo e Souza Seminários das Comissões de Curso Ações Sugeridas: Revisões curriculares, elaboração de Projetos Pedagógicos, valorização e divulgação dos cursos. Capacitação e atualização didático-pedagógica e a formação continuada dos docentes em programas permanentes. Atualização e ampliação do acervo (área física) nas diversas bibliotecas da FURG. Atualizar, ampliar e equipar laboratórios de diversos cursos, bem como dos equipamentos de informática. 25 Prof. Roní de Azevedo e Souza Seminários das Comissões de Curso Ações Sugeridas: Melhorar o conforto dos alunos, cadeiras, cortinas, ventiladores, telas, iluminação etc. Fiscalização junto aos estabelecimentos que fornecem alimentação aos alunos no campi da FURG. Recomposição dos quadros de docentes efetivos e técnicos. Incentivar a participação dos discentes nos órgãos colegiados. 26 Prof. Roní de Azevedo e Souza Pesquisa de Satisfação Institucional Servidores e Docentes Pesquisa de satisfação de cunho institucional e de gestão – Dimensões SINAES, aplicada na totalidade dos servidores técnico-administrativos em educação e docentes. Instrumento com cerca de 40 questões remetidos e devolvidos por malote a cada servidor, em paralelo divulgação intensiva em todos os meios de comunicação interna disponíveis, página eletrônica, reuniões de conselhos, departamentos, comissões de cursos, jornais internos, cartazes, folders, calendários, faixas, banners, 27 rádio e FURG-TV. Prof. Roní de Azevedo e Souza Pesquisa de Satisfação Institucional Servidores e Docentes Retorno Pesquisa Quadro geral de resposta dos docentes Questionários Questionários Questionários Manifestações Manifestações Enviados Recebidos Recebidos (%) Discursivas Discursivas (%) Total 614 280 45,6 92 32,9 Quadro geral de resposta dos técnicos-administrativos em educação Questionários Manifestações Questionários Questionários Manifestações Departamento Recebidos Discursivas Enviados Recebidos Discursivas (%) (%) 28 Carreiros Cidade Saúde 407 111 505 178 102 266 43,7 91,9 52,7 77 31 150 42,8 30,4 56,2 Total 1023 546 53,4 258 47,0 Prof. Roní de Azevedo e Souza Congresso Institucional de Auto-Avaliação Objetivo: apresentar à comunidade interna e externa os resultados das atividades previstas no Projeto de AutoAvaliação Institucional. Nos dias 6 e 7 junho de 2006 Reitoria da FURG; INEP; CPA da FURG; Experiências da UFRGS e UNISC; Apresentação de todas atividades desenvolvidas; CTI, HU e NID; PROGRAD; PROPLAN; PROACE; PROPESP; PROAD. 29 Prof. Roní de Azevedo e Souza Considerações Finais Institucionalização do processo Auto-Avaliação; Apoio incondicional da Reitoria; Processo participativo, por adesão; Mostrar a conseqüência do processo; Revisões do PDI e PPP a partir da AutoAvaliação; Apoio financeiro do INEP; Caminho sem volta, não esmorecer ! 30 Prof. Roní de Azevedo e Souza MUITO OBRIGADO! Prof. Roní de Azevedo e Souza www.furg.br/avalia [email protected] 31