ENADE: importância na avaliação de cursos e na trajetória acadêmica dos alunos Marion Creutzberg Coordenadora de Avaliação / PROGRAD / PUCRS Avaliação na Educação Superior Panorama mundial - avaliações sistemáticas e com abrangência nacional, são relativamente recentes. Tendência internacional - regulação e controle das instituições - responsabilização com a qualidade - orientação para escolhas dos estudantes - equivalência de títulos / diplomas (Verhine, 2010) Avaliação na Educação Superior Panorama brasileiro - década de 70: pós-graduação – CAPES; 80: primeiras propostas / vinculadas à regulação; 90: Programa de Avaliação Institucional das Universidades Brasileiras / experiências e propostas de avaliação formativa LDB/96: Exame Nacional de Cursos, Avaliação das Condições de Ensino, Avaliação de C. Universitários 2004: SINAES (INEP, 2009) SINAES Sistema Nacional de Avaliação do Ensino Superior Lei n° 10.861 2004 Finalidades: - a melhoria da qualidade da educação superior -o aumento permanente da eficácia institucional e efetividade acadêmica e social Avaliação Institucional SINAES Avaliação externa Sistema Nacional de Avaliação do Ensino Superior Avaliação dos Cursos de Graduação ENADE Exame Nacional de Desempenho de Estudantes Lei n° 10.861 2004 Avaliação interna Autoavaliação Institucional ENC - Provão do MEC 1996 - 2003 Críticas: •viés “conteudista” •avaliação somente de concluintes (não captando a contribuição do curso na formação) •risco de uma unificação de currículo, dentre outras. Conceitos A-B-C-D-E ENADE 2004 - hoje • trienal • componente curricular obrigatório • conteúdos da prova de acordo com as diretrizes curriculares e formação geral • ingressantes e concluintes avaliados • resultados dos cursos são públicos • comparabilidade Conceitos 5-4-3-2-1 Depende da média, desvio, mínimo e máximo. ENADE 2004 2007 Área da Saúde - Enfermagem, Farmácia, Fisioterapia, Terapia Ocupacional, Nutrição, Biomedicina, Educação Física + Serviço Social + Ciências Agrárias ... 2005 2008 2006 2009 Arquitetura, Computação, Engenharias, Licenciaturas - Ciências Sociais, Filosofia, Pedagogia, Ciências Biológicas, Educação Física ... Administração, Contábeis, Economia, Direito, Psicologia, Comunicação Social ... 2010 ENADE Prova • • Formação Geral : 10 questões Componente Específico da área: 30 questões Questionário do estudante • • 54 questões A partir de 2010: on-line Questionário de percepção sobre a prova • 9 questões Questionário do coordenador • Respondido on-line após a prova ENADE: Conceito Enade - Nota dos Concluintes • A partir de 2008 – apenas alunos ‘concluintes’ • Indicador de qualidade do egresso • Nota Enade = 25% conhecimentos gerais + 75% conhecimentos específicos • Pelo menos 2 alunos concluintes dos Ingressantes ENADE: Nota Conceito Enade - Nota dos Ingressantes • Não considerados no conceito ENADE, mas no CPC • Indicador de qualidade do ingressante • Também é uma medida de qualidade do curso, na medida em que bons alunos devem escolher os melhores cursos • Nota dos ingressantes = 25% ‘conhecimentos gerais’ + 75% ‘conhecimentos específicos’ • Pelo menos 2 alunos ingressantes O Conceito IDD Indicador de Diferença entre os Desempenhos Observado e Esperado O perfil dos ingressantes nos cursos é desigual. As notas dos concluintes carregam essas desigualdades. Assim, as diferenças na saída não são explicadas apenas pelo que o curso agregou, mas também pelas diferenças pré-existentes. O Conceito IDD Calcula-se um valor esperado para os concluintes via regressão múltipla, considerando-se três informações dos ingressantes: Desempenho médio dos ingressantes; Proporção de estudantes cujos pai e/ou mãe têm nível superior de escolaridade; Razão concluintes/ingressantes. Conceito Preliminar de Curso Conceito Preliminar de Curso 40% Dados do Censo da Educação Superior Índice Geral de Cursos nota do ENADE Doutores: 20% Mestres: 5% Docentes em regime integral e parcial: 5% Questionário do estudante Infraestrutura: 5% Recursos didático-pedagógicos: 5% ENADE 30% 15% ingressantes 15% concluintes nota do IDD Avaliação Institucional 30% Conceito CAPES PósGraduação Avaliação dos Cursos de Graduação Avaliação in loco Comissão INEP Projeto Pedagógico Corpo Docente 1e2 5 3e4 Solicitação opcional Publicação de Portaria Solicitação obrigatórai Infraestrutura Conceito Preliminar de Curso ENADE 2007 FISIOTERAPIA E TERAPIA OCUPACIONAL: TÓPICOS PARA REFLEXÃO Por que o ENADE deve desencadear ações permanentes? 1. A análise e uso de resultados de avaliação interna e externa é um dos indicadores da avaliação externa de cursos de graduação e institucional. Reconhecimento de Curso Renovação de Reconhecimento 2. Os resultados do ENADE (a prova, a percepção sobre a prova, o questionário socioeconômico e o questionário do coordenador) permitem movimentos de autoavaliação e qualificação dos cursos. 3. A discussão e as ações permanentes contribuem para o desenvolvimento da cultura de avaliação como instrumento de gestão. Resultados públicos: www.inep.gov.br Dados restritos: acessados pelo Pesquisador Institucional (ou Procurador Institucional) - PI Relatórios de área: subsídios para a reflexão Disponível em www.inep.gov.br Resultados públicos: subsídios para a reflexão - Zootecnia Veterinária Terapia Ocupacional Tecnológicos Serviço Social Odontologia Ingressantes Nutrição Medicina Fonoaudiologia 80 Fisioterapia Farmácia Enfermagem Ed. Física Biomedicina Agronomia 100 Concluintes 60 40 20 Formação Geral – Média de Ingressantes e Concluintes (Comparável) - Componente Específico – Média de Ingressantes e Concluinte Zootecnia Veterinária Terapia Ocupacional Tecnológicos Serviço Social Odontologia Ingressantes Nutrição Medicina Fonoaudiologia 80 Fisioterapia Farmácia Enfermagem Ed. Física Biomedicina Agronomia 100 Concluintes 60 40 20 A prova A prova ENADE/2007 - Terapia Ocupacional Boicote no ENADE Boicote no ENADE* * O estudo considerou alunos que entregaram em branco ou colaram adesivos de protesto. MEC/INEP. Uma análise do boicote dos estudantes à avaliação do Ensino Superior no Brasil. Na Medida, ano 1, n.1, 2009. p. 5-9. Boicote no ENADE MEC/INEP. Uma análise do boicote dos estudantes à avaliação do Ensino Superior no Brasil. Na Medida, ano 1, n.1, 2009. p. 5-9. MEC/INEP. Uma análise do boicote dos estudantes à avaliação do Ensino Superior no Brasil. Na Medida, ano 1, n.1, 2009. p. 5-9. Boicote? Desconhecimento? Desafios para evidenciar, no desempenho dos alunos e nos indicadores advindos do ENADE, a qualidade dos cursos Corpo Docente • conhecimento do processo • conhecimento dos resultados da IES / do Curso • análise da prova •participação das discussões de reorientação de projeto pedagógico / estratégias de ensino com base nos resultados • revisão das disciplinas de sua responsabilidade www.pucrs.br/edipucrs • análise crítica do SINAES – mas com entendimento para valorizar o processo junto ao aluno • inclusão da discussão sobre avaliação – externa e interna na sala de aula • estímulo ao aluno dacouff.files.wordpress.com Corpo Discente como estimular? www.globalframe.com.br MEC e seu extenso conhecimento geográfico na distribuição dos alunos para a prova… Autor: [email protected] logicailogica.files.wordpress.com Implicações 1. A realização do ENADE é pré-requisito para colação de grau. Sem Enade = Sem diploma. 2. A Avaliação é trienal. Os conceitos ficam “carimbados” no curso por três anos. 3. A divulgação dos resultados do Enade alimenta inúmeras matérias produzidas pela imprensa. Todos saberão o conceito do curso. 4. Cada aluno recebe um Boletim de Desempenho próprio. Dá para mostrar para os outros o quanto a gente sabe 5. A Prova é aplicada simultaneamente em todo país. Provavelmente será a única oportunidade da vida para comparar o teu conhecimento com uma quantidade tão grande de pessoas. Implicações • Nos benefícios para estudantes: – 2008, cursos que obtiveram ENADE 1 e 2 – 2010, cursos que obtiverem CPC 1 e 2 • Alunos não podem concorrer à bolsa FIES • Cursos não podem oferecer bolsas adicionais do PROUNI Implicações • No mercado de trabalho • Na seleção de programas de pósgraduação • No reconhecimento social dos cursos Obs.: CAPES dá bolsas Stricto Sensu para os melhores do ENADE Neto W. .bp.blogspot.com Jornal UNOPAR blogdolabjor.files.wordpress.com Em vez de encarar o exame como uma punição (individual e coletiva), o aluno deveria entender sua participação como uma contribuição social, como uma das responsabilidades que compõem a cidadania. (Verhine, 2010) Coordenadoria de Avaliação [email protected] www.pucrs.br/enade