ENADE DEAES/INEP/MEC Exame NAcional do Desempenho dos Estudantes PRINCIPAIS INSTRUMENTOS DO SINAES AUTO-AVALIAÇÃO ORIENTADA AVALIAÇÃO DA INSTITUIÇÃO AVALIAÇÃO DOS CURSOS DE GRADUAÇÃO ENADE ENADE – EXAME NACIONAL DO DESEMPENHO DOS ESTUDANTES Verifica: COMPETÊNCIAS E HABILIDADES BÁSICAS DAS ÁREAS; CONHECIMENTO SOBRE CONTEÚDOS BÁSICOS E PROFISSIONALIZANTES QUESTÕES TRANSDISCIPLINARES PROCEDIMENTOS DO ENADE 1. 2. 3. 4. 5. APLICAÇÃO TRIENAL POR GRUPOS DE ÁREAS; APLICAÇÃO POR AMOSTRAGEM; APLICAÇÃO NO FINAL DO PRIMEIRO E DO ÚLTIMO ANO DO CURSO; PROVA QUE PERMITA COMPARABILIDADE; CONCEITOS EM CINCO NÍVEIS COM PADRÃO MÍNIMO. O ENADE E O SINAES 1. ENADE É UM COMPONENTE DO SINAES, COM APLICAÇÃO TRIENAL PARA GRUPOS DE ÁREAS; 2. O FORMATO DO ENADE É MAIS ADEQUADO À NOVA FILOSOFIA; OBJETIVO ESPECÍFICO DO SINAES Avaliar instituições, cursos e o desempenho dos estudantes. ENADE O que se busca aferir através do ENADE? Parte I (10 questões) Conhecimento tácito – Base “oculta” que subsidia a ação inteligente (Polanyi, 1967; Schön, 1983). Habilidade prática – Desenvolvimento do conhecimento que é útil para se atingir objetivos valorizados pelo sujeito ou pela cultura, mas cuja transmissão geralmente não é mantida pelo meioambiente. É o conhecimento que o indivíduo necessita para ser bem sucedido, mas que não é ensinado e, freqüentemente, não é sequer verbalizado (Sternberg, 1998). O que se busca aferir através do ENADE? Parte II (30 questões) As questões tratam dos conteúdos específicos. Busca verificar o domínio da área, aferindo o potencial de aprendizagem dos ingressantes e as competências que os concluintes desenvolveram ao longo da trajetória na IES. Instrumentos relativos ao ENADE 1. Questionário do estudante 2. Questionário dos coordenadores 3. Prova 4. Questões de avaliação de percepção da prova. SELEÇÃO DA AMOSTRA Amostragem probabilística (ou aleatória) onde todos os elementos da população têm probabilidade conhecida e não nula de pertencer à amostra. Quando um curso tem um número baixo de estudantes todos são incluídos. Amostra Instituição envia a listagem dos ingressantes e dos concluintes. Ingressantes: Estudantes que tiverem cumprido, até a data inicial do período de inscrição, 7 a 22% (inclusive) da carga didática mínima do currículo do curso da IES. Concluintes:Estudantes que tiverem cumprido, até a data inicial do período de inscrição pelo menos 80% da carga mínima do currículo do curso da IES. Vantagem da amostragem Permite que em um prazo menor de tempo um número maior de cursos seja submetido ao exame. Construção da prova 1. Entidades indicam os especialistas da área. 2. São formadas as Comissões Assessoras de Avaliação para cada uma das áreas avaliadas com a tarefa de: a) Definir os objetivos da prova da área tendo como referência o perfil do profissional; b) Definir as diretrizes da prova de acordo com as habilidades e competências constantes das Diretrizes Curriculares Nacionais; c) Definir os conteúdos disciplinares da área que devem ser contemplados na prova; 3. Definir o formato da prova: número total de questões, distribuição de peso, composição das questões, número de questões por nível de dificuldade. 4. Os resultados de cada Comissão são enviados para a agência vencedora da licitação, para o preparo da prova, cujas questões são elaboradas por especialistas da área contratados por esta agência, com base nas diretrizes definidas pelas Comissões Assessoras do DEAES/INEP. 5. Dado o sigilo, apenas uma pessoa, designada pela DEAES/INEP tem acesso versão final da prova. FOCO DO ENADE Desempenho do estudante. AVALIAÇÃO DINÂMICA DO POTENCIAL DE DOMÍNIO DA ÁREA Projeto Político Pedagógico ENEM Vestibular 1º ENADE Potencial de Aprendizagem (ingressante) (conjunto de conceitos e procedimentos considerados essenciais para o domínio da área Missão da IES Crenças, atitudes e valores Conjunto de avaliações e atividades desenvolvidas ao longo do curso 2º ENADE Competências adquiridas a partir do potencial inicial (expert – profissional) (domínio do conjunto de conceitos e procedimentos considerados centrais para o domínio da área) Mudança na abordagem da avaliação Avaliação estática Avaliação dinâmica MODELOS DO ENADE EXAME Modelo de avaliação dinâmica ESTATÍSTICO Modelo estatístico de análise de mudança COMPETÊNCIA A constatação da competência na academia pressupõe um conjunto de critérios referenciados no perfil do aluno que se quer formar, descrito no projeto pedagógico do estabelecimento de ensino. Esses critérios formam a base para o julgamento das competências dos alunos, analisadas em função de seu desempenho acadêmico. EXAME NACIONAL DE DESEMPENHO DOS ESTUDANTES Centrado na mudança do aprendiz. A palavra chave é “modificabilidade”. INTENÇÃO Aumentar o entendimento a respeito do estudante inserido em um contexto educacional específico. Verificar se ocorrem mudanças que possam ser atribuídas à trajetória do estudante na IES (valor agregado). FORMATO DO ENADE Análise de mudança Situação de teste – intervenção – reteste Avalia o processo e não o produto. O estado vai prover dois exames oficiais e as IES podem complementar com avaliações intermediárias nos mesmos moldes do ENADE. Implicação do modelo Como o modelo antigo era aplicado uma única vez ao final do curso, não permitia correção e superação das dificuldades do aluno avaliado Através dos resultados obtidos pelos concluintes, pelos ingressantes, do questionário dos alunos e dos coordenadores é possível fazer correção e superação das dificuldades particulares do aluno e do curso. O QUE É AVALIADO? O antigo modelo enfatizava a avaliação em “o que” e “quanto” o aluno aprendeu, enquanto o ENADE busca o entendimento sobre “como” o aluno trabalha o conteúdo aprendido. As questões do exame são elaboradas de forma a evidenciar o que o aluno é capaz de fazer com o conteúdo aprendido. Vantagem do modelo de avaliação dinâmica Diagnóstico. Permite correção e superação das dificuldades. MODELO ESTATÍSTICO DE ANÁLISE Será usado o modelo multidimensional para aprendizagem e mudança. O antigo sistema (ENC) usava o o modelo baseado na Teoria clássica das medidas e o uso de procedimentos canônicos. SIGNIFICADO DO ENADE É um componente do SINAES, sem valor quando visto isoladamente. A análise efetiva da mudança só ocorrerá quando os estudantes que realizaram o ENADE2004 como ingressantes, forem selecionados novamente e realizarem a prova como concluintes. Teorias de apoio ao modelo de avaliação dinâmica Teoria da modificação cognitiva (Feuerstein e outros). Avaliação do potencial de aprendizagem (Budoff e outros). Avaliação dinâmica do efeito acadêmico (Sternberg e Grigorenko) (teoria triádica de inteligência) (inteligência para o sucesso). Abordagem estrutural do domínio específico do conhecimento. Análise de mudança (Embretson). Modelo multidimensional de Rasch para análise de aprendizagem e mudança. O que pode ser melhorado? As IES podem aplicar dois ou três exames adicionais seguindo o mesmo padrão do ENADE, formulando questões a partir dos temas considerados essenciais pelos especialistas. Assim, poderá observar em intervalos mais curtos, as mudanças que ocorrem no curso e com cada estudante em particular. A cada resultado, visto em conjunto com o desempenho em cada disciplina, será possível medir a mudança. Estudos longitudinais Ao longo do tempo poderão ser comparados os progressos individuais e coletivos, agrupando estudantes de uma mesma IES, do estado, da região e o total de alunos, ou ainda de acordo com outras variáveis que se queira estudar. O SINAES possibilita que diferentes momentos sejam focalizados. Podemos imaginar uma câmera cujo zoom vai se fechando até completar a análise e depois vai se ampliando e incluindo todos os componentes do sistema. Conjunto das IES Instituição Curso Aluno