TÉCNICAS PARA ELABORAÇÃO DE ITENS DE MÚLTIPLA ESCOLHA Angela Corrêa da silva A elaboração de itens requer que se considerem os seguintes procedimentos: - tipo de item adequado ao objetivo. - Técnica de elaboração; - Estimativa de tempo para resolução de teste; - Estimativa de dificuldade; - impossibilidade de controvérsia; - relevância e especificidade do conteúdo; Tipo de Testes: 1. Complementação simples O caput deste item requer uma sentença incompleta ou uma pergunta. As alternativas completam o suporte, sendo que uma delas o completa corretamente. As alternativas devem apresentar-se plausíveis. Este teste é bastante difundido, por ser de simples elaboração e aplicável a todas as áreas do conhecimento. Permite medir, sobretudo, as categorias menos complexas da taxionomia de Bloom ( conhecimento, compreensão , aplicação). Quanto às novas formas de abordagem de conteúdos este teste dificulta, pois mede principalmente conteúdo conceitual. - Precauções: alternativas plausíveis; alternativas não podem ser demasiadamente longas; as alternativas devem ser de extensão equivalente; deve haver uma perfeita harmonia entre o caput e as alternativas; devem evitar chaves reveladoras ( gramaticais, determinadores específicos, extensão da alternativa); deve ser evitado o uso de “ nenhuma das anteriores”, ou “ todas as alternativas são verdadeiras”; as alternativas não devem apresentar relação entre si. O uso da negação é válido quando se quer do aluno a exceção, ou que seja capaz de reconhecer erros. O uso de “todas as alternativas são verdadeiras” não é válido, pois permite que o examinando responda com conhecimento parcial. 2. Lacunas É um tipo de teste em que na sentença do caput uma ou mais partes são omitidas. Cada alternativa preenche as partes a serem preenchidas. As alternativas devem ser plausíveis, sendo uma delas a correta. 1 Este item se propõe a medir conhecimento de princípios, generalizações, fatos específicos, vocabulário, uso correto de termos, resolução de problemas simples. É muito utilizado nas áreas de Línguas e Matemática. - Precauções: o tema tratado deve ser relevante; a linguagem deve ser precisa e correta; o enunciado deve estar na ordem direta; se o problema é numérico, a unidade da resposta, caso exista, deve ser apresentada; as partes omitidas devem ser relevantes; as lacunas devem estar no meio ou no final; o número de lacunas não deve prejudicar o sentido da frase; a concordância gramatical não deve induzir a resposta. 3. Associação Existem várias formas de item de associação. Uma delas apresenta duas colunas que se relacionam em função de um determinado conteúdo. Este tipo de item presta-se especialmente para avaliar aspectos específicos de um campo de conhecimento e aplicar conhecimentos em situações concretas. AcontecimentosFatos histórico Definições Regras ConceitosTítulo de obras Uso de máquinas Plantas e animais Princípios Desenhos, quadros, gráficoElementos químicos - personagens datas vocabulários exemplos símbolos autores máquinas classificação ilustrações normas, conceitos fórmulas Outra forma de item de associação é aquela em que as alternativas são relacionadas a várias afirmações, que constituem o suporte de vários itens. - Precauções: as colunas não devem apresentar variação significativa na extensão; a correspondência entre as colunas pode ser evidenciada uma ou duas vezes , ou inexistir; o tema deve ser abordado de forma homogênea, considerando-se o nível de conhecimento do examinado; os enunciados das colunas devem ser breves, sendo um mais sucinto do que o outro; 2 - os índice reveladores ( concordância gramatical ou intromissão de temas diversificados) devem ser evitados; as instruções de associação devem ser claras; a ordem de uma das colunas deve obedecer a um critério lógico, por exemplo ordem alfabética quando se tratar de nomes, cronológica quando se tratar de datas; o conteúdo específico em função do qual serão associadas as colunas deve estar claro no caput do item. 4. Complementação múltipla Consiste na apresentação de três ou quatro proposições relativas a um conteúdo específico, expresso no caput inicial, entre as quais o examinador deverá distinguir as verdadeiras das falsas. A distinção é operacionalizada através de um código indicado nas alternativas do item. Permite medir, sobretudo, o nível de compreensão, embora possa medir também outros, como o de análise. - Precauções: evitar alternativas que sejam mutuamente exclusivas; cada enunciado deve incluir somente uma idéia central significativa; as sentenças devem ser curtas e de estrutura simples; os enunciados negativos, devem ser evitados; a proposição correta pretendida deve ser óbvia apenas para aqueles de bom domínio da matéria; as proposições verdadeiras não devem ser tornadas falsas pela inserção da palavra não; a proposição falsa deve atrair aqueles que não tem um bom domínio do conteúdo; as palavras “sempre”, “nunca”, “todo”, “nenhum, “somente”, que tendem a ser falsas devem ser evitadas; as palavras “usualmente”, “acaso”, “às vezes”, que tendem a ser verdadeiras devem ser evitadas. 5. Asserção – Razão Também chamado de Análise de Relações, este tipo de item consta de duas proposições ligadas pela palavra porque, sendo a segunda a razão da primeira. O aluno deve verificar , primeiro, a veracidade de cada proposição e, em seguida, se entre elas existe relação de causa . Serve para medir níveis de comportamentos mais complexos como as habilidades intelectuais, especialmente análise de relações. - Precauções: As duas proposições devem ser relativas ao mesmo conteúdo específico; A relação causal pode existir ou não entre as duas proposições; As duas proposições devem ser redigidas de modo que o aluno , possa analisar cada uma separadamente; 3 - A apresentação gráfica deve separar nitidamente as duas proposições; As instruções e as alternativas dever ser claramente definidas; O número de itens não deve ser igual ao número de alternativas ; Outras precauções do item de complementação múltipla dever ser observadas. 6. Interpretação Este tipo de item tem por base textos, tabelas, mapas, gráficos, ilustrações, diagramas. A apresentação das alternativas pode ser de várias maneiras, dependendo do grau de exigência na interpretação do material introdutório. Os itens de interpretação podem exigir: - realização de inferências e extrapolações; - diagnósticos de falhas; - prognósticos de conseqüências; - distinção de generalidade e particularidades; - formulação de conclusões válidas; - identificação de explicações; - apresentação de críticas; - identificação de princípios subjacentes. Esses itens são , portanto, adequados para a verificação de comportamentos complexos, como análise, síntese, e avaliação. Sua eficácia depende do cuidado na seleção do material introdutório e da habilidade na preparação das alternativas. Precauções: - o material selecionado deve ser coerente com o objetivo proposto; - a redação deve ser clara e objetiva a fim de que sua complexidade não interfira na medida; - os textos selecionados devem ser originados de livros e revistas adequados ao nível dos alunos. Não devem ser extraídos de livros didáticos. Podem ser especialmente redigidos para a composição do item; - o material deve ser novo para o estudante. - A forma do material deve ser familiar ao estudante; - Quando o material introdutório inclui ilustrações, estas devem estar claras e em tamanho adequado; - O tamanho do material introdutório e o número de itens relacionados a esse material devem ser proporcionais; - Na elaboração das alternativas são aplicáveis todas as regras relativas à elaboração de itens de complementação simples. 7. Pictóricos No item pictórico as ilustrações e gráficos são usados como instrumento de comunicação da idéia. 4 A ilustração do item deve ser pertinente ao conteúdo tratado e necessária à compreensão do leitor. A construção do item segue os demais tipos de múltipla escolha ( exceto asserção-razão) e as respectivas precauções. TÉCNICAS PARA ELABORAÇÃO DE ITENS DE MÚLTIPLA ESCOLHA A elaboração de itens de múltipla escolha deve seguir o seguinte critério Relevância do conteúdo; Clareza na redação da instrução, do suporte e das alternativas; Inclusão apenas de elementos relevantes; Enunciados que não contenham dicas verbais; Enunciados deve ser apresentado de maneira positiva. Quando a questão exigir a negativa , que seja grifado, em letras maiúsculas e em negrito; 6. nível de dificuldade adequado; 7. ausência de elementos que favoreçam o acerto ao acaso ou a exclusão; 8. Não utilizar termo tais como, sempre, nunca, todo(a), provavelmente, totalmente, absolutamente, completamente, somente, às vezes; 9. Não elaborar testes com pegadinhas Ex. inversão simples de palavras e grades seqüenciais; este tipo de questão induz ao erro; 10. Linguagem adequada à série em que se encontra o aluno; 11. Pontuação correta – se o enunciado for uma frase a ser completada, devem começar com letra minúscula e terminar com ponto final. Se o enunciado for uma pergunta a alternativa deve começar com letra maiúscula e terminar com ponto final. Quando o enunciado for uma pergunta e as alternativas forem construídas com palavras ou frases incompletas, a alternativa deve começar com letra maiúscula e não apresentar pontuação final; 12. Não elaborar alternativas que provoquem controvérsia; 13. Não utilizar “nenhuma das anteriores” ou “ todas as anteriores” 14. Não elaborar alternativas em com inversões artificiais, ou armadilhas verbais; 15. Não elaborar alternativas absurdas ou descontextualizadas; 16. Não elaborar alternativas com itens interligados; os itens devem ser independentes entre si; 17. As alternativas devem incluir uma única resposta correta e os distratores devem ser plausíveis em relação à primeira; 18. As alternativas devem ser organizadas de maneira lógica , ou seja, em ordem numérica, alfabética ou cronológica; 19. Não incluir nas alternativas detalhes irrelevantes ou absurdos; 20. As alternativas devem ser mutuamente excludentes;( isso assegura apenas uma correta); 21. Os distratores devem ser plausíveis para evitar que o aluno acerte por exclusão; 1. 2. 3. 4. 5. 5 22. As alternativas devem ter aproximadamente o mesmo tamanho, para evitar a identificação da correta ou incorreta pela observação de seu tamanho; 23. Não repetir informações nas alternativas. ASPECTOS A SEREM CONSIDERADOS PELA REVISÃO TÉCNICA O enunciado está claro e de fácil compreensão? Observar se não há repetição de informações nas alternativas. Observar se há afirmações preconceituosas referentes à etnia, religião ou gênero. O vocabulário utilizado na elaboração é conhecido nacionalmente? Observar se o item está formulado de maneira positiva. Observar se há incorreções gramaticais . Observar se está redigido dentro da norma culta da língua portuguesa. Observar se o item contém termos como : nunca, sempre, todos, absolutamente ou completamente. 9. Observar se os distratores são plausíveis para alunos com pouco conteúdo. 10. Observar se as alternativas seguem uma seqüência lógica. 11. Observar se o item contém alguma dica que induz à resposta. 12. Observar se não houve inclusão de alternativas como “ nenhuma das anteriores” 13. Observar se os textos contém as bibliografia completa, seguindo as normas da ABNT. 14. O tipo de item está adequado para o objetivo a que se propõe? 15. O grau de dificuldade é compatível com o conhecimento do aluno? 16. O item apresenta erros conceituais? 1. 2. 3. 4. 5. 6. 7. 8. CARACTERÍSTICAS DE UMA BOA PROVA Segundo R. L. Ebel, em Essentials of Education Measurement, os dez fatores a serem considerados no julgamento de uma boa prova são: A) Relevância – os tipos de questões são criteriosamente selecionados em relação aos objetivos. B) Equilíbrio – as várias dimensões do rendimento esperado são contempladas proporcionalmente nas questões. C) Eficiência – leva em consideração o tempo da Banca para a elaboração e a correção e o tempo disponível ao aluno para respondê-la. D) Objetividade – as questões são bastante claras e as respostas bem definidas , de tal modo que qualquer especialista que as resolvesse obteria uma pontuação quase total ou total. E) Especificidade – as questões são específicas da área , de modo que um principiante, até mesmo inteligente, que não domine o assunto obteria uma pontuação próxima do acerto ao acaso ou não conseguiria respondê-las apenas pelo domínio em expressão escrita e um pouco de conhecimentos gerais. F) Dificuldade – a prova não é nem muito difícil, nem muito fácil para o conjunto dos candidatos. 6 G) Discriminação – cada questão discrimina os candidatos de rendimento mais alto e mais baixo. A prova como um todo resulta numa ampla distribuição de escores. H) Fidedignidade – a prova teria o mesmo resultado, se aplicado um outro instrumento de medida igualmente válido. I) Justiça – a prova é elaborada e aplicada de modo que todos os candidatos tenham a mesma chance de demonstrar seu rendimento real. J) Tempo ideal – a extensão da prova é adequada ao tempo disponível, de maneira que a nota dos candidatos não seja prejudicada pela velocidade em respondê-la. 7