Exemplos de Procedimentos para Assegurar a Qualidade num Programa de Exames Os procedimentos indicados abaixo destinam-se a fazer parte das atividades regulares de um programa de exames como uma forma de garantir a qualidade e a confiança nos resultados. A sequência dos procedimentos corresponde ao típico ciclo de atividades de exame – do desenvolvimento do teste até ao uso dos resultados dos exames. A lista foi compilada após uma análise dos diferentes procedimentos utilizados para assegurar a qualidade nos programas de exames em todo o mundo; diz respeito a programas de exames públicos decisivos. Os procedimentos indicados a negrito são geralmente considerados “essenciais” (face a “seria bom que existissem”). Antes da administração do exame 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18. 19. 20. 21. 22. 23. 24. Conduzir um piloto ou fazer um teste no terreno das perguntas do exame Identificar e contratar auditores e monitores externos independentes para participarem nas diferentes fases do processo de desenvolvimento de exames Limitar o número de pessoas que trabalham no exame Limitar o número de pessoas com acesso ao material e documentos em fase de elaboração Obrigar os responsáveis pelo desenvolvimento de exames a assinarem um acordo de segurança Assegurar que os indivíduos envolvidos no desenvolvimento/redação de tópicos sejam diferentes daqueles que participam na seleção de tópicos para os exames ou na revisão do exame final Salvaguardar a identidade das pessoas envolvidas no desenvolvimento de exames Assegurar que os materiais de desenvolvimento de exames estão seguros, sendo o acesso aos materiais limitado às pessoas responsáveis pelo desenvolvimento de exames Assegurar que os computadores utilizados para desenvolver os exames dispõem de suficientes mecanismos de segurança Informar os funcionários, que estão a trabalhar no desenvolvimento de exames, sobre os procedimentos de segurança Utilizar versões alternativas de exames; reordenar as opções de respostas Traduzir o documento e as instruções do exame para todos os intervenientes e verificar o material traduzido Assegurar que todos os materiais dos exames (tais como brochuras, instruções e manuais) sejam idênticos e livres de erros (como erros tipográficos, páginas em falta ou informações incompletas) Embalagem retrátil, número e código de barras no material dos exames para evitar o acesso não autorizado e permitir o rastreio do material Ter a certeza que todos os centros de exame têm instalações de armazenamento seguras Utilizar procedimentos seguros no envio e transporte de materiais dos exames (por exemplo, ter os exames entregues/escoltados por carros da polícia) e só fazer a entrega dos materiais dos exames nos locais onde estes se realizam, no momento da sua administração Materiais de preparação para os exames devem estar disponíveis e acessíveis a todos os alunos Comunicar políticas e procedimentos de administração de exames a todos os intervenientes Comunicar políticas sobre irregularidades nos exames e as consequências de comportamentos inapropriados a todos os intervenientes Introduzir mecanismos que facultem o reporte seguro e confidencial de comportamentos inapropriados (como um endereço de e-mail, número de telefone exclusivo e largamente difundido e/ou formulários) Dar publicidade ao fato de poderem ser utilizadas técnicas estatísticas para identificar irregularidades no exame por parte dos alunos Sentar os alunos afastados uns dos outros (por exemplo, deixando um lugar vago de cada lado e não sentar ninguém imediatamente atrás ou à frente deles) e aleatoriamente atribuir lugares aos alunos Ler os procedimentos dos exames e as instruções integrais aos alunos, antes da administração do exame Recolher todos os materiais e dispositivos não autorizados e guardá-los numa área segura 1 25. Utilizar números de identificação em vez de nomes dos alunos para garantir dados exatos sobre a presença nos exames Durante a administração do exame 1. 2. 3. 4. Efetuar controlos aleatórios dos centros de exame durante a administração do exame Assegurar que existe um relógio bem visível na sala do exame Anunciar claramente o tempo de início do exame e quando deverá terminar Se um aluno pedir para sair da sala de exame por qualquer razão antes de o processo de exame estar concluído, todos os materiais do teste têm de ser fiscalizados e guardados pelo administrador ou um inspetor 5. Acompanhar o aluno até à casa de banho; autorizar apenas um aluno fora da sala de exames de cada vez 6. Assegurar que os alunos não usam telefones ou outros meios de comunicação e que não falam com ninguém quando saem da sala 7. Circular pela sala para monitorizar, mas sem perturbar os examinandos 8. Se houver suspeita de comportamento inapropriado, dois funcionários da área de testes, se possível, deverão testemunhar o incidente para fins de verificação • Advertir e/ou deslocar o examinando, avisando-o de que serão reportadas as irregularidades no teste • Documentar os incidentes e as descrições dos incidentes • Se o examinando tentar copiar ou reter material do exame, deverá confiscar o material e expulsar o examinando da sala de exames 9. Ter mais do que um inspetor na sala durante a administração do exame 10. Monitorizar a internet para evidências de comportamento inapropriado durante os exames Após a administração do exame 1. Recolher todos os materiais de exame de forma atempada e confirmar que todas as páginas do teste e folhas de respostas (bem como notas e papel de rascunho) são entregues pelos alunos, antes de saírem da sala de exames; recolher também todos os materiais que não foram utilizados. 2. Guardar de forma segura todos os materiais do exame e transportá-los de forma segura, fazendo o acompanhamento de cada fase do processo de transporte 3. Realizar controlos aleatórios dos centros de exame durante a recolha do material dos exames 4. Implementar procedimentos confidenciais para reporte e investigação de comportamento inapropriado e aplicar regras e consequências para quem praticar comportamentos inapropriados. 5. Empregar um scanner ótico para digitalizar as respostas a perguntas de escolha múltipla 6. Fornecer instruções claras aos responsáveis pela correção dos testes e utilizar quem tenha recebido formação em correção de provas de exame; utilizar um sistema de classificação dupla para amostras aleatórias de provas de exame 7. Garantir a segurança dos dados e da análise dos exames, manter confidencial a identidade das pessoas que fazem a classificação dos exames e utilizar tecnologia segura para processar e analisar os resultados dos exames; recorrer a dois indivíduos independentes para o processamento de dados 8. Preparar e divulgar os resultados dos exames às partes interessadas, de acordo com um calendário prédeterminado. 9. Assegurar a existência de mecanismos para responder às preocupações dos alunos relativamente aos resultados dos exames, incluindo o pedido de revisão de prova ou de reclassificação das suas respostas ao exame 10. Tomar medidas no sentido de garantir que os resultados dos exames só são utilizados para os fins previstos 2