THE NATIONAL BOARD OF MEDICAL EXAMINERS® (NBME®) Prêmio Comemorativo de Centenário do NBME: convite à apresentação de propostas Como parte das celebrações do seu centenário que se aproxima, o National Board of Medical Examiners tem a honra de anunciar o Prêmio Comemorativo de seu Centenário. OBJETIVO DO PROGRAMA: O objetivo do Programa é melhorar a qualidade da avaliação dos estudantes de faculdades de medicina na América Latina. Auxílios à pesquisa, de até US$ 50.000,00 cada, serão oferecidos por um período de dois anos para fomentar o desenvolvimento de uma Comissão Interinstitucional de Avaliação Regional de faculdades de medicina. São de grande interesse propostas que visam um impacto amplo e sustentável em uma região, ao criar competências locais para avaliar os principais resultados de aprendizado e melhorar a qualidade dos programas de avaliação dos estudantes nas faculdades participantes. Cada proposta enviada por uma Comissão Interinstitucional de Avaliação deve incluir pelo menos três faculdades de medicina. Incentivamos propostas que incluam mais de três faculdades. As faculdades participantes de uma comissão não precisam estar localizadas no mesmo país. ELIGIBILIDADE: As propostas DEVEM OBRIGATORIAMENTE indicar uma instituição sem fins lucrativos que figurará como líder (faculdade de medicina, Ministério ou outro tipo de organização) e administrará os recursos do auxílio para a comissão. As faculdades que submeterem as propostas de comissões devem: Estar localizadas no México, na América Central, no Caribe ou na América Latina. Estar incluídas no IMED (International Medical Education Directory) mantido pela FAIMER (Foundation for Advancement of International Medical Education and Research), que pode ser acessado pelo link http://www.faimer.org/resources/imed.html. FINANCIAMENTO: Os participantes podem solicitar ao NBME um auxílio total de até US$ 50.000,00 (para toda a comissão, e não para cada faculdade) para projetos com até dois anos de duração. Prazo final para envio de propostas: 1º DE DEZEMBRO DE 2013 As propostas devem ser enviadas em Espanhol ou Inglês Para obter mais informações: *Na Internet: http://www.nbme.org/about/centennialawards E-mail: [email protected] Copyright © 2013 National Board of Medical Examiners® (NBME®). Todos os direitos reservados. Missão do National Board of Medical Examiners A missão do NBME é proteger a saúde pública por meio de métodos atualizados e de última geração para avaliação de profissionais da saúde. Embora seu foco seja a avaliação de médicos, a missão abrange todo o leque de profissionais da saúde ao longo de sua educação, formação e prática contínuas e compreende pesquisa na avaliação, bem como no desenvolvimento de instrumentos de avaliação. Palavras do presidente: boas-vindas e introdução ao Prêmio Comemorativo de Centenário do NBME O National Board of Medical Examiners (“National Board” ou “NBME”) foi fundado em 1915 em resposta ao anseio dos profissionais de medicina, que desejavam estabelecer padrões nacionais para a prática da medicina. O objetivo inicial, e que permanece como meta principal até hoje do NBME é “proporcionar métodos de avaliação de alta qualidade, cujos resultados, indiscutivelmente, pudessem ser aceitos pelos conselhos estaduais de medicina sem a necessidade de exames adicionais”. Hoje, o NBME, em parceria com a Federation of State Medical Boards (Federação de Conselhos Estaduais de Medicina) e a Educational Commission for Foreign Medical Graduates (Comissão de Educação para Estrangeiros Graduados em Medicina), elabora e administra o United States Medical Licensing Examination® (USMLE®™), um sistema de avaliação geral de candidatos à licença para a prática médica, independentemente do país de origem ou de graduação. Além do USMLE, o NBME oferece diversas ferramentas de avaliação para faculdades de medicina dos EUA e de todo o mundo, instrumentos de autoavaliação para alunos de medicina, apoio a programas de avaliação de outras organizações de profissionais da saúde e serviços para educadores e órgãos reguladores de profissionais da saúde em todo o mundo, incluindo o exame internacional “International Foundations of Medicine” (IFOM). Ao longo de seus 98 anos de história, o National Board prioriza e mantém os mais altos padrões de excelência em seus programas de avaliação. Como parte dos futuros eventos para a comemoração de seu Centenário em 2015, o National Board of Medical Examiners tem a honra de anunciar o lançamento do Prêmio Comemorativo de Centenário do NBME. O objetivo do Programa é aprimorar a qualidade da avaliação dos alunos que cursam faculdades de medicina da América Latina. Auxílios à pesquisa, de até US$ 50.000,00 cada, serão oferecidos por um período de dois anos para fomentar o desenvolvimento de uma Comissão Interinstitucional de Avaliação Regional de faculdades de medicina. São de grande interesse propostas que visam um impacto amplo e sustentável em uma região, ao criar competências locais para avaliar os principais resultados de aprendizado e aperfeiçoar a qualidade dos programas nas faculdades participantes. Cada comissão que enviar uma proposta deve incluir pelo menos três faculdades. Incentivamos as propostas que incluem mais de três faculdades. As faculdades participantes de uma comissão não precisam estar localizadas no mesmo país. Agradecemos seu interesse no Prêmio Comemorativo de Centenário do NBME e esperamos pelas propostas. Os candidatos serão notificados sobre os resultados da análise em Abril de 2014. Donald E. Melnick, MD Presidente National Board of Medical Examiners Agosto de 2013 Prêmio Comemorativo de Centenário do NBME: convite à apresentação de propostas Áreas temáticas das propostas Embora os candidatados possam propor trabalhos em outras áreas temáticas, o principal interesse do NBME é financiar comissões formadas por três ou mais faculdades para desenvolver e implantar, em colaboração, programas de avaliação regionais nas seguintes áreas temáticas: Avaliação longitudinal da capacidade de decisão clínica com o uso do Teste de Progresso. Avaliação das habilidades clínicas com o uso de exame clínico objetivo estruturado (OSCE). Implantação de sistemas de avaliação para apoio ao ensino, à avaliação de programas e melhoria da qualidade. Este documento oferece a descrição de cada área temática e também a discussão de questões específicas e pertinentes às propostas e considerações sobre o apoio oferecido pelo NBME ao projeto. Mais de uma comissão pode ser financiada em cada área. Propostas de criação e implantação de programas de avaliação em outras áreas temáticas também serão analisadas, mas consideradas como baixa prioridade. Critérios de seleção As propostas serão analisadas pelo Comitê Consultivo do Prêmio Comemorativo de Centenário do NBME. Serão adotados os seguintes critérios de avaliação: O potencial de impacto e o grau de abrangência e sustentabilidade da proposta no ensino da medicina e nos métodos de avaliação na região. A viabilidade de sucesso na conclusão do trabalho. A integralidade e a qualidade da proposta. Dependendo do número e da qualidade das propostas recebidas, serão concedidos até três auxílios à pesquisa no valor de US$ 50.000,00 cada. Entretanto, o NBME reserva-se o direito de conceder um número de auxílios inferior a três ou não conceder nenhum auxílio. Ciclo de apresentação de propostas e concessão de auxílios 2013 - 2014 1º de dezembro de 2013 1º de abril de 2014 1º de julho de 2014 1º de abril de 2015 30 de junho de 2016 Prazo final de recebimento das propostas Divulgação dos auxílios Data de início dos projetos Entrega dos relatórios de acompanhamento dos projetos Entrega dos relatórios de conclusão dos projetos Termos e condições da concessão dos auxílios A concessão dos auxílios à pesquisa do Prêmio de Centenário está condicionada à aceitação, de comum acordo entre o NBME e a Comissão Interinstitucional premiada, dos termos e das condições aplicáveis à premiação. Eles serão especificados em um contrato elaborado (em Inglês) pelo NBME. Os beneficiários dos auxílios devem apresentar um relatório parcial após os primeiros nove meses de apoio ao projeto e um relatório final quando o financiamento terminar. O apoio durante o último ano do projeto está subordinado à entrega de um relatório parcial que seja satisfatório. Em todas as solicitações de fundos, os valores devem ser expressos em dólares americanos e todos os pagamentos de fundos serão realizados em dólares americanos. Depois que os auxílios são concedidos, o NBME não compensará beneficiários estrangeiros por flutuações no câmbio. A taxa de câmbio vigente na época de entrega dos relatórios fiscais deve ser empregada quando os relatórios forem preparados. Primeiros passos Para se candidatar on-line, acesse o Centro de inscrições on-line e faça o download do modelo da proposta (http://www.nbme.org/about/centennialawards). O modelo inclui uma folha de rosto com informações sobre o projeto e instruções para a elaboração de todas as seções da proposta. O texto das propostas deve se limitar a seis páginas, digitadas com espaçamento simples. O texto de justificativa de orçamento também deve ser submetido como parte da proposta, juntamente com os formulários de certificação institucional de todas as instituições colaboradoras. Recomendamos que a documentação de comprovação de regularidade da instituição líder e sua condição sem fins lucrativos também seja apresentada com a proposta uma vez que ela será solicitada caso o projeto seja selecionado. O NBME reserva-se o direito de solicitar documentação adicional para tomar as decisões finais quanto à concessão. Apresentação das propostas As propostas (em PDF ou Word) devem ser enviadas por e-mail para [email protected], até o dia 1º de dezembro de 2013 (23h59, horário da costa leste dos EUA). Informe o sobrenome do pesquisador principal no campo assunto do e-mail e em todos os nomes de arquivos. As propostas podem ser elaboradas em Espanhol ou Inglês. Informações de contato Caso tenha dúvidas sobre o processo de apresentação de propostas, entre em contato com a equipe do Prêmio Comemorativo de Centenário do NBME pelo e-mail: [email protected] Tema 1: Avaliação longitudinal da capacidade de decisão clínica com o uso do Teste de Progresso Os Testes de Progresso são uma forma de avaliação longitudinal na qual os alunos são submetidos a uma série de provas idênticas que abordam todo o leque de conhecimentos necessários para a conclusão do programa de graduação em medicina. Geralmente, todos os alunos de uma faculdade fazem os Testes de Progresso em intervalos regulares durante o ano, e o ganho de conhecimento para cada grupo de alunos de um determinado ano (por exemplo, grupo de alunos do terceiro ano), e para cada aluno individualmente, é acompanhado enquanto as disciplinas do currículo são cumpridas. Os resultados de testes de avaliação contínua podem facilitar a identificação precoce de alunos com alto e baixo rendimentos e fornecer diretrizes para a superação dos déficits de conhecimento. Além disso, com a combinação do desempenho dos alunos em áreas temáticas específicas e sua análise quanto às experiências de aprendizado, os resultados das provas podem ser utilizados para monitorar e avaliar as contribuições de cada componente curricular para o aprendizado dos alunos. Quando várias faculdades participam do desenvolvimento e da aplicação dos Testes de Progresso, as comparações entre os níveis de desempenho de seus alunos podem ajudar na interpretação dos resultados. As comissões que apresentarem propostas relativas a Testes de Progresso devem observar os seguintes aspectos: 1. Planejamento dos Testes de Progresso Como a coordenação do projeto será executada? Será criado um comitê gestor do projeto, que será responsável por tomar as decisões, planejar e coordenar as atividades gerais e compilar e distribuir os resultados dos testes? Os testes serão voluntários ou obrigatórios? Como serão utilizados seus resultados? Irá variar de faculdade para faculdade? 2. Criação e análise dos itens componentes e elaboração dos Testes de Progresso Como as faculdades trabalharão juntas para: a) desenvolver os temas desses testes (matriz), b) redigir e revisar as questões componentes dos testes antes de serem incluídos no banco de questões e c) desenvolver as provas, classificar e atribuir pontuação? As faculdades trabalharão em conjunto para elaborar os Testes de Progresso ou trabalharão de forma independente, elaborando provas que atendam às suas necessidades específicas, com base em um banco comum de itens? 3. Aplicação das provas As provas serão aplicadas on-line ou presencialmente (formato papel e lápis)? Irá variar de faculdade para faculdade? Quais grupos de alunos participarão em cada faculdade (por exemplo, grupos de alunos do primeiro ao último ano da faculdade ou somente grupos de alunos nos anos finais do curso)? Com que frequência os Testes de Progresso serão aplicados e em que momentos durante cada ano acadêmico? Irá variar de faculdade para faculdade? 4. Desempenhos e relatórios Quais desempenhos por áreas (por exemplo, sistema de órgãos, tarefa clínica, especialidades/disciplina, idade e sexo dos pacientes, local dos cuidados médicos) serão incluídas nos relatórios de desempenho e acompanhados longitudinalmente para monitorar o ganho de conhecimento? Os relatórios de desempenho de cada aluno serão gerados de forma centralizada ou pelas faculdades individualmente? Os resultados serão comparados entre as faculdades? Como os resultados da avaliação contínua serão analisados e divulgados às faculdades com o objetivo de avaliação e melhoria curricular? 5. Impacto e sustentabilidade Como será avaliado o impacto da avaliação contínua e quais mecanismos serão empregados para manter esse programa quando o financiamento do NBME terminar? Como forma de apoio aos projetos nessa área temática, o NBME se dispõe a licenciar e fornecer 400 questões (em Inglês) e oferecer assistência com seu pessoal para treinamento do corpo docente e planejamento do projeto, conforme descrito a seguir. Essas atividades podem ser incluídas no cronograma do projeto. Os custos de remuneração e de viagens do pessoal do NBME não estão incluídos no valor total do auxílio; eles serão pagos pelo NBME separadamente e não devem ser incluídos nos orçamentos das propostas apresentadas pelas comissões. Facilitação de uma reunião inicial com os representantes das faculdades para: o desenvolver uma matriz para dirigir a elaboração dos Testes de Progresso. o desenvolver o corpo docente para a redação de testes que incluam itens de múltipla escolha pertinentes e de alta qualidade. Facilitação de uma reunião subsequente com representantes das faculdades para: o analisar os itens recém-redigidos e preparar um conjunto inicial de questões para a avaliação contínua. o planejar a análise dos resultados das provas iniciais e relatórios de desempenho geral e por área após aplicação de provas individuais e longitudinalmente. Apoio contínuo por meio de conferências on-line, por telefonemas e e-mails periódicos durante todo o financiamento. Tema 2: Avaliação das habilidades clínicas com o uso de exame clínico objetivo estruturado (OSCE) A capacidade de um estudante de medicina de interpretar um histórico clínico de um paciente, fazer um exame clínico preciso e demostrar habilidades de comunicação e interpessoais pode ser mais bem mensurada por meio de uma avaliação direta dessas habilidades clínicas. São duas as vantagens teóricas e práticas importantes do emprego de exames clínicos objetivos estruturados (OSCE) com pacientes simulados (atores): foco no paciente e observação direta das habilidades clínicas. Os desafios clínicos podem ser criados especificamente para o nível dos alunos e padronizados em todo o grupo de examinandos que estão sendo avaliados. Um OSCE geralmente compreende vários encontros com pacientes atores em um ambiente clínico simulado. O encontro, ou consulta, com esse paciente é cronometrado (em geral, de 5 a 15 minutos) seguido, frequentemente, de tarefa(s) subsequente(s) (em geral de 5 a 10 minutos). Os resultados dos exames podem ser registrados por observadores integrantes do corpo docente e/ou pelos próprios pacientes atores e podem ser formativos ou somativos. Esse método é empregado atualmente nas decisões de concessão de licença médica nos EUA, Canadá, Suíça, Taiwan e Coreia do Sul e utilizada no Reino Unido e na Austrália para avaliar estrangeiros graduados em medicina antes de iniciarem o treinamento em pós-graduação. O estabelecimento de uma infraestrutura para a implantação dos exames clínicos objetivos estruturados pode ser respaldado pela criação de comissões de faculdades com o objetivo de dividir custos, espaço e elaboração de materiais de avaliação, garantindo a sustentabilidade. As comissões que apresentarem propostas devem observar os seguintes aspectos: 1. Planejamento dos exames Como a coordenação do projeto será executada? Serão criados um comitê de planejamento (por exemplo, um diretor de projeto de cada faculdade, um representante de comissão de graduação), equipes para elaboração dos casos clínicos e grupos de trabalho? Como os recursos (humanos, clínicos, materiais de estudo de casos, etc.) serão compartilhados entre as faculdades? As provas serão voluntárias ou obrigatórias? Como serão utilizados os resultados das provas (por exemplo, formativos ou somativos)? As faculdades empregarão métodos diferentes: no desenvolvimento dos objetivos, extensão das questões (por exemplo, número de casos e duração total das provas) e componentes: consulta com pacientes e tarefa(s) interestações (por exemplo, anotações sobre o paciente ou outras tarefas após a consulta); plano ou matriz para exemplificar os objetivos (mapa dos casos que compõem a totalidade da prova, incluindo objetivos, sistema de órgãos, ambientes clínicos, dados demográficos dos pacientes, desafios de habilidades de comunicações e interpessoais)? 2. Desenvolvimento e análise dos casos e questões Quais habilidades o modelo de OSCE busca avaliar e quais formatos de casos serão utilizados? Como as estações serão desenvolvidas? Haverá um único modelo ou um conjunto pequeno de modelos de casos para padronizar as instruções aos alunos, o formato das listas de verificação e/ou escalas de pontuação, materiais de treinamento para os pacientes atores, etc.)? A classificação se baseará em documentos preenchidos pelos atores e/ou médicos observadores? Qual matriz será utilizada na elaboração das questões a partir da base de casos? As faculdades trabalharão em conjunto para elaborar as questões ou operarão de forma independente, elaborando provas que atendam às suas necessidades específicas, com base um banco de casos? 3. Recrutamento e treinamento de pacientes atores e examinadores Quais procedimentos serão adotados para recrutar e treinar os atores? Quais processos serão empregados para o controle de qualidade e garantia da precisão da representação e registro/classificação? Se forem utilizados médicos examinadores, como eles serão treinados? Qual processo será empregado no controle da qualidade? 4. Aplicação das provas Quais grupos de alunos farão as provas em cada faculdade (por exemplo, alunos do último) e em que momentos, durante o ano acadêmico, serão aplicadas? Irá variar de faculdade para faculdade? As provas serão aplicadas e centralizadas em um único local para todos os participantes ou em cada faculdade? Quais processos serão empregados para convocar pacientes atores, alunos e pessoal (inspetores, moderadores, instrutores) e reservar instalações e equipamentos (equipamentos médicos, audiovisuais, computadores etc.)? 5. Desempenhos e relatórios Os resultados serão centralizados ou realizados individualmente nas faculdades? Quais desempenhos por área serão calculados? Como o desempenho individual será informado aos estudantes para a promoção de seu aprendizado? Se os resultados das provas forem utilizados para a tomada de decisões sobre os alunos, como os padrões de aprovação/reprovação serão definidos? Como os resultados das provas serão analisados e divulgados às faculdades com o objetivo de avaliação e melhoria do currículo? Os resultados serão comparados entre as faculdades? 6. Impacto e sustentabilidade Como será avaliado o impacto da avaliação e quais mecanismos serão empregados para manter o programa quando o financiamento do NBME terminar? Como forma de apoio aos projetos nessa área temática, o NBME se dispõe a realizar workshops para formação do corpo docente, abordando procedimentos de desenvolvimento de estudos de casos (incluindo tarefas e questões subsequentes), treinamento de pacientes atores e mensuração da performance dos estudantes. A assistência ao projeto pode ser oferecida conforme descrito a seguir. Essas atividades podem ser incluídas no cronograma do projeto. Os custos de remuneração e de viagens do pessoal do NBME não estão incluídos no valor total do auxílio; eles serão pagos pelo NBME a parte e não devem ser incluídos nos orçamentos das propostas apresentadas pelas comissões. Facilitação de uma reunião inicial com os representantes das faculdades para: o desenvolver uma matriz para as questões. o desenvolver o corpo docente para elaborar materiais de estudo de casos, tarefas e questões sobre o caso e materiais de treinamento de pacientes atores e examinadores. Facilitação de uma reunião subsequente com representantes das faculdades para: o revisar os materiais de estudo de casos. o discutir considerações acerca dos desempenhos. Apoio contínuo por meio de conferências on-line, por telefonemas e e-mails periódicos durante todo o financiamento. Tema 3: Implantação de sistemas de avaliação para apoio ao ensino, à avaliação de programas e melhoria da qualidade A avaliação de programas é o emprego de critérios bem fundamentados para determinar o mérito de programas, projetos ou currículos. A avaliação de programas tem várias finalidades, incluindo o provimento de mecanismos de controle de qualidade ao público, a avalição do aprendizado e do ensino, e a avaliação e melhoria do currículo e do projeto pedagógico em geral. A finalidade da avaliação de programas depende de quem ou do que impulsiona a avaliação (por exemplo, se apoiadores internos ou externos). Estas informações podem ser utilizadas para respaldo ao reconhecimento de programas educacionais ou projetos pedagógicos. O reconhecimento/acreditação é um processo de garantia de qualidade na educação que determina se uma instituição ou um programa atende aos padrões estabelecidos para funcionamento, de estrutura e de resultados. O processo de acreditação também promove a melhoria das instituições e seus programas. A avaliação frequentemente emprega vários métodos, qualitativos e quantitativos, para coleta de dados: visitas locais, entrevistas, discussões de grupo, pesquisas com docentes e alunos e resultados de provas. As comissões que apresentarem propostas relativas à avaliação de programas devem observar os seguintes aspectos: 1. Planejamento do sistema de avaliação Como a coordenação do projeto será executada? Será criado um comitê de gestão/planejamento (por exemplo, um diretor de projeto de cada faculdade, um representante de comissão de graduação), que será responsável por tomar as decisões? Como as faculdades definirão os aspectos dos programas de medicina a serem avaliados? A avaliação examinará de forma geral os cumprimento da grade curricular e os resultados obtidos pelos alunos em cada faculdade ou analisará de forma aprofundada e mais detalhada um ou dois aspectos de cada programa? 2. Desenvolvimento e análise dos instrumentos e procedimentos de avaliação Quais atividade comuns de avaliação serão implantadas na comissão interinstitucional, tanto na avaliação de programas quanto na de alunos? Como as faculdades definirão e chegarão a um acordo quanto à adoção de critérios comuns de avaliação de programas? Como as comissões desenvolverão e implantarão instrumentos comuns de avaliação de programas e mensuração dos resultados de aprendizado dos alunos? Todos eles serão desenvolvidos localmente ou alguns serão adquiridos de outras fontes? Por exemplo, uma comissão pode querer utilizar o exame internacional IFOM para facilitar as comparações dos resultados de aprendizagem entre as faculdades participantes e internacionalmente. Os instrumentos de avaliação serão de fácil utilização e completos? Se eles demandarem conhecimento e /ou recursos especializados, como será fornecido treinamento e como serão compartilhados os recursos? 3. Elaboração de relatórios dos resultados de avaliação A elaboração dos resultados será centralizada ou realizada individualmente nas faculdades? Como os resultados serão divulgados às faculdades com o objetivo de avaliação e melhoria curricular? Os resultados serão comparados entre as faculdades? 4. Impacto e sustentabilidade Como será determinado o impacto do sistema de avaliação na qualidade do currículo e nos resultados de aprendizado dos alunos? Quais mecanismos serão empregados para manter o sistema de avaliação quando o financiamento do NBME terminar? Como forma de apoio aos projetos nessa área temática, o NBME se dispõe a oferecer assistência com seu pessoal para planejamento de projetos, conforme os detalhes descritos a seguir. Essas atividades podem ser incluídas no cronograma do projeto. Os custos de remuneração e de viagens do pessoal do NBME não estão incluídos no valor total do auxílio; eles serão pagos pelo NBME a parte e não devem ser incluídos nos orçamentos das propostas apresentadas pelas comissões. Facilitação de uma reunião inicial com os representantes das faculdades depois que o auxílio for concedido para: o refinar o plano da avaliação e as perguntas das pesquisas e/ou discussões de grupo. Facilitação de uma reunião subsequente com representantes das faculdades para: o analisar os resultados e planejar a análise de dados qualitativos. Apoio contínuo por meio de conferências on-line, por telefonemas e e-mails periódicos durante todo o financiamento. Se as comissões interinstitucionais desejarem utilizar os exames “IFOM” do NBME como instrumento de mensuração dos resultados de aprendizado dos alunos, o NBME os fornecerá a preços reduzidos para serem aplicados em todo um grupo. Para obter informações sobre os preços dos exames IFOM a serem incluídos no orçamento, envie e-mail para [email protected]