Faculdade de Medicina da Universidade do Porto Introdução à Medicina AVALIAÇÃO DA UTILIZAÇÃO DOS SISTEMAS ELECTRÓNICOS DE RECOLHA DE INFORMAÇÃO POR PARTE DOS MÉDICOS Afonso, M.; Fernandes, M.; Ferreira, M.; Ferreira, M. F.; Morais, M.; Neto, M.; Pintalhão, M.; Sousa, M.; Torres, M. Regente da disciplina: Prof. Dr. Altamiro da Costa Pereira Orientador: Dr. Ricardo Correia 2004/2005 Passos do nosso trabalho: Encontro da «melhor» query Pesquisa na Pubmed Selecção dos artigos Procura do full-text dos artigos seleccionados Passos do nosso trabalho: Leitura e análise dos artigos pelo menos por 2 revisores (23 artigos analisados) Discussão dos resultados Redacção do artigo Elaboração da página na Internet Dificuldades/Limitações Artigo base vago quanto aos métodos utilizados Query Selecção dos artigos Reprodutibilidade do método Impossibilidade de obter o full-text de todos os artigos seleccinados Destaque da informação mais relevante Síntese em texto da pesquisa Reprodutibilidade do nosso método Estatísca Kappa Revisor 1 Revisor 2 Revisor 3 Revisor 1 Revisor 2 Revisor 3 - Pc=77% Kw=0,35 Pc=76% Kw=0,39 - Pc=80% Kw=0,33 - Tabela 1 - Resultados do estudo de concordância inter-revisor ( Pc – Percentagem de concordância; Kw – Teste Kappa ponderado) CRITÉRIOS DE ANÁLISE Frequência de utilização dos sistemas electrónicos de informação Propósito da sua utilização Satisfação do utilizador Efectividade dos sistemas na pesquisa Razões do insucesso na pesquisa Aplicação/Impacto da evidência na prática clínica. Análise dos artigos Tabela de análise Tabela SPSS 1) Frequência de utilização dos sistemas electrónicos de informação 2) Propósito utilização; 3) Satisfação do utilizador; 4) Efectividade dos sistemas na pesquisa - precisão e recall; - factores inerentes ao utilizador; - comparação entre pesquisa manual e electrónica; - comparação entre diferentes bases de dados. 5) Razões do insucesso na pesquisa; 6) Aplicação/Impacto da evidência na prática clínica. 4) Efectividade Dos Sistemas Na Pesquisa Factores Inerentes ao utilizador (6 artigos) Treino e formação Pesquisas em cooperação (+) (+) Outros factores: Demográficos (ex. Tipo de estudante) (+) Factores cognitivos (-) Factores de personalidade (-) Experiência com computadores (-) Riqueza em vocabulário do utilizador (+) 4) Efectividade Dos Sistemas Na Pesquisa Pesquisa Manual / Pesquisa Electrónica 3 artigos: 25, 8, 29 4) Efectividade Dos Sistemas Na Pesquisa 4) Efectividade Dos Sistemas Na Pesquisa Diferenças entre o número de ensaios clínicos randomizados identificados através da pesquisa manual ou através da MEDLINE; Diferenças entre a sensibilidade obtida por cada um dos métodos; Melhores resultados quando utilizada a pesquisa manual; A pesquisa manual não deve ser o único método de pesquisa; 4) Efectividade Dos Sistemas Na Pesquisa Estudo (base(s) de dados) Resultados das pesquisas (recall) N.º total de documentos conhecidos Tema(s) da pesquisa Gehanno et al (10) Medline Niosh-tic Embase e Medline ou Toxline Medline e Niosh-tic Medline, Embase e Biosis Medline, Toxline e Nioshtic Medline, Embase, Toxline e Biosis Medline, Toxline, Biosis e Nioshtic 63% (A) 11% (B) 86% (A) 42% (B) 96% (A) 72% (B) 99% (B) 83% (A) Mesotelioma e abestos (A) Alergia ao látex (B) N = 315 N = 462 Derry et al (19) Medline Embase Medline e Embase Em nenhuma delas 49% 40% 52% 48% Efeitos adversos medicamentos de N = 107 Suarez-Almazor et al (26) Medline Embase Medline e Embase 77% 90% 99% Dores osteoporose reumatóide lombares, e artrite N = 243 Tabela 2 - comparação entre bases de dados 4) Efectividade Dos Sistemas Na Pesquisa Conjugação dos dois métodos para uma pesquisa mais completa e mais válida; Não deixar de parte a pesquisa manual, pois apesar de trabalhosa e dispendiosa existem ainda muitos artigos que não estão indexados na MEDLINE ou noutro tipo de bases de dados. 4) Efectividade Dos Sistemas Na Pesquisa Comparação entre diferentes bases de dados Artigos citados: (26) (3) (19) (27) Diferenças entre as bases de dados: - número de revistas e referências citadas - sistema de indexação A utilidade da pesquisa depende da eficiência da base de dados escolhida 4) Efectividade Dos Sistemas Na Pesquisa Strain et al (27) compara sistemas on-line e em CD-rom: Sistemas on-line: - MEDLINE → pesquisas são morosas; 1/3 dos artigos publicados não têm registo - Micromedex → mais fácil de usar e com mais informação do que a MEDLINE; informação delineada, sumariada e referenciada; baixa precisão Sistemas em CD-rom: - Reactions → regista 7500 revistas, mas é lento - AHF’s → não apresenta referências - PDR → pesquisa incompleta 4) Efectividade Dos Sistemas Na Pesquisa Resultados da pesquisa na mesma base de dados discrepantes Eficiência da base de dados relacionada com o tema da pesquisa Devem escolher-se bases de dados adaptadas ao assunto em estudo 1) Frequência de utilização dos sistemas electrónicos de informação 2) Propósito utilização; 3) Satisfação do utilizador; 4) Efectividade dos sistemas na pesquisa - precisão e recall; - factores inerentes ao utilizador; - comparação entre pesquisa manual e electrónica; - comparação entre diferentes bases de dados. 5) Razões do insucesso na pesquisa; 6) Aplicação/Impacto da evidência na prática clínica. 5) Razões Do Insucesso Na Pesquisa Causas Artigos Allison et al (9) Má elaboração da questão clínica Ausência de abstracts/ abstracts estruturados Base de dados inapropriada X X Shen et al (17) X X Robinson et al (28) Murphy et al (29) Desequilíbrio entre recall e precisão Inadequação de limites X X X X X Derry et al (19) Strain et al (27) Falta de treino do utilizador X Hersh et al (12) Shaw et al (20) Problemas de indexação/ Mesh X X X X X X X X Tabela 3 - Causas do insucesso na pesquisa X 5) Razões Do Insucesso Na Pesquisa Má elaboração de uma questão clínica; Treino inadequado do utilizador; Base de dados inapropriada \ Informação limitada Problemas nas práticas de indexação \ uso de termos MeSH; 5) Razões Do Insucesso Na Pesquisa Problema na capacidade de equilibrar recall e precisão; Problemas pesquisa; na adequação dos limites Ausência de abstract/abstracts estruturados. à 1) Frequência de utilização dos sistemas electrónicos de informação 2) Propósito utilização; 3) Satisfação do utilizador; 4) Efectividade dos sistemas na pesquisa - precisão e recall; - factores inerentes ao utilizador; - comparação entre pesquisa manual e electrónica; - comparação entre diferentes bases de dados. 5) Razões do insucesso na pesquisa; 6) Aplicação/Impacto da evidência na prática clínica. 6) Aplicação/Impacto da evidência na prática clínica. Não foram encontrados estudos; Mais investigação é necessária a este nível. Em suma… Da leitura dos artigos verifica-se: - baixa frequência de utilização dos profissionais de saúde destes sistemas de informação; - existência de várias falhas nas suas pesquisas, decorrentes de estratégias inadequadas diminuição da efectividade; - crescente adesão; - satisfação dos utilizadores. Em suma… Para o futuro: - maior formação dos médicos; - divulgação das vantagens do uso apropriado destes sistemas. Extracção de um número acrescido de artigos; Ampliação a magnitude dos resultados obtidos. ELABORAÇÃO DA PÁGINA NA INTERNET Agradecimentos Agradecemos a todos aqueles que através da sua orientação, indicações, sugestões e auxílio na realização de diversas tarefas: Dr. Ricardo Correia Professor Dr. Altamiro da Costa Pereira Dra Cristina Santos FIM