O Impacto da Avaliação Capes na Produção Científica e Qualidade das Revistas Brasileiras na Área Médica Prof. Dr. Jair de Jesus Mari Coordenador da Pós Graduação da UNIFESP/EPM Pressupostos A pós-graduação é reconhecidamente o componente mais bem sucedido do sistema educacional brasileiro. Esse êxito deve-se em grande parte ao fato de as ações governamentais voltadas para o desenvolvimento desse nível de ensino terem-se calcado, no decorrer das duas últimas décadas, em um processo sistemático e bem conduzido de acompanhamento e avaliação do desempenho dos cursos de mestrado e de doutorado existentes no país. Avaliação da Pós-Graduação • Avaliar o Processo ou o Produto? • Avaliação por Pares or Avaliação Independente? • Uniformidade ou Homogeneidade? • Regras Intransponíveis ou Diretrizes? Avaliação no Reino Unido • Institutional Review (Academic Quality Audit)/ Instituição • Subject Review (Teaching Quality Assessment)/ Cursos • Professional Accreditation of Vocational and Professional Subject/Avaliação das Sociedades Profissionais • Research Assessment/Pesquisa Avaliação/Qualis • Publicações com fator de impacto acima de 1 – Internacional A • Publicações com fator de impacto abaixo de 1 – Internacional B • Publicações sem fator de impacto medido, mas incluídas no MedlineInternacional C Avaliação/Qualis • Publicações indexadas no Scielo – Nacional A • Publicações Indexadas no Lilacs, EMBASE, EXCERPTA MÉDICA, PSYCLIT – Nacional B • Demais Publicações – Nacional C Qualis Internacional C • MEDLINE • INTERNATIONAL PHARMACEUTICAL ABSTRACTS (IPA) • CUMULATIVE INDEX TO NURSING & ALLIED HEALTH LITERATURE (CINAHAL) • SPORTDISCUS • ERIC • TROPICAL DISEASES BULLETIN • SOCIOLOGICAL PLANNING/POLICY & DEVELOPMENT Produção Científica dos Orientadores • 80% ou mais dos docentes NRD6 devem publicar 03 artigos nacionais em Qualis A ou superior. Na produção intelectual deve existir pelo menos 01 artigo em Qualis Internacional A ou B/docente/triênio. • 60% dos docentes devem estar em NRD6. Revistas Brasileiras no Medline 2005 • Revista da Associação Médica Brasileira • Brazilian Journal of Infectious Diseases • Arquivos Brasileiros de Cardiologia • Cadernos de Saúde Pública • Arquivos de Gastroenterologia Revistas Brasileiras no Medline 2005 • • • • • • Revista Paulista de Medicina Revista do Hospital Clinicas da FMUSP Revista Brasileira de Psiquiatria Jornal de Pediatria International Brazilian J. of Urology Acta Cirúrgica Brasileira Revistas Brasileiras no Medline 2005 • Arquivos Brasileiros de Endocrinologia e Metabologia • Revista Brasileira de Oftalmologia • Revista Brasileira de Otorrinolaringologia • Revista do Instituto de Medicina Tropical Revistas Brasileiras no Medline 2005 • Brazilian Dental Journal • Pesquisa Odontologica Brasileira • Pró-fono: Revista de Atualização Científica Revistas Brasileiras no Medline 2005 • Revista Latino-Americana de Enfermagem • Revista Brasileira de Enfermagem • Revista da Escola de Enfermagem da USP • Revista Gaúcha de Enfermagem Revistas Brasileiras Indexadas no JCR 2004 • Memórias do Instituto Oswaldo Cruz 0.635 • Brazilian Journal of Medical and Biological Research 0.802 • Genetics and Molecular Biology 0.260 • Brazilian Journal of Microbiology 0.134 • Arquivos de Neuro Psiquiatria 0.257 • Revista de Saúde Pública 0.260 • Dados - Revista de Ciências Sociais 0.217 Revistas Brasileiras Indexadas no JCR 2004 • Journal of Brazilian Chemical Society 1.036 • Quimica Nova 0.637 • Anais da Academia Brasileira de Ciências 0.469 • Brazilian Journal of Physics 0.678 • Revista Brasileira de Zootecnia 0.389 • Pesquisa Veterinaria Brasileira 0.288 • Boletim Sociedade Brasileira Matemática 0.140 Número de teses de mestrado no triênio 1998-2000 1233 1285 1017 660 1009 920 772 Total = 7206 do Sa nt úd o e C ol et iv a O I II M ed II M ed I ed M Ed .F ís ica En fe rm ag em Fa rm ác ia 310 Número de teses de doutorado no triênio 1998-2000 581 572 545 263 240 106 Total = 2897 O do Sa nt úd o e C ol et iva III ed M ed M M ed I II 73 ís ic En a fe rm ag em Fa rm ác ia Ed .F 517 Número total de artigos no triênio 1998-2000 7477 7332 5500 4036 Sa ú de Total = 30837 a ol et iv C O do nt o III ed M M ed II I ed M ia 1253 ác Fa rm m ag er En f Ed . Fí s ic a em 1002 1779 2458 Número de artigos ISI no triênio 1998-2000 2950 3136 1141 648 653 Total = 9191 O do S nt aú o de C ol et iv a M ed III II M ed I ed M Fa rm ác ia nf er m ag em 42 E E d. F ís ic a 90 531 Total de Dissertações (Doutorado) por Ano Base e Área de Avaliação Primeiro Triênio Área Avaliação Segundo Triênio % de 1998 1999 2000 Total 2001 2002 2003 Total Crescimento EDUCAÇÃO FÍSICA 32 38 36 106 29 29 42 100 -6,00 ENFERMAGEM 53 107 80 240 103 90 150 343 30,03 FARMÁCIA 23 22 28 73 27 53 65 145 49,66 MEDICINA I 154 196 178 528 212 310 311 833 36,61 MEDICINA II 171 203 215 589 216 247 281 744 20,83 MEDICINA III 163 219 199 581 194 253 264 711 18,28 ODONTOLOGIA 120 193 204 517 207 266 244 717 27,89 76 80 107 263 123 177 192 492 46,54 SAÚDE COLETIVA Total de Artigos em Periódicos MEDLINE por Média de Orientador, Triênio e Área de Avaliação Primeiro Triênio Segundo Triênio % de MEDLINE Med/Ori MEDLINE /MedOri 99 260 0,38 239 328 0,73 47,95 ENFERMAGEM 581 393 1,48 848 395 2,15 31,16 FARMÁCIA 536 343 1,56 919 384 2,39 34,73 MEDICINA I 3785 1151 3,29 5443 1117 4,87 32,44 MEDICINA II 3451 1393 2,48 5293 1311 4,04 38,61 MEDICINA III 1521 954 1,59 1908 702 2,72 41,54 ODONTOLOGIA 641 1117 0,57 2007 1164 1,72 66,86 SAÚDE COLETIVA 935 547 1,71 1458 586 2,49 31,33 Área Avaliação EDUCAÇÃO FÍSICA MEDLINE Med/Ori MEDLINE/ MedOri Crescimento Total de Artigos em Periódicos ISI por Média de Orientador, Triênio e Área de Avaliação Primeiro Triênio Segundo Triênio % de Área Avaliação ISI MedOri ISI/MedOri ISI MedOri ISI/MedOri Crescimento EDUCAÇÃO FÍSICA 88 260 0,34 211 328 0,64 46,88 ENFERMAGEM 42 393 0,11 78 395 0,2 45,00 FARMÁCIA 620 343 1,81 1133 384 2,95 38,64 MEDICINA I 2984 1151 2,59 4518 1117 4,04 35,89 MEDICINA II 2852 1393 2,05 4464 1311 3,41 39,88 MEDICINA III 1098 954 1,15 1375 702 1,96 41,33 ODONTOLOGIA 489 1117 0,44 1366 1164 1,17 62,39 SAÚDE COLETIVA 588 547 1,08 835 586 1,43 24,48 Número de Artigos e Citações do Brasil por Área JCR 1999-2004 ClinMed 14635 79066 5.40 Física 15622 77217 4.94 Quimica 10998 47044 4.28 Bio/Bioqu 6198 32936 5.31 Neurociência 3722 20914 5.62 PPG Pq/Psicobio/SaudMental University PG Programme UFPE UFRGS NEUROPSIQUIATRIA UFRJ PSIQ., PSICAN., S. MENT. UFRN PSICOBIOLOGIA UNIFESP UNIFESP PSICOBIOLOGIA USP USP/RP PSIQUIATRIA USP/RP PSICOBIOLOGIA PSIQUIATRIA PSIQ, PSICOL MED MEDICINA (S. MENT.) Foundation Year Number of Supervisors CAPES grade 1998-2000 Master Doctorate 1994 2000 1972 2000 1975 6 9 13 3 3 3 1985 1986 1984 1974 1991 1984 1998 1986 1984 1979 1991 1989 11 8 14 29 12 18 4 4 5 5 4 7 Mari, Bressan & Miguel, Br J Psych 2004 Artigos ISI IES Programa UFPE NEUROPSIQUIATRIA UFRGS PSIQUIATRIA UFRJ PSIQ., PSICAN., S. MENT. UFRN PSICOBIOLOGIA UNIFESP PSICOBIOLOGIA UNIFESP PSIQ, PSICOL MED USP PSIQUIATRIA USP/RP MEDICINA (S. MENT.) USP/RP PSICOBIOLOGIA Total 1998 1999 2 1 2000 2001 2002 Total 4 9 12 28 6 12 13 31 10 16 12 26 64 8 7 5 8 4 32 14 9 16 11 28 78 5 11 13 8 15 52 30 21 26 38 29 144 9 7 13 16 12 57 25 38 26 34 28 151 93 104 125 148 167 637 Artigos 1998 – 2002 450 400 All articles 350 300 MEDLINE 250 ISI 200 150 Not indexed in MEDLINE 100 50 0 1998 1999 2000 2001 2002 Mari, Bressan & Miguel, Br J Psych 2004 Índice de Produtividade Produção Intelectual • Produção Intelectual total do programa • Total INT A+B/NRD6 Índice de Produtividade Formação de Recursos Humanos • Número de Mestres e Doutores Formados no Período pelo Número de NRD6 • Total M+D/NRD6 Coeficiente de Boa Produção, Índice Total de Produtividade e Porcentagem de Docentes para Nota 6 (Seis) Mean artigos internacionais Qualis A+B por NRD6 2.2 produtividade total 56.0 % de NRD6 que satisfazem is critérios de conceito 6 72.7 Neuro FMRP 3.4 102.5 91.7 DIPA UNIFESP 2.1 101.0 72.7 Neuro UNIFESP 2.2 87.0 80.0 Hemato UNIFESP 2.2 70.5 100.0 Tropical UFMG 1.9 77.5 80.0 Pedi UFRGS 1.5 71.0 81.3 Pato UFMG 2.7 95.0 80.0 Pato USP 2.3 107.0 75.0 FIOCRUZ 3.1 81.0 79.3 Total 2.4 84.9 81.3 Dip UFRJ Coeficientes de boa produtividade obtido pelos programas com melhor desempenho do Comitê de Medicina II 3.5 3.0 2.5 2.0 1.5 o at SP SP E IF UN E IF UN RP Z RU C O FI P US to G Pa M UF to S G Pa R UF G di F M Pe l U SP a ic FE op NI U Tr m He A IP o ur Ne D J FR FM U o ur Ne p Di 1.0 . Porcentagem dos docentes com qualificação para conceito 6 (seis) obtida pelos programas com melhor desempenho do Comitê de Medicina II 110 100 90 80 70 E IF UN RP Z RU C O FI P US to G Pa M UF to S G Pa R UF G di F M Pe al U SP ic FE op NI U Tr o at P m ES He IF UN SP A IP o ur Ne D J FR FM U o ur Ne p Di 60 Soma dos escores de produtividade geral e de artigos e da porcentagem de docentes NRD6 com qualificação para conceito 6(Seis). 30 20 10 o at SP SP E IF UN E IF UN RP Z RU C O FI P US to G Pa M UF to S G Pa R UF G di F M P Pe U al ES ic F op NI U Tr m He A IP o ur Ne D J FR FM U o ur Ne p Di 0 Conclusões É bem verdade que ao longo desses mais de 30 anos de pós-graduação, um grande número de soluções criativas foram encontradas de maneira que vemos, por todo o país, programas de pósgraduação de bom nível. O sistema de avaliação e seu progressivo aprimoramento tem contribuído sobremaneira para o incremento da produção científica de qualidade no país. Avaliação do Qualis A classificação das revistas deveria ser baseada no seu nível de indexação, tendo-se como pressuposto, uma hierarquização dos Bancos de Dados de Literatura. As revistas brasileiras que não integram o Scielo não deveriam ser classificadas como Internacional C. Conclusões Com a valorização da produção científica no país, houve uma maior disponibilidade de artigos científicos de bom nível, refletindo na melhora da qualidade das revistas científicas brasileiras. O número de revistas na base Medline práticamente duplicou: em 2001 havia 15 títulos brasileiros e em 2005 são 30 títulos na base Medline. Conclusões A avaliação Capes ao hierarquizar a produção científica através dos bancos de literatura, tem contribúido para que os editores de revistas científicas busquem um melhor nível de indexação de revistas, provendo maior visibilidade da ciência produzida na área da saúde no país. Conclusões Em todas as áreas de ciência básica a pesquisa é executada essencialmente nas Universidades Públicas e nos institutos de pesquisa, está intimamente relacionada aos programas de pós graduação existentes no país e depende de verbas individuais ou institucionais concedidas por agências de fomento federais, estaduais ou internacionais The Growing Competition in Brazilian Science • The discrepancy between the scarcity of funds and the need for publication is leading to the “publish or perish” condition experienced in the USA during the seventies, with the difference that in the USA this occurred at a time when science was well established, while in Brazil it is taking place at an early stage of its scientific development. • Thus, if this pattern is not reversed in the near future, Brazilian science may go from growth to decay without ever realizing its full potential. • De Meis et al. (2003). The growing competition in Brazilian science: rites of passage, stress and burnout. Braz J Med Biol Res, 36;(9): 1135-1141