Nº 14 - Setembro 2011
O desafio de medir a ciência
globalizada na Research Trends
Medir o valor da pesquisa e as consequências de sua globalização é um desafio para toda a comunidade científica. A
Research Trends - newsletter do Scopus que traz insights atuais sobre tendências científicas de análise bibliométrica –
não poderia estar de fora dessa discussão. Um de seus últimos artigos trata da “matriz de avaliação multidimensional
de pesquisas”, assunto de relatório recente publicado por um grupo de avaliação, criado pela Comissão Europeia na
University-Based Research (AUBR).
Para Henk Moed e Andrew Plume, autores do artigo, elaborar um processo
prático e informativo requer escolher qual metodologia será usada, que
indicadores serão calculados, que dados serão coletados. Essas decisões,
por sua vez, refletem respostas para uma série de perguntas sobre o
escopo e o propósito do processo de avaliação da pesquisa.
A questão fundamental é a unidade de avaliação: é um país, instituição,
grupo de pesquisa, indivíduo, campo de pesquisa ou de uma rede
internacional? Outro ponto essencial é o objetivo da avaliação: é para
informar a alocação dos recursos de financiamento, para melhorar
o desempenho, ou para aumentar a inserção regional? Há, ainda,
questões sobre as dimensões externas que devem ser consideradas: o
impacto acadêmico, inovação e benefício social, ou a sustentabilidade?
A chamada “matriz”, por sua vez,
distingue quatro metodologias de avaliação
1) revisão por pares, que proporciona um julgamento baseado em
conhecimentos especializados;
2) revisão pelo usuário final, como satisfação do cliente;
3) indicadores quantitativos, incluindo bibliometria e outras medidas;
4) autoavaliação.
Essas quatro metodologias podem ser - e muitas vezes são combinadas em uma avaliação multidimensional.
Relatório da Royal Society
Segundo Moed e Plume, novas iniciativas para medir a ciência surgem na Europa e
na Ásia e estão descritas em outro relatório, também recém-publicado, intitulado
“Knowledge, Networks and Nations”, da Royal Society. A ‘ The Excelence in Research
for Australia’ (ERA) avalia a qualidade da pesquisa nas instituições de educação superior
do país, utilizando uma combinação de indicadores e avaliações especializadas por
comitês de profissionais experientes e reconhecidos internacionalmente. Na Europa,
a Comissão de Pesquisa, Inovação e Ciência tem cogitado a necessidade de um
‘indicador de inovação’ em nível europeu. Já no Reino Unido, o ‘Research Assessment
Exercise’ deve ser substituído, em 2014, por um novo ‘Quadro de Excelência em
Pesquisa’. E ainda: os conselhos de pesquisa deste país agora pedem a todos os
candidatos que descrevam o impacto econômico e social de sua pesquisa”.
Leia o artigo completo e conheça exemplos de matrizes de avaliação multidimensional de pesquisas e tipos de
indicadores bibliométricos, que têm papel central nos sistemas de avaliação de pesquisa.
página anterior
próxima página