Indicadores de Governança no Setor Público: bibliometria em artigos internacionais
Flávia Verônica Silva Jacques – [email protected]
Ernesto Fernando Rodrigues Vicente - [email protected]
Sandra Rolim Ensslin - [email protected]
Área Temática: A1 Contabilidade pública
M8)Other
Metodologia: Exploratória-Descritiva; Bibliometria
Resumo
Instituições públicas no Brasil e no mundo atualmente discutem as práticas de governança
como um meio de minimizar a assimetria informacional. Para mensurar a governança nos
países, bem como traçar comparativos entre as economias, desenvolveram-se indicadores de
governança. Diante disso, torna-se necessário e oportuno conhecer o que a ciência tem
disponibilizado sobre o assunto, bem como quais os autores que publicam sobre o tema, quais
os periódicos mais receptivo, quais os termos mais difundidos nas pesquisas e quais os artigos
de destaque na comunidade científica, nesse contexto. O objetivo deste estudo, de natureza
exploratória-descritiva, é construir nos pesquisadores o conhecimento acerca do tema,
mediante análise bibliométrica da literatura internacional, utilizando o processo Knowledge
Development Process – Constructivist (Proknow- C). Com o desenvolvimento do processo,
entre outras informações, constatou-se: (1) um portfólio de 16 artigos alinhados com o tema
de interesse; (2) Daniel Kaufmann como autor de maior destaque; e (3) o periódico Columbia
Law Review como o de maior fator de impacto entre a comunidade científica.
Palavras-chave: Governança Pública; Indicadores; Bibliometria; ProKnow-C.
Abstract
Public institutions in Brazil and around the world are currently debating governance
practices as a means of minimizing the informational asymmetry. To measure governance in
the countries, as well as trace comparisons across economies, developed governance
indicators. Therefore, it is necessary and advisable to know what science has made available
on the subject, as well as what the authors who publish on the topic, which the journals most
receptive, which have more widespread in research and which articles featured in the
scientific community, in that context. The purpose of this study, exploratory-descriptive
research is to build on the knowledge about the subject by bibliometric analysis of
international literature, using the process Knowledge Development Process - Constructivist
(Proknow-C). With the development of the process, among other information, it was found: (1)
a portfolio of 16 items aligned with the topic of interest, (2) Daniel Kaufmann as the author of
most prominent, and (3) the periodical Columbia Law Review as the highest impact factor
among the scientific community.
Keywords: Public Governance; Indicators; Bibliometrics; ProKnow-C.
INTRODUÇÃO
Instituições públicas no Brasil e no mundo atualmente discutem as práticas de
governança como um meio de minimizar a assimetria informacional entre principal e agente,
adotando como principal o cidadão e como agente os gestores/administradores públicos. O
intuito é desenvolver a adoção de condutas e doutrinas associadas a responsabilidade pública,
transparência e controle social. Nota-se que a administração pública contemporânea está
voltada à administração gerencial, onde o controle deixa de basear-se apenas nos processos
burocráticos para concentrar-se também no desempenho, surgindo assim a necessidade de
uma gestão voltada à boa governança.
A Governança assume diversos conceitos no meio acadêmico. Segundo Kaufmann,
Kraay e Mastruzzi (2003) governança é composta pelas tradições e instituições pelas quais a
autoridade de um país é exercida, incluindo todo o processo pelo qual os governos são
selecionados, monitorados e substituídos, a capacidade do governo de formular e implementar
políticas sólidas de forma eficaz, e também o respeito dos cidadãos e do Estado para as
instituições que governam, considerando as interações econômicas e sociais entre eles.
Contudo, o conceito de governança não é algo novo. “ Discussões iniciais voltam a
pelo menos 400 aC (…), apresenta pilares fundamentais da "arte de governo", enfatizando a
justiça, ética e tendências anti-autocráticos. Identifica-se o dever do rei como sendo o de
proteger a riqueza do Estado e seus súditos para melhorar, manter e preservar esta riqueza,
bem como os interesses dos assuntos do reino” Kaufmann e Kraay (2008, p.3).
Para mensurar a governança nos países, bem como traçar comparativos entre as
economias, desenvolveram-se
indicadores de governança. Os mais consagrados são os
Worldwide Governance Indicators (WGI) deselvovidos pelo Banco Mundial e adotados por
mais de 200 países. Os WGI são um conjunto de dados de pesquisa resumindo as opiniões
sobre a qualidade da governança fornecida por um grande número de empresas, cidadãos e
especialistas entrevistados em países industrializados e em desenvolvimento. Por meio dos
indicadores de governança, medem-se aspectos importantes dos países, como: participação
dos cidadãos na seleção de seu governo, a liberdade de expressão, a estabilidade política e a
ausência de violência/terrorismo, entre outros não menos importantes.
Considerando a notória relevância social do tema, inúmeras pesquisas científicas
foram desenvolvidas ao longo de décadas pelas ciências sociais, principalmente na literatura
internacional, apontando novas abordagens e/ou ratificando conceitos consagrados e também
fazendo críticas aos modelos de indicadores difundidos na literatura. Diante disso, torna-se
necessário e oportuno conhecer o que a ciência tem disponibilizado sobre o assunto, bem
como quais os autores que publicam sobre o tema, quais os periódicos mais receptivos, quais
os termos mais difundidos nas pesquisas e quais os artigos de destaque na comunidade
científica, nesse contexto.
A partir destas informações, torna-se importante conhecer o conteúdo destas pesquisas
e como se posicionar em termos de análise sobre as publicações, adotando uma visão de
mundo sobre o assunto. Nesse processo, ter-se-á construído conhecimento acerca do tema e
tornar-se-á possível iniciar pesquisas científicas que tenham condições de contribuir
efetivamente com o tema.
Neste cenário, a pesquisa irá discorrer sobre os indicadores de governança no setor
público em um portfólio bibliográfico composto de artigos relevantes publicados em
periódicos internacionais. O objetivo deste estudo, de natureza exploratória-descritiva, é
construir nos pesquisadores o conhecimento acerca do tema, mediante análise bibliométrica
da literatura internacional, utilizando o processo Knowledge Development Process –
Constructivist (Proknow- C).
Para operacionalizar este estudo, será necessário estabelecer os seguintes objetivos
específicos:
a) estabelecer as bases de dados que apresentem periódicos na área das ciências
sociais, a serem utilizadas na pesquisa;
b) efetuar pesquisa nas bases de dados para seleção de um portfólio bibliográfico
representativo sobre indicadores de governança;
c) realizar análise bibliométrica nos artigos selecionados e em suas referências no
intuito de identificar os principais autores, periódicos, palavras-chave e artigos;
Justifica-se a presente pesquisa pela intenção de produzir conhecimento sobre o tema,
por meio da apresentação de um processo que possibilita esta construção de conhecimento e a
explicita aos demais pesquisadores.
A pesquisa encontra respaldo ainda pela oportunidade de promover a investigação
sobre indicadores de governança pública, apresentando de que forma o tema está sendo
discutido em nível internacional, seus avanços e suas restrições. Trata-se da discussão de um
tema de interesse nacional e internacional que poderá contribuir para o avanço da pesquisa
sobre governança, políticas públicas, controle social, transparência e participação popular.
O estudo será apresentado em cinco seções. A primeira consiste em apresentar uma
breve introdução ao tema. Na segunda seção, os procedimentos metodológicos são
explicitados bem como o instrumento de intervenção utilizado Proknow-C. Na terceira seção
faz-se uma revisão da literatura. Na quarta seção realiza-se a apresentação do processo
Proknow-C para a seleção do portfólio bibliográfico e análise bibliométrica. Por fim, na
quinta seção apresentam-se as considerações finais do estudo. Após encontram-se as
referências que embasaram o presente estudo.
2 PROCEDIMENTOS METODOLÓGICOS
Nesta seção apresenta-se o enquadramento metodológico do presente estudo e o
instrumento de intervenção utilizado.
2.1 Enquadramento Metodológico
Quanto aos objetivos a pesquisa caracteriza-se como exploratória e descritiva.
Segundo Gil (1999) a pesquisa exploratória objetiva gerar conhecimento sobre algo não muito
conhecido, mas principalmente promover a reflexão do assunto investigado. A presente
pesquisa promove a reflexão e gera conhecimento aos pesquisadores (agentes principais), que
estabelecem as delimitações para a seleção do portfólio bibliográfico a ser analisado e ilustra
a operacionalização do processo investigativo utilizado (Proknow-C). Ainda, descreve as
características de determinada população ou fenômeno, que neste caso trata-se do portfólio
bibliográfico e suas referências. Com relação a abordagem do problema, a pesquisa
caracteriza-se como sendo de natureza qualitativa-quantitativa. Qualitativa pois na primeira
etapa faz-se a construção do portfólio bibliográfico, segundo delimitações do pesquisador.. A
dimensão quantitativa é apresentada por meio da análise bibliométrica realizada nos artigos
do portfólio bibliográfico.
Trata-se de um estudo teórico-ilustrativo, segundo Ferreira e Yoshida (2004), busca a
reflexão sobre o problema que permeia a construção de um referencial teórico em um amplo
universo de pesquisa, seguido pela ilustração em uma aplicação de um processo estruturado
de revisão bibliográfica. Do ponto de vista dos procedimentos técnicos, é considerado do tipo
bibliográfico. Estudos bibliográficos consistem em “um levantamento de toda bibliografia já
publicada e que tenha relação com o tema de estudo” Lakatos e Marconi (2008, p. 57). Neste
caso, verificaram-se artigos científicos indexados em Bases de Dados.
2.2 Instrumento de Intervenção Knowledge Development Process – Constructivist
(Proknow- C)
Segundo Tasca et al (2010, p. 637) “o processo de encontrar o conhecimento deve
começar a partir da suposição de que o conhecimento está em publicações, bases de dados e
outras fontes de pesquisa. Este conhecimento amplamente difundido em última análise,
devem ser coletadas em um processo estruturado para a seleção dos estudos com maior
relevância acadêmica para o contexto do estudo, a fim de proporcionar um sólido arcabouço
teórico.” Estas circunstâncias levantam uma questão: como deve ser construído um processo
para selecionar as referências que são diretamente alinhadas com o contexto estudado e têm
alta relevância acadêmica?
Sob esta pesrspectiva, o Knowledge Development Process – Constructivist (ProknowC), proposto por Ensslin et al (2010), sob a ótica construtivista, apresenta um processo
estruturado para construir, no pesquisador, o conhecimento necessário para iniciar a pesquisa
acerca do tema que deseja investigar. Teve sua origem em 2009 e se consolidou a partir de
2010, quando surgiram as primeiras publicações. O Proknow-C, nome atribuído pelos
pesquisadores do Laboratório de Metodologias Multicritério em Apoio à Decisão
(LabMCDA) vinculado ao Departamento de Engenharia de Produção e Sistemas da
Universidade Federal de Santa Catarina, foi criado pela constatação da ausência de um
processo estruturado para a seleção e análise da literatura científica. Conforme Ensslin,
Ensslin e Pinto (2012, p. 333) “em 2012, o Proknow-C conta com várias publicações em
periódicos consolidando-se como processo para mapeamento do conhecimento, segundo as
delimitações, percepções do tema e motivações do pesquisador.”
O processo compõem-se de quatro etapas: (1) seleção de um portfólio de artigos sobre
o tema que se deseja investigar; (2) análise bibliométrica do portfólio; (3) análise sistêmica do
portfólio; e (4) definição de uma pergunta de pesquisa.
A presente pesquisa aborda duas das quatro etapas propostas no ProKnow-C. A figura
1, apresenta a visão macro do ProKnow-C:
Figura 1: Macro etapas do ProKnow-C
Fonte: Tasca et al (2010)
Na etapa 1, uma série de procedimentos sequenciais se iniciam, desde a definição dos
mecanismos de busca até a filtragem e seleção do portfólio bibliográfico relevante final sobre
o tema (Afonso et al, 2011). Esta etapa é toda delimitada pelo pesquisador conforme seu
entendimento.
A etapa seguinte busca evidenciar os artigos mais citados, os termos mais utilizados,
os autores mais profícuos e os periódicos que mais publicam sobre o tema que se deseja
conhecer. Desta forma, apresenta-se um mapeamento do tema.
O próximo passo no processo é a análise sistêmica, partindo de uma adoção de
posicionamento sobre a visão de mundo. Assim o PB é submetido a uma análise segundo as
lentes de análise estabelecidas segundo a visão de mundo adotada pelo pesquisador.
Realizadas estas três etapas, torna-se viável a última etapa, ou seja, por meio das
lacunas identificadas sobre o tema, o pesquisador tem condições de estabelecer uma pergunta
de pesquisa que indicará uma oportunidade de futuro estudo.
3 REFERENCIAL TEÓRICO
Apresenta-se nesta seção uma revisão de literatura para o embasamento teórico da
presente pesquisa.
3.1 Governança no Setor Público
De acordo com o Banco Mundial "governança é composta pelas tradições e
instituições pelas quais a autoridade de um país é exercido. Isso inclui o processo pelo qual os
governos são selecionados, monitorados e substituídos, a capacidade do governo de formular
e implementar políticas sólidas de forma eficaz, e o respeito dos cidadãos e do Estado para as
instituições que governam as interações econômicas e sociais entre eles”. (World Bank, 2013).
Diante disso, no cenário público, pode-se inferir que a governança relaciona-se não só
com os procedimentos administrativos de gestão, mas também com a inter-relação entre os
principais atores: cidadãos, políticos e servidores públicos.
O conceito é utilizado na arena pública para desencorajar certas ações governamentais
e promover outras, mesmo que embora as definições de governança normalmente não
contenham critérios morais e éticos que justifiquem tais conclusões. (Bouckaert e Van de
Walle, 2003).
Aspectos como a sustentabilidade dos governos também podem ser entendidas como
práticas de boa governança. Segundo Kaufmann e Kraay (2008), a maioria dos pesquisadores,
políticos e investidores reconhecem que a boa governança é um ingrediente relevante para o
desenvolvimento econômico sustentado. Para os autores, esta crescente compreensão,
inicialmente informada por um conjunto muito limitado de medidas empíricas de governança,
tem estimulado grande interesse no desenvolvimento de indicadores de governança mais
refinados (Kaufmann e Kraay, 2008).
Contudo, o que se encontra na literatura internacional sobre o tema, indica que a
governança deve ser implementada levando em conta os aspectos particulares de cada
economia e não deve ser aplicada como um “provérbio” que se encaixe perfeitamente à todas
instiuições. (Andrews, 2008).
Um bom exemplo disso pode ser observado na pesquisa de Young e Wenhao (2012)
em que argumenta que “uma vez que os cidadãos vivem em áreas locais, a governança de
áreas locais, não só determina a vida dos cidadãos, mas também determina coletivamente a
gestão de todo o país. (Yong e Wenhao, 2012, p 3). Portanto, a governança das cidades, como
mostra em seu estudo,
tem profundas implicações políticas, econômicas e sociais que
merecem uma análise aprofundada.
As cidades apresentam diferentes níveis de
desenvolvimento econômico e governança pública, especialmente nos países em
desenvolvimento.
Diante destas informações, observam-se a existência de disparidade entre as cidades
dentro de um país, o que pode também ocorrer entre os Estados e suas instituições, tornandose necessário o desenvolvimento de mecanismos subjacentes da governança pública que
possam atender a tais particularidades e conduzir as ações dos governos à eficácia.
3.2 A Mensuração da Governança através de Indicadores
Que as políticas públicas devem conduzir à um governo eficaz, acredita-se que a
maioria concorda. No entanto, a maioria das pessoas têm dificuldade em definir o que é um
governo eficaz, segundo Andrews (2008). Para mensurar a eficácia dos governos, a literatura
apresenta avanços por meio de inúmeras pesquisas científicas desenvolvidas sobre o assunto,
principalmente sobre a adoção de práticas de boa governança.
Na última década, observam-se uma série de estudos sobre indicadores de governança,
na tentativa de criar modelos adequados e aplicáveis aos países. Existem diversos tipos de
indicadores de governança como: Boivard e Loffler (2003); Van de Walle (2003); Thomas
(2009) entre outros, que apontam uma grande variedade de características estruturais, sociais
e de gestão como forma de medir a eficácia dos governos. Contudo, o produto mais difundido
e adotado na literatura acerca do tema são os Indicadores de Governança Mundial, ou em
inglês Worldwide Governance Indicators (WGI), de autoria de Kaufmann, Kraay e Mastruzzi
(1999), formulados para um projeto de iniciativa do Banco Mundial.
Bons indicadores de governança de alguma forma buscam fornecer uma definição e,
geralmente, refletem o que muitos considerariam características apropriadas de governos
eficazes.
Alguns destes sugerem disciplina fiscal e descentralização de serviços como
respostas às necessidades dos cidadãos, por exemplo. A maioria dos indicadores utilizados na
literatura concentra-se em uma longa lista de características, enquanto outros apontam
medidas individuais (Kaufmann et al.(1999); Knack, Kugler e Manning (2003); e Andrews
(2008). Os WGI, de iniciativa de pesquisadores do Banco Mundial, foram criados no intuito
de formar um Ranking entre os países de acordo com a qualidade da governança. Por agregar
dados de muitas fontes disponíveis, os WGI foram baseados em 340 variáveis produzidas por
32 fontes diferentes, incluindo: provedores de informações comerciais, pesquisas de empresas
e famílias, organizações não-governamentais e organizações do setor público (Kaufmann e
Kraay, 2008).
As definições dos indicadores são as seguintes:
(1) Voz e Responsabilização: mede percepções do grau em que os cidadãos do país são
capazes de participar na seleção de seu governo, bem como liberdade de expressão, liberdade
de associação e de uma imprensa livre;
(2) Estabilidade Política e Ausência de Violência – mede as percepções da
probabilidade
de
que
o
governo
vai
ser
desestabilizado
ou
derrubado
por
inconstitucionalidade, meios adicionais ou violentos, incluindo o terrorismo;
(3) Eficácia do Governo – mede a qualidade dos serviços públicos, o grau de sua
independência das pressões políticas, a qualidade da formulação e implementação da política
e da credibilidade bem como o compromisso do governo com tais políticas;
.
(4) Qualidade Regulatória - mede percepções da capacidade do governo de formular e
implementar políticas e regulamentos que permitem e promovem o desenvolvimento do setor
privado;
(5) Estado de Direito – mede o grau em que os agentes têm confiança e respeitam as
regras da sociedade, e em particular a qualidade da execução de contratos, a polícia e os
tribunais, bem como a probabilidade de crime e violência; e
(6) Controle da Corrupção – mede percepções que incluem tanto pequenas formas
quanto grandes formas de corrupção.
Os indicadores WGI foram produzidos ao longo do período 1996 a 2011 utilizados por
cerca de 215 economias. Ao longo deste período, vários artigos têm sido escritos apresentando
os conjuntos de dados, por Kaufmann e outros autores. A construção cuidadosa dos
indicadores, a sua cobertura global e a alegação de que eles podem alcançar a máxima
precisão tornam os indicadores atraentes para os mais diversos investigadores (Thomas,
2009).
No campo acadêmico, nos últimos anos, a governança no cenário público tem gerado
uma série de debates sobre os resultados apresentados pelos indicadores e se estes podem
lançar luz sobre várias dimensões de governança. Segundo Kaufmann e Kraay (2008, p.4)
“nenhum indicador ou combinação de indicadores pode proporcionar uma medida
completamente fiável [...]”. Porém, os autores argumentam que mesmo considerando a
existência de margens de erro na interpretação dos indicadores de governança, é fato de que
tais margens de erro são finitas e que ainda assim são capazes de permitir comparações
significativas entre países ao longo do tempo e que a medição é viável e informativa.
Kaufmann e Kraay (2008).
No artigo intitulado “Governance Indicators: Where Are We, Where Should, We Be
Going?” de Kaufmann e Kraay (2008) sobre a construção de indicadores de governança, os
autores consideram 2 grandes grupos de avaliação do governo, são eles: indicadores baseados
em regras de governança ou indicadores baseados em resultados de governança. Ambos os
tipos de indicadores tem suas próprios pontos fortes e fracos e, portanto, todos os indicadores
devem ser pensado como imperfeitos, mas complementares para os aspectos de governança
que se pretende medir.
Pesquisas nacionais e internacionais sobre o assunto refletem a crescente preocupação
com a utilização de indicadores de governança como forma de medir o desempenho e a
eficácia do governo (Bovaird e Löffler (2003); Bouckaert e Van de Walle (2003); Williams e
Siddique (2008); Bhagat, Bolton e Romano (2008); Andrews (2008); Knoll e Zloczysti
(2011); Alber, Holtmann e Marquardt (2011) e provocam discussões sobre sua estrutura,
limitação e replicação.
A pesquisa de Andrews (2008) intitulada “The Good Governance Agenda: Beyond
Indicators without Theory”, apresenta questionamentos sobre a utilização de um modelo de
indicadores como forma de medir um governo eficaz. O estudo provoca a discussão sobre o
tema, colocando três questões básicas a serem refletidas sobre à utilização de melhores
práticas em geral, especialmente no setor público: O modelo de indicadores é consistente o
suficiente para sugerir que um governo é eficaz ?; É o modelo correto e apropriado, e com os
seus elementos é capaz de explicar de forma confiável a relevância dos resultados? Trata-se
de um modelo replicável, de tal forma que seus elementos são reproduzidos com confiança e
com resultados confiáveis?
Na percepção do autor, os modelos apresentados na literatura são de uso limitado, e
quando replicados em contextos diferentes (o autor refere-se a países com realidades sociais,
econômicas e políticas diversas) parecem “provérbios que se encaixam mal no contexto
errado e se contradizem” (Andrews, 2008, p. 380). Em suas conclusões, enfatiza que os
modelos de indicadores de governança largamente utilizados carecem de consistência,
exatidão e replicabilidade e, muitas vezes, podem gerar problemas de governança, em vez de
soluções. Em mesma linha, tem-se as pesquisas de Bhagat, Bolton e Romano (2008);
Williams e Siddique (2008); Thomas (2009) e Apaza (2009), que particularmente sobre o
WGI, questionam aspectos sobre a capacidade dos indicadores de governança medir conceitos
subjacentes e a forte sobreposição de conteúdos dos indicadores.
De modo geral, as pesquisas científicas apontam inúmeras fraquezas sobre a utilização
de indicadores de governança no setor público, porém uma forma alternativa de medição não
é apresentada em sua plenitude. Observam-se apenas a tentativa de alguns autores em inserir
variáveis mais específicas sobre os governos analisados, incorporando suas particularidades
sociais, econômicas e culturais aos indicadores, reduzindo questões subjetivas e más
interpretações.
4 RESULTADOS
Esta seção objetiva apresentar os resultados da utilização do processo ProKnow-C
para seleção de um portifólio bobliográfico relevante sobre o tema indicadores de governança
no setor público.
4.1 Seleção de artigos para o portfólio bibliográfico
A coleta de artigos ocorreu entre os dias 14 de junho a 16 de junho de 2013. Nestas
datas realizou-se a fase de seleção do PB, conforme previsto no ProKnow-C. A primeira tarefa
é selecionar as bases de dados a serem pesquisadas. No caso, foram consideradas seis bases de
dados: EBSCO, ProQuest, Scopus, Willey, Science Direct e Web of Science/ISI Web, por
conter periódicos relacionados à área de conhecimento “Ciências Sociais Aplicadas”, subárea “Administração de Empresas, Administração Pública e Contabilidade”.
Foram criados eixos de pesquisa conforme percepção dos pesquisadores sobre o tema.
Em seguida criaram-se um conjunto de palavras-chave para cada eixo, conforme Figura 2:
Governance
Public
Sector
Figura 2: eixos e palavras-chave para seleção do PB
Fonte: Autores
Indicator
Com base na combinação das palavras-chaves dos eixos 1, eixo 2 e eixo 3, nos
campos: título, resumo e palavras-chave nas bases de dados selecionadas, buscou-se artigos a
partir do ano de 2000, por entender que há uma significativa representatividade de artigos nos
últimos 13 anos, mostrando a evolução das pesquisas.
Obteve-se um total de 4.672 artigos científicos publicados em periódicos
internacionais, os quais foram exportados para o software Endnote X3. Com a utilização deste
software foi possível identificar os artigos duplicados, ou seja, aqueles que apareciam em
mais de uma base de dados. Feita as exclusões, restaram 2.605 artigos no banco de artigos
brutos.
Fez-se em seguida a leitura dos títulos dos 2.605 artigos, constatando-se 83 artigos
alinhados com o tema de pesquisa.
O próximo passo foi a verificação da representatividade destes artigos (número de
citações na literatura), por meio de consulta ao site google acadêmico. Foram considerados
90% do total geral de citações de todos os artigos do PB, o que resultou em um ponto de corte
de 19 citações. Com 19 ou mais citações, encontram-se 33 artigos, sendo que 2 deles de
grande representatividade científica (4.292 citações e 533 citações respectivamente), motivo
pelo qual não participaram do total de citações na consideração dos 90% mais citados, sendo
os mesmos considerados diretamente como os mais relevantes.
Verificaram-se ainda os artigos recentes (publicados a partir de 2011) considerando
que os mesmos não mostraram representatividade científica por não terem tempo hábil na
literatura e, também os artigos anteriores a 2011, mas de autores de artigos relevantes (dentre
os 33 artigos selecionados inicialmente).
Considerando-se os 33 artigos com representatividade científica, 25 artigos publicados
a partir de 2011 e 03 artigos não recentes, mas de autores consagrados, foram feitas as leituras
dos resumos de 61 artigos científicos.
Destes, resultaram 31 artigos considerados alinhados ao tema de pesquisa. A próxima
etapa consiste em verificar a disponibilidade integral destes artigos nas bases de dados, os
quais resultaram em 28 artigos.
Dos 28 artigos, apenas 16 artigos foram considerados alinhados integralmente ao tema
de pesquisa. Os 16 artigos são mostrados na Tabela 1, a seguir:
Tabela 1: artigos que compõem o Portifólio Bilbiográfico
Ano
N°
Citações
Are there visible accession effects? Comparing some key indicators of
J. Alber, A. C. Holtmann and S.
the trajectories of central and eastern European countries inside and
Marquardt
outside the EU since the 1990s
2011
2
Citizen-centric governance indicators: Measuring and monitoring
governance by listening to the people
2011
2
2003
134
2012
3
Autor
M. Ivanyna and A. Shah
Título
Comparing measures of citizen trust and user satisfaction as indicators
G. Bouckaert and S. Van de
of 'good governance': Difficulties in linking trust and satisfaction
Walle
indicators
Developing a City Governance Index: Based on Surveys in Five Major
G. Yong and C. Wenhao
Chinese Cities
T. Bovaird and E. Löffler
Evaluating the quality of public governance: Indicators, models and
methodologies
2003
134
D. Kaufmann and A. Kraay
Governance indicators: Where are we, where should we be going?
2008
176
2004
533
2012
7
2009
22
2010
8
2003
66
D. Kaufmann, A. Kraay and M. Governance matters III: Governance indicators for 1996, 1998, 2000, and
Mastruzzi
2002
K. E. Davis, B. Kingsbury and
Indicators as a Technology of Global Governance
S. E. Merry
Measuring governance and corruption through the worldwide
C. R. Apaza
governance indicators: Critiques, responses, and ongoing scholarly
discussion
D. Kaufmann, A. Kraay and M.
Response to 'what do the worldwide governance indicators measure?'
Mastruzzi
S. Knack, M. Kugler and N.
Second-generation governance indicators
Manning
M. Andrews
The good governance agenda: Beyond indicators without theory
2008
62
M. Knoll and P. Zloczysti
The Good Governance Indicators of the Millennium Challenge
Account: How Many Dimensions are Really Being Measured?
2012
2
S. Bhagat, B. Bolton and R.
The promise and peril of corporate governance indices
Romano
2008
127
A. Williams and A. Siddique
The use (and abuse) of governance indicators in economics: A review
2008
36
M. A. Thomas
What Do the Worldwide Governance Indicators Measure?
2010
135
Fonte: Autores
4.2 Análise Bibliométrica
Os gráficos 1 a 5 apresentam a análise bibliométrica realizada nos 16 artigos que
compõem o portfólio bibliográfico, evidenciando a segunda etapa do processo ProKnow-C
sobre o tema indicadores de governança no setor público. O objetivo é quantificar as
informações existentes e explicitar suas principais características. A bibliometria evidenciará:
a) os autores de maior destaque no PB e em suas referências; b) os periódicos de maior
relevância; c) as palavras-chaves mais difundidas nos artigos; e d) os artigos de maior
destaque.
a) Autores de maior destaque no Portfólio Bibliográfico:
Entre os autores de maior destaque no PB apresenta-se Daniel Kaufmann. O autor é
expressivo tanto nos artigos do PB quanto em suas referências.
Há mais de uma década
Kaufmann em conjunto com Aart Kraay e Massimo
Mastruzzi desenvolvem pesquisas sobre os WGI, tornando-se referência sobre o assunto. Seus
artigos científicos possuem expressiva representatividade, como o estudo sobre indicadores
desenvolvido pelos autores em 2009, o qual foi citado 4.292 vezes na literatura, considerando
o mês de junho de 2013 como referência.
O gráfico 1 ilustra a representatividade dos autores.
Gráfico 1: Representatividade dos autores no PB e em suas referências.
Fonte: Autores
b)Periódicos de maior relevância:
Verifica-se que os periódicos de maior relevância no PB não necessariamente
representam o maior fator de impacto.
Os gráficos 2 e 3 ilustram as informações verificadas na bibliometria sobre os
periódicos. Tem-se com estas informações os periódicos mais receptivos ao tema, bem como
os mais expressivos na literatura.
Relevância dos periódicos do PB
World Development
International Review of Administrative Sciences
Journal of European Public Policy
American Economic Review
Journal of the Royal Statistical Society. Series A: Statistics in Society
Journal of Public Administration Research and Theory
NBER Working Paper
Public Administration
International Journal of Public Administration
Journal of Common Market Studies
Public Choice
World Bank Economic Review
Public Money and Management
Readings in Human Development
0
1
2
3
4
5
6
7
Gráfico 2: Relevância dos periódicos no PB
Fonte: Autores
O gráfico 3, mostra o fator de impacto dos periódicos (JCR/SRJ):
Análise do fator de Impacto (JCR/SRJ) dos Periódicos do PB
2,5
2
1,5
1
0,5
Fo
ru
m
is
op
ic
12
0,
31
4
0,
ol
ci
So
0
og
ic
CE
S
i fo
ky
Ca
s
lit
Po
d
an
ce
en
ci
lS
ca
i ti
ol
-P
PS
7
46
Eu
0,
ro
p
s
es
tS
en
m
op
De
ve
l
rd
Ox
fo
9
48
ea
n
0,
Jo
tu
ea
tR
es
en
m
op
fD
ev
el
lo
ur
na
6
57
0,
di
rc
h
rc
h
Re
s
rs
In
al
ci
So
Ec
6
60
0,
na
ti o
rn
a
0,
51
4
te
In
5
0,
85
ea
nc
to
ca
di
ic
om
on
m
Ad
of
w
lR
ev
ie
Go
ve
rn
a
of
tra
is
in
an
w
La
6
92
0,
e
es
nc
ie
ti v
e
et
ci
So
d
s
op
De
ve
l
or
ld
W
8
32
1,
Sc
m
yR
ev
ie
en
w
t
er
ve
r
Ob
s
rc
h
ea
Re
s
nk
Ba
or
ld
33
1,
1,
84
3
8W
W
2,
or
ld
23
5
Ba
Co
l
nk
um
Ec
bi
on
a
om
La
w
ic
Re
vi e
Re
vi e
w
w
0
Gráfico 3: Relevância dos periódicos no PB
Fonte: Autores
c)Palavras-chaves mais difundidas nas pesquisas científicas:
Além das palavras de maior destaque, outras expressões ligadas ao contexto das
pesquisas foram identificas, algumas destas palavras são: “corruption”, “rule of law”,
“index”, “governance indicators”. O grafico 4 apresenta as palavras-chave mais utilizadas
nos artigos do PB.
Gráfico 4: Palavras-chave de maior destaque nos artigos do PB
Fonte: Autores
d)Artigos mais relevantes:
Ratificando a notoriedade dos autores, o artigo intitulado “Governance matters III:
Governance indicators for 1996, 1998, 2000, and 2002” de Kaufmann, Kraay e Mastruzzi
(2004) é citado 533 vezes na literatura, considerando junho de 2013 como o mês de referência
para esta informação. O segundo artigo de maior destaque no PB, intitulado “Governance
indicators: Where are we, where should we be going?” dos autores Kaufmann, Kraay (2008)
aparece citado na literatura 176 vezes. O gráfico 5 ilustra as informações verificadas nesta
análise.
Relevância dos Artigos do PB
D. Kaufmann, A. Kraay and M. Mastruzzi (2004)
D. Kaufmann and A. Kraay (2008)
M. A. Thomas (2010)
T. Bovaird and E. Löffler (2003)
G. Bouckaert and S. Van de Walle (2003)
S. Bhagat, B. Bolton and R. Romano (2008)
S. Knack, M. Kugler and N. Manning (2003)
M. Andrews (2008)
A. Williams and A. Siddique (2008)
C. R. Apaza (2009)
D. Kaufmann, A. Kraay and M. Mastruzzi (2010)
K. E. Davis, B. Kingsbury and S. E. Merry (2012)
G. Yong and C. Wenhao (2012)
M. Knoll and P. Zloczysti (2012)
J. Alber, A. C. Holtmann and S. Marquardt (2011)
M. Ivanyna and A. Shah (2011)
0
100
200
300
400
500
600
Gráfico 5: Artigos de destaque no PB
Fonte: Autores
A análise bibliométrica dos artigos do PB realizada neste estudo possibilitou o
mapeamento do tema de interesse, demonstrando o estado de arte do tema por meio de artigos
científicos expressivos na literatura.
5 CONSIDERAÇÕES FINAIS
Com a utilização de um processo estruturado para mapeamento de artigos relevantes
sobre o tema de interesse do pesquisador, no caso do presente estudo indicadores de
governança no setor público, foi possível identificar as principais características do portfólio
bibliográfico. Este estudo, mediante a utilização do instrumento de intervenção ProKnow-C,
possibilitou a verificação de: (1) as principais bases de dados que apresentam periódicos na
área das ciências sociais, que publicaram pelo menos 1 artigo sobre o tema; (2) a seleção de
um portfólio bibliográfico representativo sobre indicadores de governança; (3) uma análise
bibliométrica nos artigos selecionados e em suas referências no intuito de identificar os
principais autores, periódicos, palavras-chave e artigos de destaque. Com este conhecimento
construído ao longo da pesquisa, torna-se possível identificar lacunas sobre o tema e, com a
conclusão de todas as etapas do ProKnow-C, o pesquisador teria condições de verificar
oportunidades de futuras pesquisas, como afirmam Tasca et al (2010); Chaves et al (2013) e
Ensslin, Ensslin e Pinto (2013).
A formação do PB e sua análise apresenta os seguintes achados:
As bases EBSCO, ProQuest, Scopus, Willey, Science Direct e Web of Science/ISI
Web, devem ser pesquisadas por conter periódicos relacionados à área de conhecimento
“Ciências Sociais Aplicadas” e apresentaram artigos científicos sobre o tema.
A combinação das palavras-chaves: governance, public sector, govern, public services,
index, indices e indicator, nos campos: título, resumo e palavras-chave nas bases de dados
selecionadas, a partir do ano de 2000, apresentaram um total de 4.672 artigos científicos
publicados em periódicos internacionais; Destes, verificam-se 83 artigos alinhados com o
tema de pesquisa.
Quanto a representatividade, encontram-se 33 artigos com
representatividade científica, dos quais 16 artigos foram considerados alinhados integralmente
ao tema de pesquisa.
Entre os autores de maior destaque no PB apresenta-se Daniel Kaufmann. O autor é
expressivo tanto nos artigos do PB quanto em suas referências.
O artigo intitulado “Governance matters III: Governance indicators for 1996, 1998,
2000, and 2002” de Kaufmann, Kraay e Mastruzzi (2004) é citado 533 vezes na literatura,
considerando junho de 2013 como o mês de referência para esta informação, sendo o de maior
destaque no PB.
As palavras-chaves mais difundidas são: governance, institutional quality e economic
growth. Dentre os periódicos de maior receptividade ao tema, tem-se: World Development,
International Review of Administrative Sciences e Journal of European Public Policy.
Mesmo considerando-se as limitações deste estudo, pois apresenta o mapeamento de
artigos disponíveis somente nas bases de dados do portal da CAPES, acredita-se que o
conhecimento gerado ao longo da investigação mediante a apresentação de um processo
estruturado para busca de artigos científicos representativos, contribui para a comunidade
científica e para o pesquisador, e permite a replicação de futuras pesquisas, utilizando outras
delimitações.
Referências
Afonso, M. H. F.; Souza, J. V.; Ensslin, S. R.; Ensslin, L. (2011) Como construir
conhecimento sobre o tema de pesquisa? Aplicação do processo proknow-c na busca de
literatura sobre avaliação do desenvolvimento sustentável. Revista de Gestão Social e
Ambiental, 5(2) 47-62.
Alber, J.; Holtmann, A.C.; Marquardt, S. (2011) Are There Visible Accession
Effects?Comparing Some Key Indicators of the Trajectories of Central and Eastern European
Countries Inside and Outside the EU since the 1990s . Sociologický časopis/Czech
Sociological Review, 47(3), 473-506.
Andrews, M. (2008) The Good Governance Agenda: Beyond Indicators without Theory.
Oxford Development Studies, 36(4), 379-407.
Bhagat, S.; Bolton, B.; Romano, R. (2008) The Promise and peril of corporate governance
indices.Columbia Law Review. 108(8).
Bouckaert, G; Van de Walle, S. (2003) Comparing measures of citizen trust and user
satisfaction as indicators of 'good governance': Difficulties in linking trust and satisfaction
indicators . International Review of Administrative Sciences, 69, 329-343.
Bovaird, T.; Löffler. E. (2003) Evaluating the quality of public governance: Indicators, models
and methodologies. International Review of Administrative Science, 69, 313-328.
Ensslin, L., Ensslin, S. R., Lacerda, R. T. O., & Tasca, J. E. (2010). ProKnow-C, Knowledge
Development Process- Constructivist. Processo técnico com patente de registro pendente
junto ao INPI, Brasil.
Ensslin, L.. Ensslin, S. R.; PINTO, H.M. (2013) Processo de investigação e análise
bibliométrica: avaliação da qualidade dos serviços bancários. Revista de administração
contemporânea, 17(3) Curitiba.
Ferreira, N. S; Yoshida, E. M. P. Produção Científica sobre psicoterapias breves no Brasil
e demais países latino- americanos (1990-2000). Est. Psicol., Natal, 3(3),523-531, 2004.
Gil, A.C. Métodos e Técnicas de Pesquisa Social. 5ª ed. São Paulo: Atlas, 1999.
Kaufmann, D.; Kraay, A ; Zoido-Lobaton, P. (1999) Governance Matters, World Bank Policy
Research Working Paper 2196.
Kaufmann, D.; Kraay, A.; Mastruzzi, M. (2003) Governance Matters III: Governance
Indicators for 1996-2002. Policy Research Working Paper. 3106 ,1-122.
Kaufmann, D.; Kraay, A. (2008) Governance Indicators: Where Are We,Where Should We
Be Going? The World Bank Research Observer, 23(1), 1-30.
Knack, S.; Kugler, M.; Manning, N. (2003) Second-generation Governance Indicators, in this
issue.
Knoll, M.; Zloczysti, P. (2012) The Good Governance Indicators of the Millennium Challenge
Account How many dimensions are really being measured? World Development. 40, 900–
915 .
Marconi, M.A.; Lakatos, E.M. Técnicas de pesquisa: planejamento e execução de
pesquisas, amostras e técnicas de pesquisa, elaboração, análise e interpretação de dados.
7. ed. São Paulo: Atlas, 2008.
Tasca, J.E.; Ensslin, L.; Ensslin, S.R; Alves, M. (2010) An approach for selecting a theorical
framework for the evaluation of training programs. Journal of European Industrial
Training, 34(7), 631-655.
Thomas, M.A. (2009) What Do the Worldwide Governance Indicators Measure? European
Journal of Development Research, 22, 31–54.
Williams A ; Siddique A . (2008) The use (and abuse) of governance indicators in economics:
a review. Economics of Governance , 9, 131–175.
World
Bank.
The
Worldwide
Governance
Indicators
(WGI)
Project.
Disponível em: http://info.worldbank.org/governance/wgi/index.asp acesso em 08 jul 2013.
Yong, G.; Wenhao, C. (2012) Developing a City Governance Index: Based on Surveys in Five
Major Chinese Cities. Soc Indic Res , 109, 305–316.