XXII Encontro Nacional de Engenharia de Produção
Curitiba – PR, 23 a 25 de outubro de 2002
UMA ANÁLISE SOBRE A INFLUÊNCIA DOS PERIÓDICOS
NAS PUBLICAÇÕES NA ÁREA DE QUALIDADE
Milton Odajima Gomes
Paulo Henrique Paulista
João Batista Turrioni
Universidade Federal de Itajubá – Av. BPS, 1303 – Bairro Pinheirinho
CEP 37500 – 903 – Itajubá – Minas Gerais
e-mail: [email protected]
Abstract
This work describes a methodology to determine the relative importance of using
various journals in the field of quality management in Brazil. A citation analysis is used to
determine the relative importance of various journals. The results shows that the journals
with the most importance to the quality management are Harvard Business Review,
Journal of Quality Technology, and Quality Progress
KEY WORDS: Quality, Citations analysis, journals.
1. Introdução
Sobre a área de qualidade, segundo Ribeiro e Cauchick (2001), “o conceito de
qualidade passou formalmente para a função de gerenciamento e muitas mudanças vêm
ocorrendo. Dentro da realidade empresarial, a qualidade passa a incorporar várias funções,
associadas não somente à inspeção dos produtos, mas também marketing, desenvolvimento
de produtos e processos e atendimento ao cliente.”
O objetivo deste trabalho é diagnosticar a pesquisa na área da qualidade no Brasil.
A questão Básica que se apresenta é: “Como os pesquisadores vêm conduzindo a
pesquisa na área da Gestão da Qualidade no Brasil?”.
Neste trabalho inicia-se a discussão , na escolha de uma das onze áreas da
Engenharia da Produção. A área escolhida foi a área de qualidade, mas pretende-se
desenvolver outros trabalhos englobando todas as Engenharias de Produção.
2. Justificativas do trabalho
Devido ao crescimento na pesquisa em Engenharia de Produção no Brasil,
atualmente os programas de pós-graduação estão na faixa de vinte e sendo seis deles já
possuem doutorado. Também a importância da Engenharia de Produção, recebida no
Brasil, prova disto foi o “boom” recente pela procura de várias empresas por tal
profissional.
A classificação apresentada neste artigo indica, na área de qualidade na Engenharia
de Produção, periódicos que apresentam consistência e qualidade em seus artigos sendo
muito necessário e dentre os principais motivos, podemos citar:
A classificação de periódicos pode-se ser utilizado por pesquisadores para tomarem
como referência quais periódicos exercem mais influência e aonde podem encontrar artigos
ou para servirem de referência a idéias de novos trabalhos ou como complemento às
produções científicas.
ENEGEP 2002
ABEPRO
1
XXII Encontro Nacional de Engenharia de Produção
Curitiba – PR, 23 a 25 de outubro de 2002
Editores de periódicos podem fazer um controle em seus processos de seleção de
artigos, ou sua logística de distribuição ou sua propaganda. Assim, se houverem algumas
falhas podem ser corrigidas, seja para serem mais rigorosos na seleção dos artigos, seja
para ficarem mais atentos a atualidades ou até divulgarem mais seus periódicos.
Muitos pesquisadores e até estudantes terão uma referência para consultaram
alguma periódico, seja para enriquecimento do conhecimento, seja por pesquisas.
Faculdades podem selecionar melhor seus acervos pelo nível de importância das
periódicos, podendo pedir assinatura de periódicos, até antes, de certa forma
desconhecidas.
O meio acadêmico pode começar a discutir a Engenharia de Produção como um
todo e também os editores de periódicos podem chegar a uma padronização de uma seleção
dos artigos, aonde se pode ter uma referência sólida, menos sujeita a erros e eficiente. Com
isto, diminui-se a diferença no modo de elaboração de artigos de um centro de pesquisa ao
outro, aonde temos critérios adotados, de certa forma arbitrárias, por motivos de não
existirem procedimentos e padrões eficientes já definidos orientando os pesquisadores.
Pode-se dar um impulso à produção científica brasileira, aumentando sua importância e
divulgação no exterior, aonde pode-se ter uma melhor avaliação do trabalho de
pesquisadores brasileiros a nível mundial.
3. Estudos Anteriores
Alguns estudos já vem desenvolvendo análises na pesquisa em Engenharia de
Produção através do estudo dos periódicos mais utilizados na área.
Entre estes estudos destacam-se Vokurka (1996), Scudder e Hill (1998) e Soteriou
et all (1999), estes trabalhos são a base para a realização dos objetivos desta pesquisa.
Vokurka (1996) faz uma classificação dos periódicos utilizados na Engenharia de
Produção com o objetivo de determinar a importância relativa dos mesmos e com isto
fornecer uma base para a decisão dos pesquisadores tanto em relação a consulta como em
relação a escolha para divulgação dos resultados da pesquisa.
Vokurka usa uma metodologia com base em citações afirmando que esta ajuda na
avaliação dos periódicos baseado-se na circulação total dos mesmos e na proporção
deleitores regulares. Esta é segundo este autor, a forma objetiva de avaliar os periódicos e
se opões as Surveys que são consideradas subjetivas.
Os indicadores propostos neste tipo de análise são o número total de citações (nct),
índice de citações (nct/total de artigos publicados).
Vokurka (1996) usou como base para sua análise três periódicos da Engenharia de
Produção – Decision Sciences, Journal of Operations Managemente e Management
Science, argumentando que estes foram reconhecidos com periódicos de alta qualidade em
pesquisas anteriores foram reconhecidos como periódicos de alta qualidade em pesquisas
anteriores (Saladin (1985), Barman et al. (1991)).
O período de análise englobou três anos dos periódicos e foram analisados um total
de 525 artigos com os resultados apresentados na tabela 1:
Decision Sciences
Journal
Operations
Managemente
27
766
28,4
499
220
52
Total de artigos
159
Citações
1677
Citações/Artigo
31,1
Artigos
1118
Livros
343
Anais, Disertações, 146
Teses
Tabela 1 – Resultados da Pesquisa de Vokurka (1996)
ENEGEP 2002
ABEPRO
of Management
Science
339
1609
24,7
1108
322
176
Total
525
4052
28,07
2725
885
374
2
XXII Encontro Nacional de Engenharia de Produção
Curitiba – PR, 23 a 25 de outubro de 2002
Os periódicos mais citados foram o Management Science, International Journal of
Production Research, Decision Sciences, Journal of Operations Management , IEE
Transactions e Harvard Business Review.
Esta medida representa o impacto destes periódicos na Pesquisa em Engenharia de
Produção sem considerar o número de artigos publicados em cada periódico.
Scudder e Hill (1998) analisam os métodos de pesquisa usados na Engenharia de
Produção com destaque para o uso da pesquisa “empírico”, dados que são derivados da
observação natural da realidade industrial.
Os resultados encontrados demonstram que o método Survey é o método mais
utilizado e que também o Estudo de Caso vem tendo a sua utilização com uma tendência
crescente. De uma forma geral a pesquisa conclui que a utilização de métodos empíricos
vem crescendo significativamente.
Soteriou et al (1999) desenvolveu uma classificação dos periódicos a partir da
consulta a pesquisadores europeus e adotando critérios próprios, levando em conta a
qualidade e a relevância dos jornals, apresenta como resultado uma classificação das
periódicos em Engenharia de Produção onde destacamos na tabela 2 as 10 periódicos
melhor classificados.
Overall Ranks
Journal
1
Journal of Operations Management
2
International Journal of Operations and Production Management
3
Management Science
4
Production and Operations Management
5
International Journal of Production Research
6
Operations Research
7
European Journal of Operational Research
8
International Journal of Production Economics
9
Harvard Business Review
10
Sloan Management Review
Tabela 2 –Classificação Resumida da Pesquisa de Soteriou et al (1999)
4. Procedimento Experimental
Primeiramente foi definida a área aonde seria feita uma pesquisa bibliográfica,
visando as periódicos citadas no artigo. Escolhendo uma área, pode-se fazer uma análise
mais confiável sobre o número de citações dos artigos, pois as periódicos tratam de áreas
específicas, por exemplo, como a Engenharia de Produção é composto de vários tópicos
como marketing, ergonomia e qualidade e a cada uma dessas áreas possui um conjunto de
periódicos que tratam melhor sobre tais, e para ter uma análise mais confiável escolhemos
uma área. E a de qualidade foi a escolhida.
Assim consegue-se identificar quais periódicos são mais influentes em determinada
área. Vokurka (1995), fez uma análise bibliográfica em três periódicos em administração,
para verificar quais periódicos eram mais influentes.
Neste presente artigo, a amostra foi composta dos periódicos mais influentes da
Engenharia de Produção no Brasil, ENEGEP, Gestão & Produção, Periódico Produção,
RAE-FGV e RAU-USP . Definida a amostra, foram identificados os artigos que tratam na
área de qualidade nos seguintes períodos;
ENEGEP – 1996 – 2001;
Periódico Produção – 1991 - 2001;
Periódico Gestão & Produção – 1994 – 2001;
Periódico RAE – FGV – 1991 – 2001;
Periódico RAU – USP – 1991-2001;
ENEGEP 2002
ABEPRO
3
XXII Encontro Nacional de Engenharia de Produção
Curitiba – PR, 23 a 25 de outubro de 2002
Assim, foi feito uma análise bibliográfica verificando quais as periódicos
mais citadas. Foram verificados 480 artigos na área de qualidade.
Os critérios adotados na escolha dos artigos foram:
• Classificação de acordo com o ENEGEP para tais artigos;
• Classificação de acordo com o site http://www.ufrgs.br/abepro/periódico/
da periódico produção e procura nos periódicos de acordo com leituras dos
artigos;
• Na periódico Gestão & Produção foi classificado de acordo na análise dos
resumos dos artigos e se preciso, uma análise do artigo integralmente;
• Na RAE – FGV e na RAU – USP foram adotados os mesmos critérios da
Periódico Gestão & Produção.
Com a amostra definida, ocorreu uma pesquisa bibliográfica, a fim de identificar e
registrar quais periódicos foram citadas em cada artigo na área de qualidade pesquisada.
5. Apresentação e Análise de Resultados
É importante ressaltar que o periódico mais citado é o que apresenta maior
influência no meio acadêmico em Engenharia de Produção na área da qualidade. Pode-se
considerar variáveis como acesso às periódicos ou como propaganda promovida por tais,
mas é fato que, para serem citadas com uma freqüência acentuada, no mínimo indicam que
as periódicos são de boa qualidade, aonde podem encontrar bons artigos, com assuntos
atualizados e com embasamento teórico e argumentos válidos.
A tabela 3 apresenta os resultados obtidos nesta pesquisa.
Nome
Periódico
Produção
ENEGEP
Harvard Business Review
Journal of Quality Technology
Quality Progress
ENEGEP
Technometrics
Periódico de Administração de
Empresas – RJ
Academy
of
Management
Review
Journal of Marketing
International Journal of Quality
& Reliability Management
17
2
6
9
2
65
87
74
68
60
14
Periódico de Administração – SP
Management Science
Periódico de Administração de
Empresas-SP
Periódico Controle da Qualidade
Sloan Management Review
International
Journal
of
Production Research
Production
and
Inventory
Management Journal
International
Journal
of
Operations
&
Production
Management
ENEGEP 2002
Periódico
Gestão e
Produção
19
19
12
RAE
FGV
RAU
USP
Total
2
7
1
1
5
8
2
21
3
110
108
98
78
70
40
2
4
26
7
2
25
31
1
2
5
16
18
19
1
6
1
6
2
23
12
12
2
5
7
3
10
5
3
11
4
ABEPRO
39
9
1
37
32
1
11
1
11
31
30
30
3
1
29
25
21
1
19
1
18
4
XXII Encontro Nacional de Engenharia de Produção
Curitiba – PR, 23 a 25 de outubro de 2002
Quality Engineering
5
Decision Sciences
Industrial Engineering
6
Strategic Management Journal
3
Quality Management Journal
The TQM Magazine
Total quality Management
California Management Review
2
IIE Transactions
Periódico Exame
IEEE
Transactions
on
Engineering Management
Journal of Applied Psychology
Long Range Planning
Research
Technology
Management
Journal
of
Operations 2
Management
Journal of Retailing
Tabela 3 – Classificação obtida na pesquisa
10
13
9
9
4
7
10
8
9
8
1
2
3
4
2
11
1
7
11
11
3
1
8
1
11
3
2
1
3
2
1
1
8
6
1
2
3
1
1
18
16
16
16
14
14
14
13
13
13
12
12
12
12
11
11
Como se pode notar, a Harvard Business Review obteve maior número de citações,
um periódico internacional, que pode ser um indicativo de que o meio acadêmico têm uma
facilidade quanto ao acesso de periódicos estrangeiros e que os artigos publicados tomados
como amostra indicam uma maior influência externa. Próxima ao periódico de Harvard
está o periódico Journal of Quality Technology, o que confirma a opção por periódicos
internacionais de primeira linha, juntamente com a Quality Progress.
Portanto, a pesquisa científica brasileira, publicada em periódicos é amplamente
mais influenciada pela produção científica internacional, que têm um maior
desenvolvimento tecnológico, científico, social e econômico. Também deve-se ressaltar
que tais periódicos são publicadas em diversos países, aonde possuem vários leitores em
todo o mundo. Sendo mais conhecidas, é mais fácil atrair trabalhos para avaliação e
conseqüentemente ter uma maior rigidez para publicação.
Além disto, as periódicos possuem critérios bem definidos, coerentes e eficazes
para avaliar uma produção científica. Foram vários os anos dedicados para estudos de
critérios a serem adotados nos periódicos, além de seu aprimoramento contínuo e uma
atualização de critérios eficiente.
E ainda, a Engenharia de Produção, na parte de qualidade, já está bem
desenvolvida, aonde temos vários intelectuais estudando continuamente o assunto. O termo
qualidade já está sendo discutido há vários anos, sendo que muitos destes países possuem
um fortíssimo parque industrial aonde podem aplicar suas teorias e aprimorá-las.
Para os pesquisadores brasileiros, as publicações estrangeiras são uma excelente
fonte de atualização, já que possuem trabalhos científicos de excelente qualidade.
Vale ressaltar que alguns periódicos iniciaram após algumas datas das periódicos
tomadas como referências, mas que não deve afetar os resultados obtidos neste artigo.
O ENEGEP, primeiro colocado entre os periódicos do meio acadêmico brasileiro,
aparece em quarto obtendo uma boa influência no meio. Sua colocação se deve à
globalização e ao dinamismo das informações e do conhecimento. Deve-se perceber que
no mundo não há fronteiras territoriais, aonde se pode ter informações em determinado
país em frações de segundos. Num mercado aonde se pode ter produtos de vários países,
até longínquos, bem perto e acessíveis. E a inovação tecnológica é tão grande que a busca
por conhecimento se tornou tão necessária, quanto a rapidez com que se deve conseguir.
Várias fontes devem ser consultadas, quer seja nacional ou não, possam inspirar vários
outros trabalhos.
ENEGEP 2002
ABEPRO
5
XXII Encontro Nacional de Engenharia de Produção
Curitiba – PR, 23 a 25 de outubro de 2002
Analisando o resultado, mostra que as periódicos científicas brasileiras sobre a
Engenharia de Produção devem ser aprimoradas. Deve-se saber as causas da não citação
das periódicos mal posicionadas, descobrindo os eventuais erros e melhorá-las.
O ENEGEP e outros periódicos poderiam ser mais citados, já que temos também
um fator histórico contra o desenvolvimento da qualidade no Brasil. O país tem,
historicamente, uma economia baseada no setor primário, sendo a maior fonte de superávit
brasileiro. O País não possui um parque industrial, principalmente nacional, desenvolvido.
Além disso, o país tem um alto índice de analfabetismo, e a parcela da população científica
é pequena, concentrada e limitada de ação. Não há muitos incentivos para o
desenvolvimento da pesquisa brasileira, que muitos cientistas emigram do país.
O termo qualidade, no Brasil, começou a ser estudada profundamente a partir do
início da década de 90, aonde se teve uma abertura de mercado, no governo Collor. Antes
disto, com o regime militar no poder, havia um protecionismo muito grande ao mercado
nacional. Isto causou uma certa acomodação na indústria brasileira, graças à competição
restrita. Após a abertura de mercado, as indústrias nacionais passam a sofrer concorrência,
pois várias multinacionais viram no Brasil um bom mercado. Começando a partir daí uma
busca pela qualidade, para pelo menos diminuírem a desvantagem que tinham frente aos
produtos estrangeiros e para conseguirem sobreviver.
Nesta busca, houve um estudo sobre o controle de qualidade na Europa, Japão e
EUA a fim de cunharem a qualidade total brasileira. Era preciso aprender aonde a
qualidade estava bem desenvolvida e consolidada.
Não é de se estranhar que os periódicos científicos nacionais não tenham critérios
uniformes e até coerentes na avaliação de trabalhos científicos quanto os estrangeiros. Mas
deve-se buscar o quanto antes definir tais critérios, não só para aumentar a consulta por
periódicos nacionais, mas também criar força para que os periódicos brasileiros exerçam
influência no exterior e sejam respeitados no meio científico mundial.
6. Comentários
Uma das impressões deste artigo foi a aleatoriedade das citações dos periódicos.
Não se deve imaginar que os resultados obtidos representam uma proporção em que se
deva encontrar proporcionalmente, nem a influência de tal periódico é de maneira
uniforme no meio acadêmico. Deve-se perceber que os resultados são absolutos e de modo
nenhum pode ser relativo aonde representa uma porcentagem em torno de uma média. Para
confirmar esta afirmação, peguemos dois exemplos:
ENEGEP 2001
ENEGEP 1996
Quality Progress
4
22
Journal of Quality Technology
34
10
Technometrics
24
10
International Journal of Quality & 16
0
Reliability Management
Harvard Business Review
12
14
ENEGEP
24
9
Tabela 4 – Comparação mais marcantes entre os ENEGEP’s 1996 e 2001
Tal comparação deixa claro que não se pode fazer uma média de citações de tal
journal em cada artigo, ou fazer uma média. O que se pode fazer é perceber a influência
dos periódicos até hoje, no meio acadêmico e quais os periódicos, de certa forma, mais
consultados e que inspiraram novas pesquisas.
ENEGEP 2002
ABEPRO
6
XXII Encontro Nacional de Engenharia de Produção
Curitiba – PR, 23 a 25 de outubro de 2002
Ao longo da pesquisa , alguns fatos foram notados, dentre os quais percebe-se que
os pesquisadores mantém uma certa fidelidade aos periódicos utilizados, ou seja
normalmente são utilizadas mais de uma citação de um mesmo periódico
Os artigos com um numero menor de citações são normalmente relacionados a
estudos específicos, indicando que pode não ter havido um estudo anterior em uma
determinada publicação sobre tal assunto e a necessidade de adaptar ou aplicar uma teoria
para uma situação nova, específica.
Nestas situações a análise de citações é mais difícil, pois para estudos de casos,
algumas periódicos que não são próprias da Engenharia de Produção são citadas, algumas
até compõem um número expressivo de citações, indicando ou uma coincidência ou uma
tendência de mudança de qualidade em determinada área de trabalho ou uma maior
necessidade da gestão de qualidade em tais áreas.
Às vezes, quando não se cita alguma periódico, foram consultadas teses da própria
Universidade ou congressos e algumas faculdades citam trabalhos de mestrado, pesquisas,
etc. de suas próprias faculdades, mostrando que há uma interação muito grande entre suas
publicações.
7. Conclusão
Uma classificação pôde-se demonstrar quais periódicos científicas exercem maior
influência na comunidade científica brasileira. Pesquisadores podem consultar a
classificação a fim de tirar referências para seus estudos e para posterior publicação de seu
trabalho.
O número de artigos em periódicos procuradas pelos autores deste trabalho pode,
no futuro, causar divergências. Este fato se deve ao desenvolvimento da Engenharia de
Produção e do tópico da qualidade ao longo dos anos. Pode-se notar que a Engenharia de
Produção sofre pequenas diferenças de classificação de suas áreas de atuação ao longo do
ENEGEP’s realizados. Não se pode comparar a Engenharia de Produção atual com dez
anos atrás, com cinco anos atrás, e talvez com o ano passado. Novas classificações irão
surgir. Este trabalho buscou um equilíbrio em escolher critérios para seleção de uma
amostra representativa, conforme já mencionado anteriormente.
Um alerta deve ser feito, sobre a necessidade de adoção de critérios universais para
seleção de artigos pelos periódicos brasileiros. Pois, a diferença entre grandes centros
produtores de produção científica é que eles têm critérios claramente divulgados para
julgar a produção científica, apresentam consistência interna no significado e aplicação de
tais critérios e utilizam amplamente alguns critérios universais, que prevalecem
independentemente das linhas editoriais utilizadas.
Este estudo deve servir deve gerar novas idéias de geração de classificações, e de
utilização de periódicos, buscando de analisar a evolução da pesquisa em Engenharia de
Produção no Brasil como um todo, não sendo restrito à área da qualidade, e descobrir
possíveis erros, analisar melhor os rumos adotados e do que foi realizado, tomar decisões
sobre a produção científica e melhorar sempre, seja na qualidade das publicações, ou até na
confecção dos artigos em cada instituição, direcionando na escolha de temas mais
inovadores, definindo padrões formais eficientes e procedimentos mais consistentes.
8. Bibliografia
Ribeiro, J. L. Duarte e Cauchick, P. A. – “Um panorama da área de Qualidade no
Brasil”. A Engenharia de Produção no Brasil – Panorama 2001, Vol. 1, publicação da
ABEPRO, Porto Alegre – RS, julho 2001.
ENEGEP 2002
ABEPRO
7
XXII Encontro Nacional de Engenharia de Produção
Curitiba – PR, 23 a 25 de outubro de 2002
Vokurka, R. J. – “The relative importance of journals used in operations
management research – A citation analysis”. Journal of Operations Management 14, 1996.
Barman, S. e Tersine, R. J. – “An empirical assessment of the perceived relevance
and quality of POM – related journals by academicians”. Journal of Operations
Management 10, 1991.
Saladin, B. – “Operations management research: Where should we publish?”.
Operations Management Review 3, 1985.
Soteriou, A. C. ; Hadjinicola, G. C. e Patsia, K. – “Assessing production and
operations management related journals: the European perspective”. Journal of Operations
Management 17, 1999.
Scudder, G. D. e Hill, C. A. – “A review and classification of empirical research in
operations management”. Journal of Operations Management 16, 1998.
ENEGEP 2002
ABEPRO
8