A Bibliometria e a Avaliao da Produo Cientfica:

indicadores e ferramentas
Teresa Costa
Fundao para a Computao
Cientfica Nacional
Inst. Investigao e Formao
Avanada, Universidade de vora,
FCCN, Av. do Brasil, n. 101
1700-066 Lisboa
Tel: 300005184
E-mail: teresa.costa@fccn.pt

Slvia Lopes, Fernando

Fernndez-Llims

Maria Joo Amante,

Pedro Faria Lopes

Depto. Scio-Farmcia, Faculdade de

Farmcia, Universidade de Lisboa
Av. Prof. Gama Pinto
1640-003 Lisboa
Tel: 217946484
E-mail: {slopes, f-llimos}@ff.ul.pt

ISCTE - Instituto Universitrio de

Lisboa
Av. Foras Armadas
1649-026 Lisboa
Tel: 217903082/
Email: {maria.amante, pedro.lopes}
@iscte.pt

RESUMO

A bibliometria uma tcnica quantitativa e estatstica

para medir ndices de produo e disseminao do
conhecimento,
bem
como
acompanhar
o
desenvolvimento de diversas reas cientficas e os
padres de autoria, publicao e uso dos resultados de
investigao. A avaliao da produo cientfica,
importante para o reconhecimento dos investigadores
junto da comunidade cientfica, feita atravs da
aplicao de diversos indicadores bibliomtricos, que se
dividem em indicadores de qualidade, importncia e
impacto cientficos. As limitaes e controvrsias
apontadas por vrios autores vm colocar dvidas acerca
da validade da aplicao dos mesmos. Como resultado
das crticas levantadas sobre os principais indicadores
bibliomtricos, nos ltimos anos tm surgido novos
indicadores. Assim, numa primeira fase deste estudo,
pretende-se caracterizar e comparar os principais
indicadores bibliomtricos tendo em ateno as suas
vantagens e limitaes bem como campo de aplicao.
Atualmente so vrias as bases de dados que utilizam
indicadores bibliomtricos e disponibilizam resultados
de anlise bibliomtrica, sendo a mais conhecida a Web
of Science (WoS) da Thomson Reuteurs. At
recentemente, a WoS foi a principal ferramenta utilizada
para a realizao de anlise de citaes. Esta situao, no
entanto, j no se verifica, uma vez se existem
atualmente outras ferramentas que tambm fornecem
dados com base nas citaes. No presente estudo
destacamos duas delas: a Scopus da Elsevier e o Google
Scholar Metrics (GSM) sendo feita uma anlise e
comparao ao nvel das caractersticas, vantagens e
desvantagens destas trs bases de dados com vista a
perceber se so concorrentes ou complementares.
PALAVRAS-CHAVE:

produo cientfica,
bibliomtricos

Bibliometria, Avaliao da
Indicadores e ferramentas

ABSTRACT

The bibliometry is a technique for measuring

quantitative and statistical indices of production and
dissemination of knowledge, and monitor the

development of several scientific areas and patterns of

authorship, publication and use of research results. An
evaluation of scientific production, important for the
recognition of researchers from the scientific
community, is made by applying several bibliometric
indicators, which are divided into quality indicators,
scientific importance and impact. The limitations and
controversies mentioned by several authors have put
doubts about the validity of their application. As a result
of the criticisms raised about the main bibliometric
indicators in recent years new indicators have emerged.
Thus, at the first stage of this study, we intend to
characterize and compare the main bibliometric
indicators taking into account their advantages and
limitations as well as scope. Currently there are various
databases that use bibliometric indicators and provide
results of bibliometric analysis, being the most well
known the Web of Science (WoS) of Thomson
Reuteurs. Until recently, WoS was the main tool used to
conduct citation analysis. This situation, however, no
longer applies, since there are currently other tools that
also provide data based on citations. In this study we
emphasize two of them: the Elsevier's Scopus and
Google Scholar Metrics (GSM) with an analysis and
comparison in terms of the characteristics, advantages
and disadvantages of these three databases with the aim
of understand whether they are competing or
complementary.
Bibliometrics, Scientific
bibliometric indicators and tools
KEYWORDS:

evaluation,

INTRODUO

A produo cientfica reveste-se da maior importncia

no conjunto das actividades acadmicas e de
investigao sendo um instrumento pelo qual a
comunidade cientfica mostra os resultados, a
pertinncia e a relevncia da investigao. Nesse
sentido, o espelho do desempenho da instituio e dos
docentes e investigadores, no conjunto das suas
actividades de ensino e de investigao.
Como concluso de um estudo, HALLIDAY (2001)
considera que o resultado das actividades de
investigao deve cumprir com os seguintes critrios:

ser credvel, ser divulgado e estar acessvel. Segundo

este autor para que a produo cientfica tenha
credibilidade altamente desejvel que uma vez
publicada, no seja modificada, que diferentes verses
estejam claramente identificadas e que a credibilidade
se baseie em critrios de avaliao reconhecidos, como
o peer-review (arbitragem cientfica). Tambm
conveniente que cada publicao tenha pelo menos um
autor identificvel.
Relativamente divulgao, aconselhvel que as
publicaes tenham metadados e altamente desejvel
que o pblico-alvo tenha conhecimento da sua
existncia. Para cumprir os critrios de acessibilidade,
essencial que a publicao tenha um formato de registo
durvel e seguro, que seja recupervel ao longo do
tempo, que exista o compromisso de no retirar a
publicao, que esta esteja acessvel publicamente,
independentemente do acesso ser gratuito ou de
implicar algum pagamento. Finalmente, ser altamente
desejvel que a publicao tenha identificadores
persistentes (HALLIDAY, 2001).
Importa, portanto, compreender o que considerado
produo cientfica. Assim, os tipos de produo mais
relevantes so (CORTEZ, 2011, 3):
Livros
Teses
Captulos de livros
Artigos publicados em revistas cientficas
Comunicaes em atas de conferncias
Relatrios tcnicos, materiais pedaggicos,
white papers e pginas web
E podem:
Ter ou no arbitragem cientfica (peer-review)
Ser de mbito nacional ou internacional
Uma vez identificado o que se considera produo
cientfica, torna-se importante compreender de que
forma pode ser avaliada.
BIBLIOMETRIA

Surge pela primeira vez em 1917 quando Cole e Eales

publicam uma anlise estatstica da histria da
disciplina de anatomia comparada (SANCHO, 2002,
80; OKUBO, 1997, 10; VANTI, 2002, 153), o conceito
de bibliografia estatstica, actualmente designada por
bibliometria. Trata-se de uma tcnica quantitativa e
estatstica que permite medir ndices de produo e
disseminao do conhecimento, acompanhar o
desenvolvimento de diversas reas cientficas e os
padres de autoria, publicao e uso dos resultados de
investigao (OKUBO, 1997, 8; ARAJO, 2006, 12).
Inicialmente utilizada na medio estatstica de
monografias (exemplares, edies, etc.) com especial
utilidade nas bibliotecas, rapidamente a sua aplicao
passou a contemplar tambm a anlise de outra
documentao como peridicos e artigos cientficos.
Actualmente, utilizada para avaliar a produtividade
dos autores e realizar estudos de citaes (ARAJO,
2006, 13). Desta forma, facilmente se percebe a sua
importncia e benefcios prticos (SANCHO, 2002;
ARAJO, 2006, 13):
nas bibliotecas no desenvolvimento das
coleces e na gesto da informao
na comunidade acadmica e cientfica - na
anlise e avaliao da sua produo.

A avaliao da produo cientfica, factor primordial

para o reconhecimento dos investigadores junto da
comunidade cientfica, nacional e internacional, e das
agncias financiadoras, faz-se atravs da aplicao de
diversos indicadores bibliomtricos (SANCHO, 2002).

INDICADORES BIBLIOMTRICOS

Os indicadores bibliomtricos so ferramentas de

avaliao e podem ser divididos em:
Indicadores de qualidade cientfica
Indicadores de actividade cientfica
Indicadores de impacto cientfico
Indicadores de associaes temticas
Os indicadores de qualidade cientfica baseiam-se na
percepo ou opinio dos pares que avaliam as
publicaes pelos seus contedos. Indicadores de
actividade cientfica permitem contabilizar a actividade
cientfica desenvolvida, nomeadamente o n e
distribuio dos trabalhos publicados, a produtividade
dos autores, a colaborao na autoria dos trabalhos, o n
e distribuio das referncias entre trabalhos e autores,
entre outros. Os indicadores de impacto cientfico
podem subdividir-se em dois tipos: indicadores de
impacto dos trabalhos e indicadores de impacto das
fontes. Como exemplo de indicador de impacto dos
trabalhos temos o n de citaes recebidas. Por outro
lado, como indicadores de impacto das fontes temos o
factor de impacto das revistas, o ndice de citao
imediata e a influncia das revistas. Associaes
temticas tambm podem ser importantes. A anlise de
citaes e a anlise de referncias comuns so exemplos
de indicadores de associaes temticas (SANCHO,
2002, 83).
importante realar que todos os indicadores devero
ser aplicados de forma cuidada dado o conjunto de
caractersticas e limitaes que acarretam. Por outro
lado, fundamental considerar que os principais
resultados de investigao se transmitem atravs da
comunicao formal, que os trabalhos publicados
representam o volume de investigao produzida e que
estes trabalhos (fontes primrias) so indexados em
bases de dados (fontes secundrias), ferramentas que
permitem recuperar informao publicada em qualquer
rea cientfica.
Factor de Impacto

Trata-se de um indicador de avaliao do impacto de

revistas, que determina a frequncia com que um artigo
citado. Foi criado por Eugene Garfield em 1955 para
classificar e avaliar as revistas includas na Science
Citation Index, do Institute for Scientific Information
(ISI).
Na prtica, o factor de impacto (FI) contabiliza as
citaes efectuadas, num dado ano, a documentos
publicados nos 2 anos anteriores.
Para uma dada revista, a frmula de clculo do FI :
FI n

citaes n 2 citaes n1
artigos n 2 artigos n1

Assim, o FI dessa revista no ano 2011 :

FI 2011

citaes 2009 citaes 2010

artigos 2009 artigos 2010

Ou seja, o FI da dada revista em 2011, contabiliza o n

de citaes ocorridas em 2011, a documentos
publicados em 2009 e 2010.
No entanto, existem diversas e importantes limitaes
apontadas ao FI que condicionam a credibilidade do
mesmo. A primeira grande limitao relaciona-se com a
frmula de clculo. Assim, vejamos as diferenas entre
o que contabilizado no numerador e o que tido em
conta no denominador. No numerador entram todos os
documentos citveis, isto , tudo o que publicado:
artigos originais, artigos de reviso, relatrios,
editoriais, cartas, resumos, etc. enquanto no
denominador apenas so contabilizados os meaty
items: artigos originais, artigos de reviso e relatrios
(GARFIELD, 1986, 445; FERNANDEZ-LLIMS,
2003, 43; McVEIGH et al., 2009, 1107).
Como resultado desta limitao na frmula de clculo,
podemos verificar que revistas com uma maior

percentagem de editoriais, cartas e resumos publicados

conseguem obter valores de FI superiores.
Por outro lado, existem diferenas no n de citaes por
artigo entre diferentes reas temticas. Por exemplo, a
mdia de citaes por artigo na bioqumica de 1,12
enquanto na botnica de 0,43. H ainda a considerar
que existem diferenas na obsolescncia dos trabalhos
entre reas do conhecimento distintas e, por essa razo,
a vida mdia de citao (VMC) (mediana da
antiguidade das referncias) tambm varia entre reas
cientficas. Assim, incorrecto efectuar comparaes
entre diferentes reas j que diferentes padres de
citao no tm a ver com qualidade mas sim com o
enquadramento/dinmica de cada rea temtica.
O FI tende, portanto, a beneficiar peridicos das reas
cientficas com ritmo mais acelerado de renovao do
conhecimento, ao contabilizar apenas as citaes dos 2
anos seguintes sua publicao.
O facto de o FI ser calculado apenas a partir dos
contedos da Science Citation Index outra importante
desvantagem. Existem limitaes quer idiomticas quer
geogrficas na incluso de peridicos nesta fonte
secundria (FERNANDEZ-LLIMS, 2003, 49), com
predomnio de revistas de lngua inglesa (de origem
americana) (MARZIALE et al., 2002, 466) e a ausncia
de revistas de carcter regional, nomeadamente em
reas como Sade Pblica, Botnica, Geologia ou
Astronomia.
Finalmente de registar a utilizao incorrecta do FI
como indicador de impacto dos trabalhos, uma vez que
este indicador pretende medir o impacto das revistas. Os
trabalhos mais citados nem sempre so publicados em
revistas com FI e as citaes dos artigos no

correspondem necessariamente ao FI da revista onde o

artigo publicado.
H-index

Criado por J. Hirch em 2005, o h-index (hi) uma

proposta para quantificar a produtividade e o impacto
dos investigadores, baseando-se nos seus artigos mais
citados. Corresponde ao nmero de artigos de um
determinado autor com, pelo menos, o mesmo nmero
de citaes (COSTAS et al., 2007, 193). Ou seja, se o hi
de um investigador for 16, quer dizer que, da totalidade
de artigos publicados, esse investigador, tem 16 artigos
com, cada um deles, pelo menos 16 citaes.
O clculo do hi efectuado a partir da lista de artigos do
investigador. Esta lista dever ser apresentada por
ordem decrescente do n de citaes recebidas. Quando
o n de ordem na lista iguala o n de citaes recebidas,
obtm-se o h-index (Fig.1).

Figura 1: Exemplo do clculo do h-index

Existem diversas vantagens associadas ao h-index,

nomeadamente o facto de combinar medidas de
quantidade (publicaes) e de impacto (citaes), e de
poder ser aplicado a grupos de investigao,
departamentos e/ou pases. Permite ainda criar
rankings de Universidades, analisando e comparando
universidades produtivas e de baixo impacto versus
universidades menos produtivas e maior impacto.
No entanto, tambm alvo de crticas na avaliao dos
investigadores, uma vez que no entra em linha de
conta com alguns factores importantes como a
longevidade da carreira bem como a estratgia de
publicao do investigador e as diferenas existentes
entre reas cientficas (COSTAS et al., 2007, 194).
Utilizando o hi para avaliar investigadores em incio de
carreira, com baixa produo e/ou com uma estratgia
de publicao mais selectiva podemos estar a incorrer
em alguns erros (Fig.2).
Investigador
Inv. 1
Inv. 2
Inv. 3

N Artigos
1
5
30

N Citaes
500
5
1

H-index
1
5
1

Figura 2: Exemplo de comparao entre 3 investigadores

atravs do h-index

De modo a colmatar as falhas associadas ao hi, Hirch

apresentou o Parmetro m para que se possam
comparar investigadores de diferentes reas cientficas e
com distintos tempos de carreira:

hi
m

em que: hi = h-index; m = n de anos desde a 1

publicao do autor.
Apesar das melhorias introduzidas, mantm-se algumas
crticas. Documentos altamente citados tm importncia
relativa: entram para a contagem, mas o n de citaes
irrelevante. As auto-citaes dos prprios podem
enviesar os resultados, introduzindo um risco de
aumento desmesurado do valor do ndex em benefcio
dos prprios. semelhana de outros indicadores,
existem limitaes tcnicas como a dificuldade de
identificar todas as publicaes dos autores (devido s
variantes dos nomes e ao facto de ser calculado apenas
a partir do que est indexado nas bases de dados).
No entanto, o h-index considerado um bom indicador
bibliomtrico, prefervel a usar apenas o n total de
trabalhos produzidos, o n total de citaes, o n
citaes por artigo ou o n de artigos mais citados
(COSTAS et al., 2007, 194).
TM

Eigenfactor

Metrics

TM

Eigenfactor
Metrics so medidas de prestgio e
credibilidade das revistas que utilizam o Eigenfactor TM
score (EF) e o Article InfluenceTM score (AI)
(Eigenfactor, 2012).
O EF mede o grau de importncia de revistas cientficas
calculando o nmero de citaes recebidas por essas
revistas a partir de outras publicaes. Baseia-se no
nmero de vezes que artigos publicados numa dada
revista, nos cinco anos anteriores, so citados no ano
mais recente e exclui as auto-citaes das revistas.
O AI determina a influncia mdia de um artigo
publicado em determinada revista, nos primeiros 5 anos
aps ter sido publicado. O clculo de AI baseado no
EF:

AI

Eigenfacto r
Ta

em que Ta Total de artigos publicados.

O EI considera a qualidade das revistas citadas
ponderando as suas citaes atravs do seu impacto na
comunidade cientfica () assumindo que a literatura
cientfica constitui uma vasta rede de artigos ligados
uns aos outros atravs das citaes () e usa a estrutura
da rede para medir o impacto relativo das revistas
(DURIEUX et al., 2010, 347). Franceschet (2010)
identifica um conjunto de vantagens no uso deste
indicador, nomeadamente, o facto de ponderar citaes
tendo em conta a importncia das revistas citadas,
considerar a quantidade de referncias das revistas
citadas, ter em considerao uma janela temporal de 5
anos, explorar a totalidade da rede de citaes, ignorar
as auto-citaes das revistas, estar fortemente
relacionada com outras mtricas, ser um indicador que
pode ser aplicado em diversos contextos e estar
disponvel gratuitamente num conjunto significativo de
fontes secundrias (FRANCESCHET, 2010, 556). No
entanto, Durieux e Gevenois (2010) consideram que
embora o EI se baseie numa ideia muito promissora, o
seu papel potencial na avaliao das revistas cientficas
no ter sido ainda suficientemente estudado
(DURIEUX et al., 2010, 347). Serrano (2004) salienta

que tm sido identificadas algumas crticas no que se

refere robustez do algoritmo utilizado (idntico ao
utilizado pelo Google na ordenao das pginas web)
quando em causa esto valores mais baixos de n de
citaes (VILLAR, 2011, 94).
Relativamente ao AI, VILLAR (2011) considera que
este um excelente indicador a ter em conta uma vez
que evita comparar revistas que publicam dezenas de
artigos por ano com as revistas que publicam centenas.
Assim, alguns autores consideram que este o mtodo
alternativo utilizao do FI (VILLAR, 2011, 90).
Para alm de todas as caractersticas j identificadas,
pode ser ainda referido que o EF (e por conseguinte o
AI) gera uma classificao temtica endgena e unvoca
em 87 categorias, permitindo que cada peridico
pertena a apenas uma categoria, usa a mesma fonte do
FI o Journal Citation Reports (JCR), e est acessvel
gratuitamente na Web (VILLAR, 2011, 93).
SCImago Journal Rank (SJR) indicator

O indicador SJR um recurso em acesso aberto e que

lista um conjunto considervel de ttulos de revistas de
uma grande variedade de pases e idiomas j que se
baseia na base de dados Scopus (FALAGAS et al.,
2008, 2623). Mede o prestgio de uma revista, atravs
das referncias que um peridico faz a outros ou a si
prprio. No entanto, de forma a prevenir o uso
excessivo de auto-citaes da revista, destas apenas so
consideradas no mximo de 33% do total de citaes
(GONZLEZ-PEREIRA et al., 2009, 5). Utiliza um
algoritmo semelhante ao Google PageRank e expressa o
nmero mdio de citaes ponderadas recebidas num
determinado ano, atravs de documentos publicados na
revista nos trs anos anteriores (SCImago, 2007;
FALAGAS et al., 2008, 2623; GONZLEZ-PEREIRA
et al., 2009, 5). Ao contrrio do que acontece com o
clculo do FI, o indicador SJR considera no
denominador da sua frmula de clculo, o total de
documentos publicados no peridico. Portanto, o
indicador SJR apresenta-se como uma boa alternativa
ao FI sendo que, para alm das caractersticas j
mencionadas, tambm se destaca pela avaliao da
qualidade das citaes (FALAGAS et al., 2008, 2623).
FERRAMENTAS BIBLIOMETRICAS

So pois vrias as mtricas e os indicadores utilizados,

estando associados a diversas bases de dados que so
ferramentas muito teis para o desenvolvimento de
estudos bibliomtricos. Podem fornecer pistas sobre a
investigao de um tema, pesquisando um tpico, sobre
as mudanas de orientao que o mesmo possa ter
sofrido ao longo do tempo, a evoluo de um autor, etc.
Assim, e sendo usadas como meios, no como fins,
podem fornecer aos investigadores uma preciosa ajuda
aquando dos seus trabalhos de investigao.
Atualmente so trs as ferramentas bibliomtricas mais
usadas: a Web of Science, a Scopus e o recente Google
Scholar Metrics. Estas cobrem uma gama de diferentes
dados e usam diferentes mtricas, pelo que tal deve ser
sempre mantido em mente aquando da sua utilizao.
Web of Science

A Web of Science (WoS) da Thomson Reuters uma

das bases de dados mais importante ao nvel das revistas
cientficas e foi durante mais de quarenta anos a maior

base de dados bibliomtrica (ARCHAMBAULT, 2009,

1320). multidisciplinar e contm o Science Citation
Index, o Social Sciences Citation Index e o Arts &
Humanities Citation Index. Indexa mais de 12.700
peridicos, nas diferentes reas cientficas, contendo
informao desde incio do sculo XX, sendo atualizada
semanalmente.
a partir destas bases de dados que calculado o fator
de impacto das publicaes peridicas, bem como
outros indicadores bibliomtricos presentes no JCR.
Este a ferramenta de classificao de peridicos, foi
desenvolvido na dcada de 1950, e a ferramenta lder
de mercado dos rankings de peridicos.
um recurso essencial para a avaliao e comparao
de peridicos, recolhendo dados referentes a mais de
9.000 peridicos cientficos a nvel mundial.
O JCR permite conhecer dados bibliomtricos dos
diferentes peridicos e compar-los dentro de uma
mesma rea cientfica.
O FI a medida mais comummente utilizada, porm
convm relembrar que este um indicador de qualidade
dos peridicos que permite, ainda que com alguns
cuidados, comparar/avaliar revistas dentro de uma
mesma rea, no devendo ser aplicado aos
investigadores.
A WoS foi projetada desde incio como uma base de
dados de citao (ndice de citaes). Permite, alm da
pesquisa habitual por ocorrncia de palavras no registo,
tambm a pesquisa de artigos relacionados e o
estabelecimento de ligaes entre artigos que citam
outros ou so citados por outros.
Como principais vantagens desta base de dados
podemos indicar:
excelente cobertura temporal (a partir de 1900presente para algumas revistas)
um grande nmero de registos enriquecido
com as referncias citadas
melhorou a cobertura regional e muito
recentemente adicionou 700 peridicos
regionais
primeira base de dados a incorporar o h-ndex
pode ver-se h-index negativo (apenas do
primeiro autor)
inclui conference proceedings
inclui monografias
pode ver registros rfos usando a opo de
pesquisa cited references
Como principais desvantagens tem:
melhor cobertura na rea das cincias do que
das artes e humanidades
c. 80% dos contedos so da reas das
Cincias
pouca cobertura de contedos em Acesso
Aberto
as opes/alternativas para encontrar e
distinguir autores no so grandes
falta de estandardizao de autores e
instituies/afiliao
privilegia os contedos anglo-saxnicos
A WoS manteve o seu domnio enquanto base de
indicadores bibliomtricos at 2004, ano em que a
editora Elsevier lanou a Scopus.

Scopus

Contrariamente ao que acontece com a WoS, a Scopus

no foi projetada como um ndice de citaes, mas
inclui citaes de artigos desde 1996. A sua principal
inteno a pesquisa por autor e assunto. Procura ter
uma cobertura detalhada desde 1996 at atualidade.
Contedos de outras bases de dados da Elsevier, desde
1966, tm sido seletivamente includos na Scopus, de
modo a aumentar e melhorar a cobertura.
A equipa da Scopus tem melhorado o seu Journal
Analyzer tendo acordado com a SCImago que o clculo
do SJR esteja includo na base de dados.
Como principais vantagens podemos indicar:
indexa mais de 18.000 ttulos de peridicos
inclui ttulos em Acesso Aberto, conferncias,
pginas web, patentes e livros
a funcionalidade more permite visualizar
rapidamente os registos rfos
cobertura muito forte ao nvel das revistas de
cincia e tecnologia
contm ferramentas teis para identificao
dos autores
gera automaticamente o h-ndex
tem mais contedos europeus que a WoS, e
inclui mais idiomas para alm do Ingls - 60%
de cobertura de fora dos EUA
Ao nvel das desvantagens podem indicar-se:
a cobertura temporal no muito significativa,
uma vez que no caso de muitas revistas s
indexa os ltimos 5 anos
cobertura deficiente das reas das artes e
humanidades, mas maior que a da WoS
a maior parte das citaes remonta a 1996. Tal
resulta num enviesamento do h-index para
investigados com carreiras mais longas
citaes de artigos pr-1996 feitas em artigos
publicados depois de 1996 no esto includas
no clculo no h-index, no sendo
contabilizadas, o que limita de duas formas
citao e citado.
Relativamente anlise e ranking de peridicos fornece
duas mtricas principais: o SJR e o Source Normalised
Impact Per Paper (SNIP) que podem dar resultados
bastante variados. Ao contrrio do JCR, no fornece
listas ordenadas de revistas por rea temtica. No
entanto, o site SCImago, de utilizao gratuita, baseiase nos dados Scopus para fornecer este tipo de listagem
(SCImago, 2007).
Google Scholar Metrics

Em abril passado, o Google lanou o Google Scholar

Metrics (GSM), uma nova ferramenta que fornece
mtricas de impacto de revistas cientficas, obtidas a
partir da contagem de citaes e que, por ser de acesso
gratuito, se apresenta como uma alternativa muito
apetecvel.
O GSM fornece acesso ao h-index de uma ampla gama
de revistas cientficas e outras fontes de informao mas
no aplica a investigadores, contrariamente s duas
bases de dados j referidas.

Vantagens:
a principal vantagem desta ferramenta para j
o facto de ser gratuita, uma vez que vai
estimular a competio entre os vrios
fornecedores
como tambm adotou como indicador o hindex, pode encorajar a adoo deste indicador
na e para a avaliao de peridicos
So muitas as desvantagens apontadas a este novo
produto do Google, que no inclui todos os peridicos
indexados no Google Scholar.
Segundo Delgado-Lpez-Czar et al. (2012) It is
disappointing to see how Google has delivered a
product that is so unambitious and full of mistakes.
Google should be aware that producing professional
bibliometric tools requires effort and infrastructure
beyond algorithms and robots that automatically
produce results. (DELGADO-LPEZ-CZAR, et al.,
2012, 425).
Assim, como desvantagens temos:
cobertura temporal limitada a artigos
publicados nos ltimos cinco anos (20072011), inclui as citaes recebidas at Abril de
2012.
junta peridicos cientficos com outras fontes
como repositrios, bases de dados, proceedings
e working papers
no fornece uma lista de peridicos cobertos
(peer-reviewed ou no)
falta de estandardizao dos ttulos dos
peridicos
apresenta erros na identificao de autores,
peridicos e outros dados bibliogrficos.~
desconhece-se a periodicidade com que faz
atualizao dos dados
O uso de distintas bases de dados pode conduzir a
diferentes resultados de uma mesma publicao e/ou
investigador. So vrios os aspetos a que deve estar
atento.
Veja-se, por exemplo, o caso da revista Scientometrics,
no que se refere aos diversos indicadores (Fig. 3).
Indicador
JCR IF
SCOPUS SRJ
SCOPUS SNIP
GSM H5-INDEX

Valor
1.966
0.066
1.418
38

Figura 3: Clculo de indicadores para a revista

Scientometrics

Tambm no caso do estudo de citaes de autores os

valores podem divergir. Veja-se o exemplo apresentado
na Fig.4, para o autor Andras Schubert.

WoS
SCOPUS
GSM

h-index
28
22
n.a

Figura 4: Clculo do h-index para autor Andras Schubert

CONSIDERAES FINAIS

A bibliometria e os indicadores bibliomtricos, no seu

conjunto, so utilizados para avaliar a produtividade dos
autores, realizar estudos de citaes e avaliar a
qualidade dos peridicos cientficos.
Apesar da quantidade de indicadores existentes e das
inmeras crticas que surgem relativamente sua
utilizao estes evidenciam benefcios prticos na
anlise e avaliao da produo da comunidade
acadmica e cientfica.
Nos ltimos anos tm surgido novas ferramentas e
novos indicadores o que ilustra que, apesar das criticas
apresentadas, estes acabam por estar enraizados na
avaliao da comunicao cientfica. Estas ferramentas
e indicadores tm surgido com vista a avaliar no s as
publicaes mas tambm os investigadores, pelo que
importante ter alguns cuidados a quando da sua
utilizao.
Como exemplo, temos o h-index que utilizado e
disponibilizado nas diversas bases de dados. Porm, e
apesar de ser comum, pode divergir quanto aos
resultados ou quanto ao mbito de aplicao j que, no
caso do GSM, aplicado s publicaes.
A avaliao destas conta tambm com diversos
indicadores distintos nos parmetros utilizados o que
tem consequncias no resultado final.
A utilizao das bases de dados bibliomtricas hoje
uma realidade. No entanto h que ter em considerao
que as mesmas no s divergem nos contedos que
indexam, ao nvel de tipologia de documento (artigos,
peridicos, patentes, livros, etc.), como tambm ao
nvel das coberturas temtica, temporal, geogrfica e
idiomtica. H um predomnio da rea das cincias e
tecnologias com um considervel dfice das artes e
humanidades, nas bases de dados mais recentes a
cobertura temporal significativamente reduzida e
abundam os contedos anglo-saxnicos com
predomnio de contedos norte americanos. Podemos
ento concluir que mais do que concorrentes as
diferentes bases de dados so complementares. de
salientar que, no caso das trs bases de dados
analisadas, duas so de subscrio. Porm, de referir
que associado s mesmas existe um conjunto de
ferramentas e indicadores disponveis gratuitamente,
como o SJR e o Eigenfactor. No caso do GSM, apesar
de gratuito, sendo ainda muito recente, a sua
qualidade/aplicao reduzida. Todavia de salientar a
iniciativa do Google no desenvolvimento e
disponibilizao desta ferramenta em acesso aberto.
REFERNCIAS

ARAJO, Carlos Alberto Bibliometria: evoluo

histrica e questes atuais. Em Questo. Porto Alegre.
[Em linha]. Vol.12, n 1 (2006), p.11-32. [Consult. 21
de
Abril
2012].
Disponvel
em
www:
http://revistas.univerciencia.org/index.php/revistaemque
stao/article/viewFile/3707/3495
ARCHAMBAULT, ric et al. Comparing
Bibliometric Statistics Obtained From the Web of
Science and Scopus. Journal of the American Society
for Information Science and Technology. [Em linha].
Vol. 60, n 7 (2009), p.1320-1326. [Consult. 8 Setembro
2012].
Disponvel
em
www:
http://onlinelibrary.wiley.com/doi/10.1002/asi.21062/pd
f
CORTEZ, Paulo Some scholarly communication
guidelines: teaching report. Guimares: Department of

Information Systems of University of Minho, 2011.

[Consult. 24 de Abril 2012]. Disponvel em www:
http://hdl.handle.net/1822/11599
COSTAS, Rodrigo; BORDONS, Mara The h-index:
advantages, limitations and its relation with other
bibliometric indicators at the micro level. Journal of
Informetrics [Em linha]. Vol. 1 (2007), p. 193-203.
[Consult. 21 de Abril 2012]. Disponvel em www:
http://www.liquidpub.org/mediawiki/upload/1/11/Journ
al_of_Informetrics_1(3).pdf
DELGADO-LPEZ-CZAR, Emilio; CABEZASCLAVIJO, lvaro Google Scholar Metrics: na
unreliable tool for assessing scientific journals. El
Professional de la informacin. [Em linha]. Vol.21, n.4
(2012), p. 419-425. [Consult. 27 Agosto 2012].
Disponvel
em
www:
http://elprofesionaldelainformacion.metapress.com/med
ia/2gurm834tjdxqneejmfk/contributions/q/0/3/g/q03gk6
v6u5875872.pdf
DURIEUX, Valrie; GEVENOIS, Pierre Alain
Bibliometric indicators: quality measurements of
scientific publication. Radiology. [Em linha]. Vol. 255,
n 2 (2010), p. 342-351. [Consult. 21 de Abril 2012].
Disponvel
em
www:
http://radiology.rsna.org/content/255/2/342.full.pdf+ht
ml
Eigenfactor.org: ranking and mapping scientific
knowledge [Em linha]. Washington: University of
Washington, 2012. [Consult. 21 de Abril 2012].
Disponvel em www: http://www.eigenfactor.org
FALAGAS, Matthew E. et al. Comparison of
SCImago journal rank indicator with journal impact
factor. The FASEB Journal [Em linha]. Vol. 22, n 8
(2008), p. 2623-2628. [Consult. 21 de Abril 2012].
Disponvel
em
www:
http://www.fasebj.org/content/22/8/2623.full.pdf+html
FERNANDZ-LLIMS, Fernando Anlisis de la
cobertura del concepto de Pharmaceutical Care en
fuentes primarias y secundarias de informacin.
Granada: Universidad de Granada, 2003. Tesis de
doutorado apresentado Universidad de Granada.
FRANCESCHET, Massimo Ten good reasons to use
the EigenfactorTM metrics. Information Processing and
Management. [Em linha]. Vol. 46, n 5 (2010), p.555558. [Consult. 21 de Abril 2012]. Disponvel em www:
http://www.sciencedirect.com/science/article/pii/S0306
457310000075
GARFIELD, Eugene Journal Impact vs Influence: A
need for five-year impact factors.
Information
Processing & Management. Vol. 22, n5 (1986), p. 445.
GONZLEZ-PEREIRA, Borja; GUERRERO-BOTE,
Vicente P.; MOYA-ANEGN, Flix The SJR
indicator: A new indicator of journals' scientific
prestige. [Em linha] [Consult. 21 de Abril 2012].
Disponvel
em
www:
http://arxiv.org/ftp/arxiv/papers/0912/0912.4141.pdf
HALLIDAY, Leah L. Scholarly communication,
scholarly publication and status of emerging formats.
Information Research [Em linha]. Vol. 6, n 4 (2001).
[Consult. 24 de Abril 2012]. Disponvel em www:
http://InformationR.net/paper111.html
MARZIALE, Maria Helena P.; MENDES, Isabel
Amlia C. O fator de impacto das publicaes
cientficas. Revista Latino-Americana de Enfermagem.
Ribeiro Preto. [Em linha]. Vol. 10, n 4 (2002), p.466-

471. [Consult. 21 de Abril 2012]. Disponvel em www:

http://www.scielo.br/pdf/rlae/v10n4/13356.pdf
McVEIGH, Marie E; MANN, Stephen J. The Journal
Impact Factor Denominator: Defining Citable
(Counted) Items. Journal of the American Medical
Association. Vol. 302, n 10 (2009), p.1107-1109.
OKUBO, Yoshiko Bibliometric indicators and
analysis of research systems: methods and examples.
OECD Science, Technology and Industry Working
Papers. [Em linha]. N 1 (1997). [Consult. 21 de Abril
2012].
Disponvel
em
www:
http://dx.doi.org/10.1787/208277770603
SANCHO, Rosa Indicadores bibliomtricos utilizados
en la evaluacin de la ciencia y la tecnologia: revisin
bibliogrfica. In Inteligencia competitiva: documentos
de lecture. [Em linha]. Barcelona: Fundaci per a la
Universitat Oberta de Catalunya, 2002, p.77-106.
[Consult. 21 de Abril 2012]. Disponvel em www:
http://www.tramasoft.com/documentos/I+D+i/UND2/L
ecturas%20complementarias/79059.Inteligencia%2520
Competitiva.Lecturas.pdf#page=77
VANTI, Nadia Aurora Peres - Da bibliometria
webometria:
uma
explorao
conceitual
dos
mecanismos utilizados para medir o registro da
informao e a difuso do conhecimento. Cincia da
Informao. Braslia. [Em linha]. Vol. 31, n 2 (2002),
p.152-162. [Consult. 21 de Abril 2012]. Disponvel em
www: http://www.scielo.br/pdf/ci/v31n2/12918.pdf
VILLAR, Antonio - El eigenfactor: un nuevo y
potente instrumento bibliomtrico para evaluar la
investigacin. Aula Abierta [Em linha]. Vol. 39, n 3
(2011), pp. 85-96. [Consult. 20 de Setembro 2012].
Disponvel
em
www:
http://www.uniovi.net/ICE/publicaciones/Aula_Abierta/
numeros_anteriores/i17/10._AA_vol39_n3_sept_2011
SCImago. SJR SCImago Journal & Country Rank
[Em linha]. Spain: SCImago, 2007. [Consult. 24 de
Setembro
2012].
Disponvel
em
www:
http://www.scimago.com