42

Indicadores cienciomtricos
*
Ernesto Spinak
1
Resumen
Los indicadores cientficos surgen de la medicin de los insumos y de los resultados de la
institucin cientfica. La cienciometra elabora metodologas para formular esos indicadores con
tcnicas interdisciplinarias de la economa, la estadstica, la administracin y la documentacin.
Las metodologas aceptadas internacionalmente (Manual de Frascati, Manual de Oslo y Manual
de Camberra), constituyen las referencias clsicas para medir los insumos y los resultados
econmicos, as como los resultados tecnolgicos de investigacin y desarrollo (P&D). No
existe consenso internacional acerca de cmo medir y evaluar la produccin intelectual y
acadmica, tal como se manifiesta en la interpretacin de los impactos e influencia del sistema
editorial. A partir de la definicin de los trminos bibliometra, cienciometra e informetra y de
la explicacin del alcance y aplicacin de cada uno, se presentan en este trabajo varias alternativas
para interpretar los indicadores cienciomtricos existentes, derivados en su mayora del Citation
Index del Institute for Scientific Information y de otras bases de datos similares. En particular se
presenta una hiptesis que explica el favoritismo del Citation Index hacia las publicaciones que
forman parte de la corriente principal (mainstream) de los pases desarrollados, en detrimento de
las publicaciones de calidad similar provenientes de los pases del Tercer Mundo.
Descriptores DeCS: INDICADORES/utilizacin; BIBLIOMETRIA; CIENCIOMETRIA; LEY
DE BRADFORD; LEY DE ZIPF; LEY DE SENGUPTA; LEY DE LOTKA; ANALISIS DE
CITAS; FACTOR DE IMPACTO.
*
Trabajo presentado en el Seminario sobre Evaluacin de la Produccin Cientfica, realizado en So Paulo por el Proyecto SciELO del 4 al 6 de
marzo de 1998.
1
Ingeniero S.C. Licenciado en Bibliotecologa. Uruguay.
Podemos considerar a la ciencia como un sistema de
produccin de informacin, en particular informacin
en forma de publicaciones, considerando publicacin a
cualquier "informacin registrada en formatos permanen-
tes y disponibles para el uso comn". Desde este punto de
vista la ciencia puede verse como una empresa con insumos
y resultados. La medicin de esas dos categoras -insumos y
resultados- son la base de los indicadores cientficos.
Gran parte de los esfuerzos de la ciencia se concentra
en la elaboracin de metodologas apropiadas para la formu-
lacin de estos indicadores. La medicin de los insumos es
una tarea ms cercana a las ciencias de la economa, la esta-
dstica y la administracin que, si bien trabajosa, dispone
desde hace tiempo de metodologas de una razonable acep-
tacin y de manuales con definiciones y procedimientos
usados internacionalmente.
En cambio, los conceptos de la ciencia que tienen como
propsito la formulacin de indicadores de resultados -la
segunda mitad de la tarea-, se considera generalmente la
tarea ms sofisticada y difcil.
A pesar de los considerables esfuerzos realizados para
llegar a tener un conjunto de definiciones y clasificaciones
general, apropiado, abarcador y sin ambigedades, la situa-
cin permanece lejos de estar completamente resuelta.
1
Las
tcnicas de medicin de los resultados de la investigacin
tienen slo unas dcadas de existencia y todava no se han
consolidado por completo.
En los ltimos 30 aos la comunidad internacional, en
particular la Organizacin para la Cooperacin y Desarrollo
Econmico (OCDE) y la Unesco, desarrollaron metodologas
para esta tarea compleja de elaborar indicadores, que pue-
den resumirse en 3 manuales de referencia obligada conoci-
43
dos como el Manual de Frascati,
2
el Manual de Oslo
3
y el
Manual de Camberra.
4
Estos manuales ofrecen procedimien-
tos de encuestas para medir las actividades de investigacin
y desarrollo experimental (I+D), determinar los recursos hu-
manos dedicados a la ciencia y la tecnologa (C&T) e inter-
pretar la innovacin tecnolgica.
El Manual de Frascati, el primero de los 3 mencionados,
cuya primera edicin es de 1963, sigue reconociendo toda-
va en la reciente versin de 1993 la dificultad de elaborar un
sistema de indicadores de C&T, se cita del manual:
"Por definicin los indicadores ilustran un aspecto par-
ticular de una cuestin compleja y de facetas mltiples. Es
necesario disponer de un modelo explcito que describa a la
vez el sistema cientfico en s mismo y la forma en que se
relaciona con el resto de la sociedad y con la economa. En la
prctica y en el estado actual de cosas, no existe un modelo
explcito nico capaz de establecer relaciones causales entre
la ciencia, la tecnologa, la economa y la sociedad".
2
Estos comentarios tienen que ver con la parte de medi-
cin de insumos, es decir, con la evaluacin econmica, es-
tadstica, etctera.
Cuando buscamos en el mismo manual indicaciones para
interpretar resultados, en particular desde el punto de vista
de la comunicacin cientfica, o sea, las publicaciones, toda-
va el problema resulta ser ms complicado. En el Anexo 2 del
referido manual, cuyo ttulo es "Otros indicadores de C&T"
se reconoce:
"En el momento presente no existen principios bsicos
internacionales oficiales aplicables a la recogida de este tipo
de datos o a su empleo como indicadores de ciencia y tecno-
loga. En 1989-1990, la OCDE realiz un informe sobre el esta-
do del conocimiento en materia de bibliometra, que podra
servir para un futuro manual OCDE sobre utilizacin e inter-
pretacin de indicadores bibliomtricos".
2
El Manual de Oslo
3
ofrece metodologas para la recopi-
lacin de datos que permitan interpretar la innovacin en
C&T. Si analizamos el manual en busca de procedimientos
de evaluacin basados en las publicaciones cientficas, para
nuestra sorpresa encontraremos que recin en el Anexo 1,
como un procedimiento accesorio, se menciona a la LBIO
(literature-based innovation output indicators). La LBIO es
una metodologa de encuestas basada en los casos de inno-
vacin en C&T que se informan en las revistas tcnicas y
comerciales.
Esto es sorprendente, pues una de las caractersticas de
la ciencia es la publicacin de sus resultados. En particular,
toda aquella innovacin y descubrimiento se legitima y re-
conoce por la prioridad de su publicacin. En otras palabras,
uno de los aspectos ms visibles de la innovacin en C&T,
que es su comunicacin impresa, se presenta como procedi-
miento marginal en el Manual de Oslo.
3
Por ltimo, en el Manual de Camberra,
4
que proporciona
diversas metodologas para evaluar a los recursos humanos
dedicados a la C&T, ni siquiera se mencionan los mtodos
cienciomtricos basados en la bibliometra.
En toda esta situacin no deja de ser sumamente ex-
trao que a la hora de medir C&T, innovacin tecnolgica,
recursos humanos de I+D, etc.; la comunicacin y la infor-
macin en ciencia en su forma ms caracterstica que es la
publicacin, no figure en un lugar central en los referidos
manuales de uso internacional. Hay razones para ello, y ms
adelante aventurar algunas hiptesis.
La comunicacin y la informacin son intrnsecas a la
prctica de la ciencia. La investigacin es estimulada y se
sustenta por un flujo constante de nueva informacin. Cuan-
do el ciclo de informacin se completa, otra vez se suminis-
tra nueva informacin en una interaccin infinita, generan-
do un ciclo renovado de creacin y de descubrimientos.
El ciclo de informacin-creacin-informacin puede verse
como una espiral ascendente y perfectible. Este concepto es
central en la idea de progreso de nuestra cultura; es la con-
viccin de que la misma naturaleza del conocimiento -el co-
nocimiento objetivo de la ciencia y la tecnologa- es la de
avanzar sin pausas, mejorar, y llegar a ser ms y ms perfec-
to.
5
Este conocimiento llega a ser objetivo (el mundo III en la
concepcin popperiana),
6
cuando se comunica y se legitima
por los pares dentro de la misma comunidad cientfica.
Para entender el rol que juega la informacin en la vida
de los cientficos es necesario apreciar el mundo en el que
trabajan, la naturaleza de su trabajo y las influencias a las
que estn sujetos.
7
Este tema, propio de la sociologa de la
ciencia, requiere de instrumentos conceptuales y
metodolgicos que se han desarrollado bajo nombres de
bibliometra y cienciometra, y se han modelizado matemti-
camente en la informetra.
8
No podemos interpretar los datos sobre las necesida-
des de informacin y sus usos sin reconocer que los cient-
ficos y tcnicos se encuentran en el centro de muchos siste-
mas que tocan cada aspecto de sus trabajos. Entre los siste-
mas ms importantes en que est inmerso ese cientfico es-
tn: el ambiente cultural, el poltico, los colegios invisibles,
las organizaciones formales, los grupos de trabajo, el siste-
ma legal y econmico, las asociaciones profesionales y, fi-
nalmente, el sistema de informacin. La bibliometra es pues,
una disciplina con alcance multidisciplinario y la que analiza
uno de los aspectos ms relevantes y objetivos de esa co-
munidad, la comunicacin impresa.
Para definir con ms precisin las ideas y los trminos,
digamos que la bibliometra comprende:
La aplicacin de anlisis estadsticos para estudiar las
caractersticas del uso y creacin de documentos.
El estudio cuantitativo de la produccin de documentos
como se refleja en las bibliografas.
La aplicacin de mtodos matemticos y estadsticos al
estudio del uso que se hace de los libros y de otros
soportes dentro de los sistemas de bibliotecas y entre
estos.
El estudio cuantitativo de las unidades fsicas publica-
das, o de las unidades bibliogrficas, o de sus susti-
tutos.
Indicadores cienciomtricos
44
Una vez definida la bibliometra, pasemos a definir la
cienciometra. La cienciometra aplica tcnicas bibliomtricas
a la ciencia. El trmino ciencia se refiere a las ciencias fsicas
y naturales, as como a las ciencias sociales. Pero la
cienciometra va ms all de las tcnicas bibliomtricas, pues
tambin examina el desarrollo y las polticas cientficas. Los
anlisis cuantitativos de la cienciometra consideran a la cien-
cia como una disciplina o actividad econmica. Por esta ra-
zn, la cienciometra puede establecer comparaciones entre
las polticas de investigacin entre los pases con el anlisis
de sus aspectos econmicos y sociales.
Los temas que interesan a la cienciometra incluyen el
crecimiento cuantitativo de la ciencia, el desarrollo de las
disciplinas y subdisciplinas, la relacin entre ciencia y tec-
nologa, la obsolescencia de los paradigmas cientficos, la
estructura de comunicacin entre los cientficos, la produc-
tividad y creatividad de los investigadores, las relaciones
entre el desarrollo cientfico y el crecimiento econmico, etc.
La cienciometra usa tcnicas matemticas y el anlisis
estadstico para investigar las caractersticas de la investi-
gacin cientfica. Puede considerarse como un instrumento
de la sociologa de la ciencia.
La bibliometra estudia la organizacin de los sectores
cientficos y tecnolgicos a partir de las fuentes bibliogrfi-
cas y patentes para identificar a los autores, sus relaciones,
y sus tendencias. Por ejemplo, la cienciometra se encarga
de la evaluacin de la produccin cientfica mediante
indicadores numricos de publicaciones, patentes, etc. La
bibliometra trata con las varias mediciones de la literatura,
de los documentos y otros medios de comunicacin, mien-
tras que la cienciometra tiene que ver con la productividad
y utilidad cientfica.
La importancia de las tcnicas bibliomtricas y
cienciomtricas puede notarse al analizar la lista siguiente
de posibilidades de aplicacin, la que no pretende ser com-
pleta.
Identificar las tendencias y el crecimiento del conoci-
miento en las distintas disciplinas.
Estimar la cobertura de las revistas secundarias.
dentificar los usuarios de las distintas disciplinas.
Identificar autores y tendencias en distintas disciplinas.
Medir la utilidad de los servicios de diseminacin selec-
tiva de informacin.
Precedir las tendencias de publicacin.
Identificar las revistas ncleo de cada disciplina.
Formular polticas de adquisicin ajustadas al presu-
puesto.
Adaptar polticas de descarte de publicaciones.
Estudiar la dispersin y la obsolescencia de la literatura
cientfica.
Disear normas para estandarizacin.
Disear procesos automticos de indizacin, clasifica-
cin y confeccin de resmenes.
Predecir la productividad de editores, autores individua-
les, organizaciones, pases.
9
Vemos entonces que una evaluacin del desempeo de
la empresa cientfica en general no puede aprehenderse en
su total dimensin con simples estadsticas econmicas que
miden cantidades de personas o la dimensin de institucio-
nes y las compara con insumos de dineros o el Producto
Nacional Bruto. Porque en definitiva, de lo que estamos ha-
blando es de procedimientos para la evaluacin del desem-
peo cientfico. De eso se trata el problema, definir qu eva-
luar, cmo y por qu.
Las actividades de investigacin cientfica y tecnolgi-
ca necesitan ser evaluadas para juzgar que tambin fueron
cumplidos sus objetivos originales, el valor de sus resulta-
dos y qu cosas contribuyeron o impidieron el xito. Estas
evaluaciones juegan un rol significativo para construir en
los pases el potencial cientfico y tecnolgico pues per-
miten:
Medir la efectividad de las investigaciones para cumplir
con las metas sociales y econmicas.
Desarrollar infraestructuras adecuadas e identificar pro-
gramas que entrenen a las futuras generaciones de in-
vestigadores.
Fig. 1. Cienciometra
La actividad cientfica debe ser vista e interpretada den-
tro del contexto social en la que est enmarcada. Por ello las
evaluaciones del desempeo cientfico deben ser sensibles
al contexto conceptual, social, econmico e histrico de la
sociedad donde se acta. Esto significa que la ciencia no
puede ser medida en una escala absoluta, sino en relacin
con las expectativas que la sociedad en la cual se desarrolla,
ha puesto en ella. Sobre este punto volveremos ms adelan-
te, cuando evaluemos algunas herramientas tales como los
ndices internacionales de citaciones.
La metodologa de evaluacin de la actividad cientfica
entraa dos problemas: los criterios de medicin y la rela-
cin entre indicadores cientficos y evaluacin.
Es importante reconocer que mucha de la discusin que
se da entre los socilogos de la ciencia radica en la impor-
tancia relativa que se den a los criterios intrnsecos o extrn-
secos de evaluacin. Esto divide a los socilogos en
internalistas y externalistas.
Indicadores cienciomtricos
45
El enfoque internalista enfatiza la importancia que las
demandas intrnsecas ejercen en la lgica de los descubri-
mientos y las necesidades cognoscitivas, mientras que los
externalistas prestan atencin al rol sociocultural, poltico, y
econmico, que determina la direccin de la ciencia.
Debe notarse que esta estructura conceptual surge de
las reflexiones sobre la institucin cientfica elaborada en
los pases desarrollados, la que para trasladarse a los pases
perifricos debe ser adaptada. Pues la tal llamada ciencia
internacional (o mainstream) es, en gran medida, el resulta-
do de las ciencias nacionales de los pases centrales y pro-
ducto de la interrelacin entre los factores intrnsecos y ex-
trnsecos de ese emprendimiento.
Estas visiones un tanto diferentes del mundo se perci-
ben por ejemplo en los mtodos de evaluacin alternativos
y, debemos decir en justicia, complementarios, elaborados
por la OCDE para evaluar la I+D propiamente dicha, y los
conceptos elaborados por la Unesco para el mismo proble-
ma. La Unesco ampla la evaluacin de la C & T de los pases
incorporando a la visin mainstream las actividades cient-
ficas y tecnolgicas (ACT). Las ACT comprenden (a) la en-
seanza y la formacin cientfica y tcnica, y (b) los servi-
cios cientficos, es decir, todas las actividades de enseanza
superior y formacin especializada universitaria, y las activi-
dades de C&T de bibliotecas, bases de datos, etc.
Esta medicin tiene su razn de ser. Si analizamos la
inversin que hacen los pases desarrollados y la compara-
mos con la que se realiza en los nuestros, las cifras de unos
y otros son abismalmente distintas. Tanto si comparamos
las cifras absolutas en billones de dlares como relativas al
PNB, el abismo o brecha que nos separa no es posible supe-
rarlo. Toda la inversin conjunta que se dedica a C&T en la
totalidad de los pases de Amrica Latina y el Caribe, en su
totalidad repito, es apenas una fraccin de lo que dedican
tan solo los Estados Unidos. Incluso, si se deja fuera del
anlisis a las industrias de defensa y a la industria
aeroespacial, estas diferencias siguen teniendo varios rde-
nes de magnitud.
Por esa razn, ningn esfuerzo econmico en el futuro
previsible podr hacer que la I+D de la regin pueda compe-
tir con la de los pases desarrollados. La estrategia posible
de desarrollo de C&T de nuestros pases pasa por la inver-
sin en las ACT, es decir, la formacin de cuadros cientficos
y los servicios de informacin que permitan la transferencia
tecnolgica. Nuestra C&T ser ms de transferencia que de
innovacin en cifras absolutas. Nuestras publicaciones se-
rn diferentes pues cumplirn papeles diferentes, y los m-
todos de evaluacin sern diferentes pues los contextos
sociales lo son tambin.
El objetivo de los procedimientos de evaluacin es ob-
tener medidas de los resultados con respecto a:
Cun exitosos han sido en lograr los objetivos estable-
cidos por la poltica de ciencia del pas y cul es el valor
de estos objetivos en el contexto de esa sociedad.
Qu factores fueron instrumentales en promover o im-
pedir el logro de dichos objetivos.
Qu cambios son necesarios para mejorar los logros fu-
turos.
El proceso de evaluacin debe distinguirse de la reco-
leccin de datos o indicadores cientficos. La recopilacin y
tabulacin de los datos cualitativos y cuantitativos, as como
el monitoreo de las actividades son slo componentes de la
evaluacin. La evaluacin trata de responder por qu las
cosas ocurren como ocurren. La evaluacin es un compo-
nente de la poltica cientfica.
La cuestin fundamental que se evaluara en el desem-
peo cientfico es si el esfuerzo de investigacin y publica-
cin cientfica resulta en una contribucin real al progreso
cientfico de esa sociedad, si contribuye a metas prcticas y
tiles tanto en lo tcnico como en lo social o, si por el contra-
rio, el esfuerzo es redundante y sin utilidad significativa.
Repetimos el concepto, la evaluacin del sistema de comu-
nicacin cientfica debe tener como referencia las metas de
la poltica cientfica establecida para el pas o regin, no
necesariamente coincidente con la ciencia internacional.
Para la caracterizacin y el juicio razonable de la empre-
sa cientfica es necesario establecer pautas tanto objetivas
como cuantificables, as como tambin pautas de calidad.
Objetivas y verificables, son las que se logran por los
mtodos cienciomtricos. Estos mtodos son: el anli-
sis de citaciones, premios, patentes, contratos, becas,
mapas de cocitaciones, etc. Como es sabido, estos m-
todos tienen limitaciones y reciben crticas debido a que
los nmeros reflejan la cantidad o actividad y, de cierta
manera, la productividad, pero no la calidad y contenido
de las publicaciones.
Adecuadas para valorar el contenido y nivel de cono-
cimientos, son las que se logran mediante el arbitraje
por expertos. El anlisis por expertos es el mtodo usado
para la seleccin de premios, el ingreso a crculos acad-
micos, nominacin a universidades, etc. Sin embargo,
su validez est restringida debido a los problemas de
juicios subjetivos y por criterios externos a las metas
cientficas, como son los prejuicios nacionales, las pre-
siones polticas, los factores de prestigio social, etc.
En lo concreto, entonces surge la pregunta: Cules
son estos famosos indicadores cienciomtricos del que dis-
ponemos, cuntos son, qu miden? En un artculo publica-
do hace algunos aos en Scientometrics, Vinkler presenta
una tabla comparativa con 46 indicadores simples y com-
puestos. Los indicadores siguientes son slo una seleccin
de estos, ms algunos que yo he agregrado. Pueden dividir-
se en 2 grandes grupos:
Indicadores de publicacin: miden la calidad e impacto
de las publicaciones cientficas.
Indicadores cienciomtricos
46
Indicadores de citacin: miden la cantidad e impacto de
las vinculaciones o relaciones entre las publicaciones
cientficas.
Cada uno de estos ndices pueden medirse como ndi-
ces simples, relativos, o ponderados segn distintos crite-
Tabla 1. Indicadores de publicacin
Technique-tcnica Measure-medida
Bibliometric size-Extensin Number of paper by country, by
bibliomtrica discipline etc. -Nmero de artculos
por pas, por disciplina, etc.
Rating of juornals by experts First, second, third and fourth
- Tabla de revistas por especia- class journals -Primera, segunda,
listas tercera y cuarta clase de revistas
Production ndex- Indicador Weighted number of articles, books
de produccin etc., activided by number of
authors
Activity ndex- ndice de ac- Share of publicactions published by
tividad X- Porcentaje de publicaciones
por X Share of publications pu-
blished by Y - Porcentaje de
publicaciones por Y
Growth of documentation Grown rate -Tasa de crecimiento
- Crecimiento de la documen-
tacin
Bradfors distribution - Dis- Core journals - Revistas principales
tribucin de Bradford
Lotkas distribution - Distri- Authors productivity - Productivi-
bucin de Lotka dad de los autores
Obsolescence - Obsolescen- Publication hafl-life -Vida media de
cencia la publicacin
Zipfs distribution - Distribu- Words usage - Uso de vocabulario
cin de Zipfs
Warings distribution - Dis- Publication potencial -Potencial de
tribucin de Waring publicacin
Tabla 2. Indicadores de citacin
Technique-tcnica Measure-medida
activity index ndice de actividad
affinity index ndice de afinidad
attractivity index ndice de atraccin
bibliographic coupling apareo bibliogrfico
citation analysis anlisis de citaciones
cocitation analysis anlisis de cocitaciones
consumption factor factor de consumo
diversity index ndice de diversidad
echo factor factor de echo
immediacy index ndice de inmediatez
impact factor factor de impacto
impact index ndice de impacto
insularity index ndice de aislamiento
openess index ndice de apertura
popularity factor factor de popularidad
self-citation rate ndice de autocitacin
rios. Tambin pueden medirse como series cronolgicas, o
como medidas de distribucin (Bradford, Lotka, etc.).
Los estudios pueden realizarse a nivel micro, medio o
macro segn midan:
individuos, instituciones, pases.
revistas individuales, grupos temticos toda una disci-
plina.
Ahora bien, si tenemos todos estos indicadores su-
puestamente objetivos, los que han sido analizados y desa-
rrollados por ms de 3 dcadas, con publicaciones interna-
cionales serias, con estudios importantes realizados en to-
das partes del mundo, por qu estas tcnicas no integran
las herramientas normales de evaluacin de la C&T reco-
mendados en los manuales internacionales?
Tabla 3. Tcnicas de mapeos
Technique-tcnica Measure-medida
Coword analysis Anlisis de concurrencia de palabras
Citation networks red de citaciones
Scientific collabo- Anlisis de colaboracin cientfica
boration analysis
La razn, a mi manera de ver, es que estas herramientas
se han mostrado adecuadas para analizar la produccin de
C&T de los pases centrales, de la ciencia mainstream, pero
tienen serios problemas de ndole epistemolgica e instru-
mental a la hora de analizar la produccin de los pases me-
nos desarrollados.
10
La razn instrumental es una vieja discusin conocida
por todos ustedes. Las herramientas principales disponi-
bles para la mayor parte de los estudios bibliomtricos pro-
ceden de las bases de datos del Institute for Scientific
Information (ISI), cuyos procedimientos de seleccin de re-
vistas son parciales y no son adecuados ni suficientes para
evaluar la C&T de los pases en vas de desarrollo. El ISI
produce instrumentos adecuados para evaluar la ciencia
mainstream, pero no as la del resto del mundo, ni en parti-
cular las actividades que la Unesco llama de ACT.
Esta es la primera razn por la que este proyecto desa-
rrollado por BIREME (Centro Latinoamericano del Caribe de
Informacin en Ciencias de la Salud) es importante y oportu-
no y con una metodologa confiable. Llena un vaco larga-
mente esperado en toda la regin. Tendremos los instrumen-
tos y los mtodos para construir la base de datos para nues-
tros indicadores bibliomtricos y cienciomtricos, que cu-
bran una muestra suficientemente representativa de nuestra
actividad cientfica y permita obtener resultados vlidos y
comparables acordes con las necesidades de nuestras pol-
ticas cientficas y nuestros niveles de desarrollo.
Indicadores cienciomtricos
47
Fig. 2. Distribucin de Bradford
Fig. 3. Potencial de publicacin. Distribucin de Waring
La otra razn, la razn epistemolgica, es menos cono-
cida y tiene que ver con la forma en que histricamente
fueron construidas las listas de revistas del ISI con sus ba-
ses de datos. Este tema fue analizado en un artculo por
Spinak y Rousseau
11
recientemente, al que podra llamar el
problema de las colas de los cometas.
Para comprender la discusin del problema de las colas
de los cometas debemos referirnos primero a un antiguo y
clsico artculo de Eugene Garfield,
12
publicado hace unos
20 aos, donde present lo que l llam en su momento la
"ley de la concentracin de Garfield". De acuerdo con
Garfield, su ley bibliomtrica sealaba que para cualquier
campo de la ciencia los artculos se concentran en las mis-
mas revistas multidisciplinarias de alto impacto o mainstream.
Indicadores cienciomtricos
Fig. 4. ndice de impacto
Fig. 5. Anlisis de citaciones y apareo bibliogrfico
Fig. 6. Anlisis de cocitaciones
Haciendo referencia a las distribuciones de Bradford,
dijo que en gran medida la cola del cometa de una disciplina
consista en gran parte en el conjunto de revistas que con-
formaba el ncleo de la literatura de otra disciplina. Esto
significaba, en su manera de ver, que una buena biblioteca
de ciencia que cubriera los nmeros de todas las disciplinas
no debera tener ms revistas que una buena biblioteca es-
pecializada que cubriera toda la literatura de una sola disci-
plina. Con ello no sera necesario ms que unas 1 000 revis-
tas mainstream para cubrir todos los ncleos con sus colas.
Zona del nc leo
C
(1 - f )
T - publicacin potencial
N - nmero de autores
f - fraccin de autores individuales
x - media de artculos / autor
(1 - 2f + f /x )
N
T =
1 1
1
1
A
B
1 2
3
r
r r
( r1 .r 2)
Jacc ar d:
cit ( r1) +ci t( r2 )- cocit ( r1,r 2)
Salt on:
cocit
cocit
( r1
( r1
r 2)
r 2)
C
cit ( r1) *cit ( r2) )
2
,
(
48
De aqu que con unas 3 000 revistas el Science Citation
Index cubre ms que suficiente al 90 % de la literatura que
realmente importa.
En otras palabras, con un conjunto de revistas
mainstream no slo se tienen los ncleos de todas las disci-
plinas, sino tambin sus colas de distribucin principales,
pues el conjunto de estas estn formadas por las otras revis-
tas mainstream. Hasta aqu la hiptesis de Garfield.
Esta opinin nunca fue demostrada, sin embargo, du-
rante 30 aos actu como impedimento ideolgico para que
se incorporaran al ISI revistas que no pertenecieran a ese
conjunto cerrado de revistas iniciales, que histricamente
procedieron de los pases desarrollados de habla inglesa.
En el artculo citado de Rousseau y Spinak
11
se plantea
una hiptesis alternativa, sobre procedimientos de construc-
cin de ncleos y colas de distribucin partiendo de conjun-
tos iniciales de revistas alternativos al que us el ISI en los
aos 60. Estos ncleos de partida alternativos podran producir
distribuciones de ttulos diferentes a los que se manejan por el
ISI y que haran mejor justicia a la produccin de C&T de los
pases en vas de desarrollo, en particular los de Amrica Latina.
Esta es la segunda de las razones por la que este pro-
yecto desarrollado por Bireme es importante, oportuno y
con una metodologa confiable. Llena un vaco largamente
esperado por todos nosotros al proporcionarnos un instru-
mento con el que se podr medir ms acertadamente la con-
tribucin en C&T de la regin.
En tercer lugar, y para nosotros muy importante, es que al
poner Bireme esta metodologa a disposicin en la regin,
y al usar como soporte de software al sistema ISIS desarrolla-
do por la UNESCO, los costos para obtener, distribuir, manejar
y analizar la informacin, sern sustancialmente ms bajos que
los que se tienen actualmente. Pues hoy, la informacin dispo-
Fig. 7. Apareo bibliogrfico nible, con las restricciones ya mencionadas, debe ser compra-
da al nico o casi nico proveedor comercial que existe.
En el futuro cercano tendremos nuestros propios datos
bibliomtricos para realizar las evaluaciones pertinentes de
nuestra produccin bibliogrfica a la luz de nuestro contex-
to econmico y social; esos resultados se medirn de acuer-
do con las prioridades de las polticas de C&T que corres-
ponden a nuestro desarrollo regional. No tendremos que
pagar cifras cuantiosas por datos no representativos de
nuestra realidad. Podremos mirar a nuestro desarrollo de
C&T con nuestros propios ojos, y no a travs de la ventana
que incidentalmente se encuentra en Filadelfia.
Vayan a Bireme nuestras ms sinceras felicitaciones y
auguramos el mejor de los resultados posibles a este esfuer-
zo de innovacin tecnolgica que es lidereado por Bireme y
la Fapesp en nuestra regin.
Referencias bibliogrficas
1. Moravcsik MJ. The classification of science and the science of
classifficatin. Scientometrics 1986; 10(3-4):179-97.
2. OCDE. Manual de Frascati: propuesta de norma prctica para encues-
tas de investigacin y desarrollo experimental. Pars: OCDE, 1993.
3. . Oslo Manual: proposed guidelines for collecting and
interpreting technological innovation data. Pars: OCDE, 1997.
4. . The measurement of scientific and technological activities:
manual on the measurement of human resources devoted to S&T,
"Camberra Manual". Pars: OCDE, 1995.
5. Nisbet R. History of the idea of progress. New York: Basic Books
(19-):365.
6. Neill SD. Brookes, Popper and objetive knowledge. J Inform Sci
1982;(4):33-9.
7. Palmer J. Scientists and information: II. Personal factors in
information behaviour. J Document 1991;47(3):254-75.
8. Spinak E. Diccionario enciclopdico de bibliometra, cienciometra
e informetra. Caracas: Unesco, 1996:244.
9. Sengupta IN. Bibliometrics, Informetrics, Scientometrics and
Librametrics: an ovesifying bibliometric indicators for
scientometric purposes. Scientometrics 1988;13(5-6):239-59.
10. Spinak E. Quantitative analyses of scientific literature and their
validity for judging Latin American Production. Bull Pan Am
Health Organ 1995; 29(4):352-9.
11. Rousseau R, Spinak E. Do a field list of internationally visible
journals and their journal impact factors depend on the initial set of
journals? A research proposal. J Document 1996; 52(4):449-56.
12. Garfield E. Citation indexing: its theory and application in science,
technology, and humanities. New York: John Wiley & Sons
1979:274.
Ernesto Spinak
Spinaker@Adinet.com.uy
Abstract
Scientific indicators arise from the measurement of inputs and
results of the scientific institution. Scientometrics develops
methodologies for set up those indicators based on interdisplinary
technics from the economics, statistics, management and
Indicadores cienciomtricos
-
49
documentation. The methodologies that are internationally
accepted (Frascati Manual, Oslo Manual and Canberra Manual)
constitute the classical references to measure the econocmic inputs
and results, as well as the technological results of the research and
development. However, there is no international consensus about
how to measure and evaluate intellectual and academic production
in the ways in which it is expressed in the editorial system, either in
the interpretation of its impacts e influences. Defining
bibliometrics, scientometrics and infometrics, as well as their scope
and application, this paper presents alternative views to interpret
current scientometric indicators, which greatly outcome from
Indicadores cienciomtricos
compilation of the Citation Index, published by the Institute for
Scientific Information, and other similar databases. Particularly, an
hypothesis is presented aiming at explaining the bias of the
Citation Index in favour of the publications that belong to the
mainstream of the developed countries, against those publications
of similar quality published by Third World countries.
Subject headings: INDICATORS/utilization; BIBLIOMETRICS;
SCIENTOMETRICS; BRADFORDS LAW; ZINPFS LAW;
SENGUPTAS LAW; LOTKAS LAW; CITATION ANALYSIS;
IMPACT FACTOR.