ARTCULO ESPECIAL

Los indicadores bibliomtricos y la evaluacin de la actividad mdico-cientfica. IV. La aplicacin de los indicadores
J.M. Lpez Piero* y M.L. Terrada**
*Unidad de Historia de la Ciencia. **Centro de Documentacin e Informtica Biomdica. Instituto de Estudios Histricos y Documentales sobre la Ciencia. Universidad de Valencia. Consejo Superior de Investigaciones Cientficas.

indicadores bibliomtricos, actividad medicocientfica, bibliometra

Los objetivos de esta cuarta y ltima parte del presente trabajo son resumir lo ms clara y brevemente posible las condiciones del empleo de indicadores bibliomtricos para la evaluacin de la actividad mdico-cientfica y ejemplificar sus aplicaciones a revistas, autores e instituciones. Por supuesto, todo lo que se diga deber estar basado en lo que ya se ha expuesto acerca del proceso de produccin, transmisin y consumo de la informacin en la comunidad cientfica, sobre las funciones que libros, revistas, memorias de circulacin limitada, citas y referencias desempean en el mismo, as como sobre los fenmenos que miden y las fuentes de las que proceden los distintos tipos de indicadores bibliomtricos.

Condiciones del empleo de indicadores bibliomtricos para la evaluacin de la actividad mdico-cientfica El empleo de indicadores bibliomtricos para evaluar la actividad cientfica en los diversos campos de la medicina debe tener en cuenta unas condiciones que esquemticamente pueden resumiese en los ocho puntos siguientes: 1. En todos los casos es necesario asociar los indicadores bibliomtricos a las valoraciones de los expertos en la correspondiente rea mdica. Nunca est justificado, para eludir los compromisos o problemas que dichas valoraciones puedan plantear, refugiarse en los indicadores bibliomtricos como en una supuesta coartada objetiva. La tentacin de renunciar a la propia responsabilidad, acogindose a una objetividad pretendidamente neutra, es tan degradante en este terreno como en la prctica docente, clnica, mdico-social, administrativa o poltica. Por ejemplo, ningn clnico serio estara dispuesto a emitir un diagnstico sobre la exclusiva base de indicadores cuantitativos de laboratorio, renunciando a la anamnesis, la exploracin y a los informes de los especialistas pertinentes. Vamos a ver, por otra parte, que los criterios de los expertos resultan, adems, indispensables en la propia aplicacin de los indicadores bibliomtricos. 2. La importancia que los indicadores bibliomtricos tienen en la evaluacin es distinta en los diversos campos de la ciencia y la prctica mdicas.

Correspondencia: Dr. J.M. Lpez Piero. Unidad de Historia de la Ciencia. Instituto de Estudios Histricos y Documentales sobre la Ciencia. Universidad de Valencia. Blasco lbez, 17. 46010 Valencia Manuscrito recibido el 23-7-1991

Med Clin (Barc) 1992; 98: 384-388

Dicha importancia es considerable si se trata de evaluar una actividad cientfica en sentido estricto, sobre todo si es de carcter fundamentalmente experimental, ya que los indicadores bibliomtricos ms habituales y desarrollados corresponden a las caractersticas de la comunicacin en las llamadas hard sciences. En cambio, en la actividad relacionada en mayor o menor grado con las ciencias sociales y humanas, las peculiaridades que la comunicacin cientfica tiene en estas disciplinas obliga a recurrir a indicadores parcialmente distintos, que estn menos desarrollados y que, por lo general, tienen menor peso en la evaluacin. Por ltimo, la importancia de los indicadores bibliomtricos es muy limitada en la evaluacin de la actividad predominantemente prctica, tanto clnica como mdico-social; se debe considerar en ella como un mero complemento de las valoraciones cualitativas de los expertos y de las cuantitativas basadas en fundamentos documentales apropiados (historias clnicas, protocolos, informes y memorias). 3. La validez y fiabilidad de cada indicador bibliomtrico ha de someterse a un riguroso examen crtico. La comprobacin de la relacin efectiva de un indicador bibliomtrico con la actividad que se desea evaluar y de la solidez y transparencia de las fuentes de las que procede deben realizarla conjuntamente especialistas en documentacin mdica y expertos del rea en cuestin. Slo as puede estimarse, por ejemplo, la diversa validez y fiabilidad de los indicadores de repercusin basados en citas procedentes del Science citation index para evaluar la actividad de bioqumicos, clnicos o epidemilogos, o decidir que para obtener indicadores de productividad circulante a nivel nacional vlidos para mdicos que trabajan en disciplinas solapadas con las ciencias sociales, las humanas o las experimentales ajenas a la medicina, no bastan los datos bibliogrficos del ndice mdico espaol (IME), que nicamente incluye artculos de revistas mdicas, sino que son ineludibles los que proporcionan otros repertorios y bases de datos. 4. De un solo indicador bibliomtrico no pueden extraerse criterios slidos para la evaluacin. Es indispensable utilizar series de indicadores todo lo numerosas que sea posible y razonable, estudiar las coincidencias y discrepancias de la informacin que ofrecen y luego contrastarla con los criterios de los expertos. Hay que acostumbrarse a lo que Moravcsic 1,2 ha llamado multidimensionalidad de los indicadores bibliomtricos, incluso en los niveles ms rutinarios de la evaluacin. En estos ltimos son exigibles series mnimas anlogas a lo que en la clnica significa el recuento hematolgico, la frmula leucocitaria y la velocidad de sedimentacin. Hay que denunciar la irresponsabilidad que significa emitir juicios basados en uno o muy pocos indicadores bibliomtricos, por

382

J. M. LPEZ PIERO Y M. L. TERRADA.- LOS INDICADORES BIBLIOMTRICOS Y LA EVALUACIN DE LA ACTIVIDAD MDICO-CIENTFICA. IV. LA APLICACIN DE LOS INDICADORES

las graves repercusiones sociales y personales que tienen. No deben repetirse informes oficiales como el que pretenda comparar la actividad cientfica espaola con la de otros seis pases europeos a base exclusivamente del nmero de trabajos indizados por SCISEARCH ( Science citation index) y del factor de impacto de la misma fuente 3 , ni tampoco prcticas como la concesin de plazas acadmicas, clnicas o sanitarias con un fundamento similar. 5 . Los indicadores bibliomtricos solamente pueden interpretarse refirindolos a los patrones cuantitativos de libros, revistas, memorias de circulacin limitada, citas y referencias en la comunicacin cientfica de la correspondiente rea mdica. Las intuiciones y la especulacin son tan inoperantes en este punto como en cualquier otro de la ciencia y la tcnica. Ejemplos tpicos de las arbitrarias interpretaciones de los indicadores bibliomtricos que hacen los aficionados y espontneos son algunas publicaciones recientes en las que, tras exponer unos datos cuantitativos que en realidad demuestran que en determinadas reas la aportacin espaola a la literatura mdica internacional duplica o triplica los patrones medios, se extraen conclusiones pesimistas acerca del sector, simplemente porque concuerdan con los manidos tpicos del nacionalismo masoquista. Dichas interpretaciones son semejantes a la lectura de la cifra de eosinfilos, el valor de la velocidad de sedimentacin o los indicadores cuantitativos de triglicridos o transaminasas sin idea de los correspondientes patrones biolgicos y sin formacin mdica. 6. Los indicadores bibliomtricos son siempre relativos. Se ha subrayado ya en varias ocasiones esta caracterstica fundamental, por lo que slo insistiremos en que un indicador bibliomtrico carece de sentido si no se relaciona explcitamente con el rea de cobertura de la base de datos o repertorio del que procede y si no se indica claramente el perodo al que se refiere. 7. Hay indicadores bibliomtricos estndar de aplicacin bastante general, pero casi siempre la evaluacin exige recurrir a indicadores especficos, que a menudo tropiezan con obstculos conceptuales y tcnicos. No hay que olvidar que la bibliometra es un campo reciente cuyos recursos no pueden compararse todava ni de lejos con la extraordinaria variedad y riqueza de otros indicadores cuantitativos que habitualmente utiliza el mdico. Ello no debe ocultar que es un avance de primera importancia, paralelo al que el pasado siglo signific la introduccin de los indicadores cuantitativos de laboratorio para el diagnstico. 8. Junto a indicadores bibliomtricos de obtencin y lectura relativamente sencillas, existen otros, por el contrario, de obtencin e interpretacin complejas y, en consecuencia, reservados a los especialistas. Por ejemplo, los ndices de productividad circulante son de una sencillez anloga a la de la cifra de hemates por milmetro cbico en la sangre venosa perifrico, en tanto que la dificultad del trazado y la lectura de clusters pueden compararse a la que tiene la determinacin de la malignidad o la benignidad en una biopsia tumoral.

Aplicaciones en la evaluacin de revistas Los indicadores bibliomtricos de produccin, circulacin, dispersin, consumo de la informacin y repercusin tienen aplicaciones especficas en la evaluacin de las revistas mdicas cuya importancia e interpretacin son muy diferentes en los cinco grandes grupos de publicaciones peridicas que a este respecto pueden distinguirse: 1) las de carcter cientfico dedicadas a las disciplinas bsicas experimentales, la medicina clnica y las especialidades mdico-quirrgicas; 2) las de contenido asimismo cientfico pero consagradas a las

disciplinas medicosociales; 3) las de orientacin prctica, bien sea la clnica o la relacionada con la salud pblica; 4) las que se ocupan de cuestiones y noticias profesionales, y 5) las de divulgacin. Los indicadores de produccin informan exclusivamente sobre el tamao de la revista, que puede medirse no solamente a travs del nmero de artculos que publica, sino tambin, como demostr Narin4, a travs de la cifra de referencias en las que cita otras publicaciones. Referidos ambos a aos o perodos determinados, al primer valor suele unirse el ndice de productividad de Lotka5 y al segundo, la tasa de referencias por artculo. Por ejemplo, en 1988, el nmero de artculos y el ndice de productividad de siete revistas espaolas representativas de los dos primeros grupos antes citados fueron, respectivamente, los siguientes: Revista Espaola de Fisiologa (73 y 1,83), Medicina Clnica (627 y 2,80), Revista Clnica Espaola (341 y 2,53), Anales Espaoles de Pediatra (672 y 2,83), Revista Espaola de Enfermedades del Aparato Digestivo (322 y 2,51), Revista de Sanidad e Higiene Pblicas (359 y 2,55) y Asclepio (21 y 1,32). El nmero de referencias y la tasa referencias/ artculo de cuatro de ellas fueron, respectivamente, en 1982: Revista Espaola de Fisiologa (370 y 5,06), Medicina Clnica (4.483 y 7,15), Revista Clnica Espaola (6.034 y 17,69) y Revista Espaola de Enfermedades del Aparato Digestivo (3.282 y 10,19). Estos indicadores de produccin pueden tambin aplicarse a las revistas mdicas de orientacin prctica, mientras que carecen de sentido para los boletines de noticias y cuestiones profesionales y para las publicaciones peridicas de divulgacin. Como complemento de los indicadores de produccin de una revista pueden utilizarse el ndice firmas/trabajo de sus artculos, as como su nmero de aos y su ndice de pervivencia. Los indicadores de circulacin habituales tienen interpretaciones distintas en los tres primeros grupos. En el caso del periodismo mdico espaol, ya se sabe que los ms importantes son, para medir la circulacin nacional, el nmero de trabajos circulantes en la base de datos IME y los correspondientes ndices de productividad circulante y de circulacin; para medir la internacional, estos mismos valores referidos a las bases de datos MEDLINE ( Index Medicus), EMBASE ( Excerpta Medica ), BIOSIS ( Biological Abstracts ) y SCISEARCH, a los que pueden aadirse indicadores sintticos, como el ndice de difusin internacional y de circulacin potencial, as como el nmero de bases de datos y repertorios que incluyen la revista en su rea de cobertura. Las siete revistas que nos estn sirviendo de ejemplos de los dos primeros grupos (Revista Espaola de Fisiologa, Medicina Clnica, Revista Clnica Espaola, Anales Espaoles de Pediatra, Revista Espaola de Enfermedades del Aparato Digestivo, Revista de Sanidad e Higiene Pblicas y Asclepio) tienen ndices de circulacin de 1, es decir, todos sus artculos son incluidos en el IME y, por lo tanto, sus cifras de trabajos circulantes y sus ndices de productividad circulante coinciden con los anteriormente expuestos. En cambio, de una revista tpicamente orientada a la prctica clnica como SEMER, el IME solamente incluy 11 artculos durante el trienio 19861988, lo que de ningn modo puede interpretarse de forma homognea con las cifras de las revistas anteriores para concluir que tiene un nivel inferior, sino solamente como reflejo de un pequeo tanto por ciento doctrinal en su contenido predominantemente prctico. Por la misma razn, de una publicacin peridica tan notable como Informacin Teraputica de la Seguridad Social o del amplio nmero de boletines epidemiolgicos, de farmacovigilancia y otras cuestiones de salud pblica, todos ellos de carcter estrictamente prctico, el IME no incluye ningn trabajo, sin que nadie piense que ello rebaja en lo ms mnimo la valoracin que merecen. No hace falta aadir que algo parecido sucede con los

385

MEDICINA CLNICA VOL. 98 NM. 10. 1.992

TABLA 1 ndices de produccin circulante, de circulacin* y de difusin internacional de cinco revistas mdicas espaolas
MEDLINE EMBASE BIOSIS SCISEARCH De difusin internacional

Anales Espaoles de Pediatra Medicina clnica Revista Clnica Espaola Revista Espaola de enfermedades del Aparato Digestivo Revista Espaola de Fisiologa

2,65 (0,67) 2,80 (1) 2,53 (1) 2,51 (1) 1,86 (1)

2,48 (0,45) 2,08 (0,19) 1,72 (0,15) 1,47 (0,01) -

2,50 (0,51) 2,25 (0,52) 2,47 (0,92) 1,86 (1)

2,80 (1) 2,53 (1) 2,44 (0,86) 1,86 (1)

0,28 0,68 0,67 0,72 0,75

*Cifras entre parntesis. MEDLINE = Index Medicus; EMBASE = Excerpta Medica ; BIOSIS = Biological Abstracts; SCISEARCH = Science Citation Index.

TABLA 2 Indicadores de repercusin de cinco revistas mdicas espaolas

EMBASE BIOSIS SCISEARCH De difusin internacional

Citas de revistas mdicas espaolas (1982)5 Allergologia et Inmunopathologia Medicina Clnica Revista Mdica Espaola Revista Espaola de Enfermedades del Aparato Digestivo Revista Espaola de Fisiologa Science citation index (1985) Allergologia et Inmunopathologia Medicina Clnica Revista Mdica Espaola Revista Espaola de Enfermedades del Aparato Digestivo Revista Espaola de Fisiologa

44 355 486 281 9 141 131 453 160 142

1,64 2,55 2,68 2,44 0,95 2,15 2,12 2,66 2,20 2,15

0,133 0,241 0,114 0,202 0,021 0,190 0,046 0,108 0,103 0,360

0,72 0,99 0,96 0,73 0,02 0,12 0,02 0,07 0,04 0,38

boletines y revistas de noticias y cuestiones profesionales. En cuanto a las revistas de divulgacin, resulta patente que no circulan en la comunidad cientfica acadmica, sino en el conjunto de la sociedad, por lo cual los indicadores no son los bibliomtricos sino los que se utilizan para medir la circulacin de las publicaciones peridicas generales. Por otra parte, los indicadores estndar de circulacin internacional solamente pueden aplicarse a las revistas del primer grupo (tabla 1). En cambio, la evaluacin de las del segundo grupo exige casi siempre indicadores especficos de circulacin internacional. Por ejemplo, sera un grave error concluir que Asclepio carece de circulacin internacional porque no figura en las reas de cobertura de las bases de datos que se utilizan para obtener los indicadores estndar. Lo correcto es recurrir a Current Work on the History of Medicine y a HISTLINE (Bibliography of the History of Medicine), donde se comprueba, por cierto, que es indizada cover-tocover y, en consecuencia, tiene el valor 1 tanto de ndice de circulacin en cada una de ellas, como de ndice global de difusin internacional. Los indicadores de dispersin, basados en la ley de Bradford6, sirven generalmente para la evaluacin de una revista en relacin con disciplinas o temas determinados. Por ejemplo, ya se ha dicho que en las revistas mdicas espaolas de los aos ochenta, Medicina Clnica figuraba en la segunda zona de la produccin sobre cardiologa, pediatra y salud pblica, y en la tercera de la correspondiente a alcoholismo. El inters prctico de este indicador para la planificacin de la informacin cientfica por parte de un grupo o institucin habla por s mismo. Entre los indicadores de consumo de la informacin, se sabe que los ms tiles para la evaluacin son el semiperodo de Burton y Kebler7 y el ndice de Price8 como medidas de la obsolescencia y el ndice de aislamiento para estimar el grado de limitacin a la produccin mdica del propio pas. En

1982, los valores de los dos primeros en seis revistas representativas de sus variaciones dentro del periodismo mdico espaol eran los siguientes: Nefrologa (3,99 aos y 20,9 %), Anales Espaoles de Pediatra (5,26 aos y 39,6 %), Medicina Clnica (5,26 aos y 35,9 %), Revista Clnica Espaola (7,72 aos y 24,13 %), Revista Espaola de Enfermedades del Aparato Digestivo (8,08 aos y 23,8 %) y Ciruga Espaola (9,84 aos y 20,9 %). El ndice de aislamiento tena entonces valores mnimos, dentro de las revistas nucleares del periodismo mdico espaol, en Endocrinologa (4,14 %) y Revista de Diagnstico Biolgico (4,95 %) y mximos en Actas Urolgicas Espaolas (14,95 %) y Revista Espaola de Enfermedades del Aparato Digestivo (14,13 %); en una zona intermedia figuraban los de Medicina Clnica (9,46 %) y Revista Clnica Espaola (10,24 %). Por ltimo, prcticamente todos los indicadores de repercusin de los que nos hemos ocupado pueden utilizarse para la evaluacin de las revistas del primer grupo: el nmero de citas, el ndice de visibilidad, el factor de impacto y el ndice de influencia. En la tabla 2 se observan los correspondientes a cinco revistas mdicas de dicho grupo, obtenidos a partir de Science citation index y de las referencias de veinte revistas mdicas espaolas de 19829. No hace falta que reiteremos todo lo que ya se ha expuesto acerca de las cautelas que exigen tanto las complejas funciones de las citas en la comunicacin cientfica, como la correccin y el rea de cobertura de las bases de las que proceden estos indicadores. Solamente insistiremos en que estos cuatro indicadores sencillos son nicamente estimaciones groseramente aproximadas, y no comparables entre distintas disciplinas, de la repercusin en las revistas mclicas en ingls en el primer caso y en las nucleares de la medicina acadmica espaola en el segundo; nunca mediciones precisas de la calidad o la importancia, ni siquiera de la repercusin en la comunidad mdica internacional y nacional, respectivamente.

386

J. M. LPEZ PIERO Y M. L. TERRADA.- LOS INDICADORES BIBLIOMTRICOS Y LA EVALUACIN DE LA ACTIVIDAD MDICO-CIENTFICA. IV. LA APLICACIN DE LOS INDICADORES

TABLA 3 Ejemplos de indicadores bibliomtricos de Medicina Clnica

Produccin N. de artculos (1988): 627 N. de referencias (1982): 4.483 Aos de pervivencia (1988): 46 Circulacin Circulacin IME N. de artculos circulantes: 627 ndice de productividad circulante: 2,80 ndice de circulacin: 1 Circulacin internacional Potencial:5 (MEDLINE, EMBASE, BIOSIS, SCISEARCH, CA) Efectiva: N. de artculos circulantes ndice de productividad circulante ndice de circulacin ndice de difusin internacional: 0,68 Dispersin (zonas de Bradford) IME (1973-77): ncleo IME (1978-82): 2. IME (1983-88): ncleo IME, cardiologa (1978-83): 2. Consumo de informacin Semiperodo: 5,79 aos ndice de aislamiento: 9,46 % Repercusin 9 Citas de revistas mdicas espaolas (1 982) N. de citas: 355 Factor de impacto: 0,241 Science citation index (1985) N. de citas: 131 Factor de impacto: 0,046 ndice de productividad: 2,80 ndice de referencias/artculo: 7,15 ndice de pervivencia: 1,63

MEDLINE 627 2,80 1

EMBASE 122 2,08 0,19

BIOSIS 322 2,51 0,51

SCISEARCH 627 2,80 1

IME, pediatra (1979-83): 2. IME, salud pblica (1978-82): 2. IME, alcoholismo (1971-84): 3.

ndice de Price: 35,93 %

ndice de visibilidad: 2,55 ndice de influencia: 0,99 ndice de visibilidad: 2,12 ndice de influencia: 0,02

IME ndice mdico espaol; MEDLINE = Index Medicus; EMBASE = Excerpta Medica; BIOSIS = Biological Abstracts; SCISEARCH = Science Citation Index

En el caso de las revistas dedicadas a las disciplinas mdicosociales, estos indicadores tienen un inters muy pequeo, ya que a todas las limitaciones anotadas se suma otra fundamental: el papel secundario que los artculos de revista tienen para la comunicacin cientfica en casi todas ellas. Puede resultar ilustrativo reunir en una sola revista todos los indicadores cuya aplicacin hemos ejemplificado, por lo que ofrecemos los correspondientes a Medicina Clnica en la tabla 3. Aplicaciones en la evaluacin de autores e instituciones De forma paralela a lo que acabamos de decir acerca de las revistas, los indicadores bibliomtricos tienen importancia e interpretacin distintas en la evaluacin de la actividad mdico-cientfica de tres tipos claramente diferenciabas de autores e instituciones: 1) los dedicados al cultivo de las disciplinas bsicas experimentales y a la investigacin en medicina clnica y especialidades mdico-quirrgicas; 2) los consagrados a las disciplinas bsicas sociomdicas y a la investigacin en medicina social, y 3) los de carcter prctico clnico o sanitario. Los indicadores de produccin que pueden utilizarse para la evaluacin tanto de autores como de instituciones, que a este respecto han de considerarse como autores colectivos, son el nmero de publicaciones y el ndice de productividad de Lotka5 referidos a libros, artculos de revista y memorias e informes de circulacin limitada. De acuerdo con los patrones que ya hemos considerado, para los del primer grupo, los ms importantes sern con gran diferencia los correspondientes a los artculos; para los de las reas mdico-sociales, los referentes a los libros, aunque sin descuidar los otros dos epgrafes; para los prcticos hay que situar en primer plano los indicadores de memorias e informes de circulacin limi-

tada, y recordar siempre el modesto relieve que los indicadores bibliomtricos tienen para la evaluacin en este terreno. Inseparable de dichos indicadores de produccin es, en este caso, el ndice firmas/trabajo. En primer lugar, por la correlacin positiva, entre el nmero medio de firmas que aparecen en las publicaciones de un autor o institucin, su ndice de productividad y su posicin dentro de la comunidad cientfica. En segundo lugar, porque el predominio de trabajos en colaboracin obliga a manejar en la prctica el ndice de productividad fraccionario. Los indicadores de circulacin nacional e internacional son los mismos que hemos considerado al ocuparnos de las revistas, con la nica salvedad de que la circulacin potencial aqu no existe. Son quiz los ms vlidos y fiables para la evaluacin de autores e instituciones de los dos primeros grupos que antes hemos anotado, sobre todo por la condicin indiscutible de su fundamento documental y por la existencia de varios repertorios y bases de datos que permiten obtenerlos de modo sencillo y objetivo. Por el contrario, debido a las razones que ya conocemos, la actividad mdica prctica no puede medirse con ellos ni siquiera de forma aproximada. Lo nico que puede conseguirse es reflejar el nivel de dedicacin parcial a cuestiones de ndole cientfica de autores o instituciones fundamentalmente consagrados a la prctica clnica o sanitaria. Los indicadores de dispersin basados en la distribucin de Bradford carecen de inters prctico en este terreno, aunque en teora pueden utilizarse a travs de las revistas en las que autores o instituciones publican sobre una disciplina o tema determinados. Algo parecido puede decirse de los indicadores de consumo de la informacin. Por supuesto, resulta factible obtener el semiperodo7 , el ndice de Price 8 y el de aislamiento, partiendo de todas o de las ms destacadas publicaciones de

387

MEDICINA CLNICA VOL. 98 NM. 10. 1.992

TA BLA 4 Eje m plo s de indic ador es b ibliom tricos d e la a ctividad cient fica (198 1-19 90) de un hip ottic o m dico espa ol
Pro duccin N. de libr os y folletos: 2,70 (2 d e una firma , 1 de dos y 1 de cinco) N. de art culos: 13,70 (10 de un a firm a, 6 de dos, 2 de cuatro y 2 de cinco) N. de informes y mem orias de circ ulacin limitada: 1 ,95 (1 d e una firma , 3 de cuatro y 1 de cinco) ndice firm as/trab ajo: 2 ,31 Circ ulacin Circ ulacin IME N. de art culos circulantes: 1 6 nd ice de produ ctivida d circu lante: 1,20 nd ice de circulacin: 0,80 Circ ulacin inter nacion al N. de art culos circulantes nd ice de produ ctivida d circu lante nd ice de circulacin nd ice de difusin internacional: 0, 36 Rep ercusin Citas de r evistas mdicas esp aolas N. de citas: 12 nd ice de visibilidad: 1 ,08 Factor de impacto: 0,6 0 Science citation index N. de citas: 3 nd ice de visibilidad: 0 ,48 Factor de impacto: 0, 1 5 nd ice de produ ctivida d: 0,4 3 nd ice de produ ctivida d: 1,1 4 nd ice de produ ctivida d: 0,2 9

ME DLINE 12 1, 07 0, 60

EM BASE 5 0,6 9 0,2 5

BIOSIS 8 0,9 0 0,4 0

SCI SEARC H 4 0,6 2 0,2 0

IME ndice mdico espao l; MED LINE = Inde x Medi cus; EM BASE = Excerpta M edica; BIO SIS = Biol ogical Abstracts; SC ISEARC H = Scie nce Citation In dex.

un autor o institucin, pero la tarea es muy laboriosa y, salvo casos excepcionales, la informacin que aporta es de relieve muy secundario. Por ltimo, los indicadores de repercusin deben utilizarse con gran cautela. Todas las limitaciones que hemos expuesto al ocuparnos de las revistas se multiplican cuando se trata de autores o instituciones singulares. No solamente es endeble el fundamento documental debido a las complejas funciones de las citas a las que reiteradamente nos hemos referido, sino tambin la base estadstica, aparte de que los principales errores y confusiones del Science citation index se producen en relacin con los nombres de los autores. Por todo ello, no resulta extrao que la malpractice bibliomtrica ms aberrante se produzca precisamente en este punto. Sin embargo, con un examen crtico adecuado, los ndices de repercusin, y en concreto los ms sencillos, el nmero de citas, el ndice de visibilidad y el factor de impacto, son los instrumentos bibliomtricos de mayor importancia para la evaluacin de la actividad mdico-cientfica de autores e instituciones, junto a los de productividad circulante. El lmite general de su aplicacin puede determinarse fcilmente, considerando si la fuente de la que proceden corresponde a la repercusin que se trata de evaluar. Para el primero de los grupos que hemos distinguido, cultivadores de las disciplinas bsicas experimentales y de la investigacin en clnica y especialidades mdico-quirrgicas, tiene inters medir, aunque sea de modo tosco, la repercusin en las revistas biomdicas de idioma ingls que constituyen el rea de cobertura del Science citation index, sobre todo cuando esa medida se complemente con la equivalente obtenida mediante las citas procedentes de las revistas mdicas espaolas. Por el contrario, para el segundo grupo, el de los autores e instituciones sociomdicas, el inters de dichas medidas es muy escaso, ya que la repercusin que importa hay que medirla en otras publicaciones no analizadas por dichos repertorios. En cuanto a los prcticos, apenas hace falta decir que carece de sentido. Las repercusiones de las tareas clnicas y en torno a la salud pblica se producen en terrenos ajenos a la bibliografa que tienen sus indicadores propios. De forma semejante a lo que antes hemos hecho al ocupar-

nos de las revistas, en la tabla 4 se ofrecen ejemplos de todos estos indicadores utilizables para la evaluacin de autores e instituciones, referidos esta vez a la actividad de un hipottico mdico espaol durante una dcada. El modesto mbito en el que, al menos de momento, se mueven los indicadores bibliomtricos seguramente defraudar muchas expectativas, aunque estamos convencidos de que los mdicos espaoles de mentalidad ms rigurosa tienen muy clara la decisiva novedad cualitativa que significan, incluso en esta fase inicial de su desarrollo. En cualquier caso, importa mucho atajar sus aplicaciones acrticas para la evaluacin de la actividad mdico-cientfica. Las perniciosas consecuencias que estn teniendo no se producen en un campo tan inmediato como el dolor, la enfermedad y la muerte de seres humanos concretos, pero merece la misma descalificacin que el empleo acrtico de indicadores cuantitativos en el diagnstico.

BIBLIOGRAFA 1. Moravcsic MJ. Life in a multidimensional world. Scientometrics 1984; 6: 75-86. 2. Moravcsic MJ. Cmo evaluar la ciencia y los cientficos? Rev Esp Doc Cient 1989; 12: 313-325. 3. Los indicadores de la ciencia en Espaa y seis pases europeos. Estudio comparativo. Madrid: Ministerio de Educacin y Ciencia, s.a. 4. Narin F. Evaluative bibliometrics. The use of publication and citation analysis in the evaluation of scientific activity. Cherry Hill: Computer Horizons, 1976. 5. Lotka J. The frecuency distribution of scientific productivity. J Wash Acad Sci 1926; 16: 317. 6. Bradford SC. Documentation. Londres: Crosby Lockwood, 1948. 7. Burton RE, Kleber RW. The half-life of some scientific and technical literaturas. Am Doc 1960; 11: 18-22. 8. Price DJS. Networks of scientific papers. Science 1965; 149: 510515. 9. Benito Amat C. Anlisis del consumo de informacin cientfica en las publicaciones mdicas espaolas de 1982. Valencia: Tesis de licenciatura, 1985.

388