Calidad, cantidad e impacto en la publicacin acadmica

NICK HASLAM * Y SIMON M. LAHAM

Universidad de Melbourne, Australia

Abstracto

Los registros de publicacin de 85 psiclogos de personalidad social fueron

rastreados desde el momento de sus estudios de doctorado hasta 10 aos
despus del doctorado. Se examinaron las asociaciones entre la cantidad de
publicacin (nmero de artculos), la calidad (factor de impacto medio de la
revista y el puntaje de influencia del artculo) y el impacto (citas, h-index, g-
index, visitas a la pgina web). La cantidad y la calidad de la publicacin slo
estuvieron ligeramente relacionadas, y hubo evidencia de una relacin calidad-
cantidad. El impacto estaba ms fuertemente asociado con la cantidad que con
la calidad. Los autores cuyos registros pesaban la calidad sobre la cantidad
tendan a asociarse con instituciones ms prestigiosas, pero tenan menor
impacto. Las estrategias de publicacin que favorecen la cantidad y la calidad
pueden tener importantes implicaciones para la forma y el xito de las carreras
cientficas. Copyright # 2009 John Wiley & Sons, Ltd.

ara tener un gran impacto en su campo, los investigadores deben publicar a

menudo y bien. Aunque el impacto cientfico es una preocupacin importante
para los investigadores, las instituciones acadmicas y los organismos de
financiacin, las preguntas bsicas sobre cmo se relaciona con la cantidad y
calidad de la publicacin siguen sin respuesta. Es la cantidad o la calidad el
contribuyente ms importante al impacto? Los investigadores ms influyentes
pueden ser los que publican ms o los que publican en las mejores revistas.
La calidad y la cantidad estn positivamente o negativamente relacionadas?
Pueden tanto reflejar el talento cientfico y la creatividad, o perseguir uno
puede significar comprometer al otro. Los investigadores adoptan estrategias
de publicacin que favorecen la calidad o la cantidad? Algunos investigadores
pueden publicar prolficamente con poca consideracin para la calidad de la
revista, mientras que otros pueden ser menos productivos pero ms
discriminatorios. Relativamente poca investigacin ha abordado estas
preguntas. Es ampliamente reconocido que los investigadores influyentes
publican extensamente en revistas prestigiosas, pero ningn estudio ha
investigado si la productividad o la calidad de la publicacin es el ingrediente
ms importante de su xito. Saber si el impacto, usualmente evaluado usando
ndices basados en citas como h (Hirsch, 2005) o g (Egghe, 2006), se logra
mejor enfatizando que la calidad o la cantidad es de vital importancia para los
investigadores y especialmente para los primeros en sus carreras.

La relacin entre la calidad de la publicacin y la cantidad es igualmente

incierta. Los cientficos pueden simplemente variar en sus logros, ms logrados
publican una gran cantidad de trabajo de alta calidad, de modo que la cantidad
y la calidad estn positivamente relacionadas (Simonton, 1991). Por otro lado,
pueden enfrentarse a una eleccin entre perseguir calidad o cantidad que
implique una relacin negativa. La cantidad puede maximizarse compartiendo
su esfuerzo de investigacin en unidades pequeas, abordando temas
marginales o fragmentados y publicando en revistas no selectivas. La calidad
puede maximizarse mediante la produccin de un trabajo sustancial y
programtico que aborda las principales preguntas y objetivos de las revistas
de alto nivel. Por lo tanto, el esfuerzo por la cantidad puede reducir la calidad,
y viceversa. Si la calidad y la cantidad pueden ser comercializadas de esta
manera, los investigadores pueden adoptar estrategias de publicacin que
favorezcan una sobre la otra. Tales estrategias se asemejan a las descritas por
los ecologistas (Macarthur y Wilson, 1967), que distinguen a los organismos
que son estrategias r- y K-. Los r-estrategas tienen tasas reproductivas ms
altas e invierten menos cuidado en cada descendencia, mientras que los
estrategias k tienen menos hijos e invierten ms en ellos. Las r-estrategias
favorecen la cantidad y se adaptan a ambientes inestables y las estrategias k
favorecen la calidad y se adaptan a ambientes estables. Farias (2003) compar
los patrones de publicacin de varios economistas con estas estrategias y
sostuvo que los departamentos acadmicos de prestigio promueven las
estrategias K, aunque stas no siempre son las ms impactantes. El presente
estudio explor sistemticamente las relaciones entre la calidad de la
publicacin, la cantidad y el impacto. Se examin la contribucin relativa de la
calidad y la cantidad al impacto, la relacin entre calidad y cantidad
(incluyendo la posibilidad de una compensacin ), la existencia de estilos de
publicacin similares a las r- y K-estrategias y el vnculo entre estos estilos y
Institucional, utilizando ndices bibliomtricos. Aunque tales ndices (por
ejemplo, los factores de impacto de la revista) no captan las complejidades
multidimensionales de la calidad del artculo (por ejemplo, Sternberg y
Gordeeva, 1996), son proxies ampliamente utilizados que no sufren la falta de
fiabilidad que afecta evaluaciones de calidad ms subjetivas (Cicchetti 1991). ).
Se estudi una muestra internacional de psiclogos sociales y de personalidad
de una cohorte en particular (1996 o 1997 PhDs) durante un perodo estndar
(10 aos) para descartar las variables de confusin relacionadas con el campo
acadmico, los cambios histricos en las prcticas de publicacin y la etapa de
carrera.

MTODO

A mediados de 2008, se realizaron bsquedas en los 1452 perfiles de

psiclogos sociales / de personalidad de la Red de Psicologa Social (SPN) para
aquellos que incluyeron un doctorado en 1996 o 1997 y ocupando puestos de
profesores de tiempo completo. La bsqueda produjo 86 psiclogos. A
continuacin, se busc en la base de datos de la Web of Science (WoS) los
datos de publicacin y citacin de cada psiclogo desde los 3 aos anteriores a
su doctorado hasta 10 aos despus. Se excluyeron los tipos de publicacin
distintos de los artculos y artculos de revisin (por ejemplo, revisiones de
libros). Cuando los autores compartieron un apellido y una primera inicial con
otros en la base de datos, los artculos se les atribuyeron solamente despus
de la desambiguacin en WoS por iniciales, nombres o afiliaciones posteriores,
y / o por informacin en su perfil SPN o pgina institucional. Se obtuvo una
muestra final de 85 autores (52 hombres, 33 mujeres, 57 estadounidenses, 19
europeos, 4 canadienses, 5 otros) y 1409 artculos de 237 revistas, despus de
excluir a un psiclogo sin artculos. Los datos se registraron en cada artculo y
cada autor.

Caractersticas del artculo

Cada artculo publicado por un autor en el perodo de inters fue codificado

para la revista, el factor de impacto de la revista (IF: un valor medio a travs de
los aos 2003-2007), la puntuacin de influencia del artculo (AIS: E
importancia relativa para 2007), ao de publicacin y nmero de citas.

Caractersticas del Autor

Se extrajo informacin sobre el gnero de cada autor y la institucin que

concedi el ttulo de doctor y la actual de los perfiles de SPN. El prestigio de
estas instituciones fue evaluado por su posicin en el ranking universitario
mundial de Shanghai Jiao Tong (SJT) de 2008, que da rangos exactos para las
100 principales instituciones y bandas de rango general de 101 a 500. Se
calcul un ndice del nmero de visitas por mes recibidas por la pgina de perfil
del SPN del autor. Varias caractersticas de los autores se derivaron de los
datos de publicacin: nmero de artculos (ndice de cantidad de publicacin),
media IF y AIS de las revistas en las que aparecieron los artculos del autor
(ndices de calidad de publicacin) y nmero de citas, h-ndice Nmero de
artculos h que se han citado cada vez H veces), ndice g (es decir, el mayor
nmero de artculos g que se han citado colectivamente G2 veces) y visitas de
perfil (ndices de impactacin bibliomtrica y reputacional

RESULTADOS

Las estadsticas descriptivas se presentan en la Tabla 1. Las distribuciones de

publicaciones, citas y visitas de perfil presentaron una sesgada positiva
significativa, de modo que todos fueron sometidos a transformaciones de raz
cuadrada antes de todos los anlisis. No hubo diferencias sexuales en la
cantidad, calidad o impacto de la publicacin.

Aqu va una tabla la cual me dio mucha flojera copiar, te amo pero soy floja
ueu perdn
Contribucin de la Calidad y la Cantidad al Impacto La Tabla 2 presenta
correlaciones entre los ndices. Los ndices de impacto bibliomtrico (citas
totales, h-indice g-indice) intercorrelacionaron muy fuertemente y
correlacionaron moderadamente con el impacto reputacional (visitas de perfil).
Los cuatro ndices de impacto estuvieron ms fuertemente correlacionados con
la cantidad de publicaciones que con la calidad. Los anlisis de regresin
mltiple reportados en la Tabla 3 muestran que aunque la calidad (evaluada
como IF y AIS) contribuy significativamente a tres de estos ndices, la cantidad
siempre hizo una mayor contribucin.

Asociacin entre calidad y cantidad

La calidad y la cantidad de las publicaciones se correlacionaron

moderadamente (r = 0,33 [IF] & 0,36 [AIS], p <0,001). Esta asociacin era
curvilnea (invertida en forma de U), en consonancia con la existencia de una
relacin calidad-cantidad. Un efecto cuadrtico significativo

Aqu hay otra tabla

Surgi cuando la calidad se redujo en la cantidad (lineal b .41 [IF] & .44
[AIS], p <.001; cuadrtico b .26 [IF] & .25 [AIS], p <.05). La calidad esperada
se maximiz en alrededor de 30 publicaciones (percentil 88) y disminuy en
mayores cantidades. Entre los psiclogos con una productividad superior a la
mediana, la cantidad no estaba relacionada con la calidad (r .03 [IF & AIS],
p> .05). Cuando se invirti el anlisis y se produjo una regresin de la calidad
en la calidad, surgieron los mismos efectos curvilneos, con una cantidad
esperada que alcanz el 82% de la calidad y disminuy a valores ms altos. Por
implicacin, la cantidad comienza a entrar en conflicto con la calidad a niveles
relativamente altos de ambos.

Estrategia de publicacin

Para evaluar las asociaciones entre la calidad de la publicacin, la cantidad y el

impacto y el prestigio institucional, los ndices se correlacionaron con la
ubicacin de los psiclogos que concedieron el doctorado y la institucin actual
en el ranking SJT (puntuacin 1- 100 6, 101-200 5, 201 -300 4, 301-400
3, 401-500 2, sin clasificar 1). Las correlaciones presentadas en la Tabla
4 muestran que, como se predijo, el prestigio institucional estuvo asociado con
la calidad de la publicacin pero no con la cantidad. Slo el prestigio de la
institucin actual se asoci con el impacto. Los estrategas K fueron definidos
como los psiclogos (n 14) con un puntaje de calidad por encima de la
mediana (IF) y un puntaje por debajo de la mediana de la cantidad, y
estrategas r como aquellos con el patrn opuesto (n 13). Como se predijo,
los estrategas K recibieron sus doctorados de instituciones ms prestigiosas
que estrategas r (t (25) 2,89, p <0,01) y actualmente trabajaban en
instituciones ms prestigiosas (t (25) 2,14, p <0,05) . Sin embargo, los
estrategas r tuvieron un mayor impacto bibliomtrico: mayor ndice h (t (25)
2,84, p <0,01), mayor ndice g (t (25) 4,20, p <0,001) y marginalmente ms
citas (T (25) 2,01, p 0,056).

DISCUSIN

El presente estudio investig varias preguntas bsicas sobre las relaciones

entre la calidad de la publicacin, la cantidad y el impacto en una cohorte de
investigadores de psicologa. Indica que la cantidad de publicaciones es un
indicador ms fuerte del impacto que la calidad de la publicacin. El mayor
impacto cientfico, medido bibliomtricamente (citas, ndices h, ndice g) y
reputacionalmente (visitas de perfil), estuvo fuertemente asociado con la
publicacin ms, y slo dbilmente con la publicacin mejor. En parte, esta
diferencia en el peso predictivo puede reflejar la mayor variabilidad de la
cantidad de publicacin. El rango de los totales de publicacin fue
aproximadamente 5 veces la mediana de la muestra, en comparacin con 2,5
para los ndices de calidad. Si los investigadores difieren ms en su
productividad que en las FI de las revistas en las que publican, las diferencias
en su impacto cientfico reflejarn principalmente la cantidad de publicaciones.
La relacin entre el impacto y la calidad tambin puede ser limitada debido a
que el IF de una revista slo est modestamente relacionado con el impacto de
los artculos individuales que publica (Haslam et al., 2008). Las tasas de citas
de los artculos son altamente sesgadas, la mayora de los artculos en revistas
de alta IF reciben relativamente pocas citas, y de alto impacto los artculos
aparecen a menudo en revistas de baja IF. Por lo tanto, los investigadores que
tienden a publicar en revistas de alta calidad no tienen garantizado un alto
nivel de impacto.

La calidad y la cantidad de las publicaciones pueden estar relacionadas de

manera diferencial con el impacto cientfico, pero estn positivamente
relacionadas entre s. Este hallazgo implica que la calidad y la cantidad reflejan
un mayor logro cientfico: investigadores ms experimentados tienden a
publicar ms artculos y hacerlo en revistas ms prestigiosas. La calidad y la
cantidad de las publicaciones no son claramente antitticas en lo que respecta
a las diferencias entre los investigadores. Sin embargo, puede haber una
compensacin entre ellos. La calidad de la publicacin y la calidad se asociaron
negativamente a altos niveles de ambos, como si se comprara a expensas del
otro. En resumen, los investigadores exitosos pueden tener que elegir entre
publicar con mayor frecuencia en revistas menos prestigiosas o viceversa.

Tal eleccin o compromiso implica la posibilidad de estrategias de publicacin

sistemtica, como Farias (2003) seal. Un estilo de publicacin que favorece
la cantidad es anlogo a una estrategia r, y un estilo que favorece la calidad a
una estrategia K. De acuerdo con nuestra prediccin, los graduados y los
empleados de instituciones ms prestigiosas eran ms propensos a seguir una
estrategia de K, que tienden a publicar en revistas de mayor calidad que sus
pares, pero no publicar ms. El argumento ecolgico de que las estrategias se
adaptan a entornos relativamente estables puede ayudar a explicar su
tendencia. Los psiclogos asociados a universidades ms prestigiosas pueden
disfrutar de mayores recursos acadmicos, perspectivas laborales y otras
formas de "capital cultural", mientras que aquellos en instituciones menos
prestigiosas se enfrentan a un entorno acadmico menos seguro y bien
apoyado. Como resultado, es ms probable que adopten un estilo de
publicacin que enfatice la cantidad sobre la calidad. Curiosamente, nuestros
hallazgos indican que este estilo puede ser eficaz: r-estrategas fueron ms
impactantes que los estrategas k.

Nuestros hallazgos pueden tener implicaciones para la investigacin de

mentores y desarrollo profesional. A menudo se aconseja a los investigadores
jvenes que publiquen en las revistas ms selectivas y prestigiosas, pero este
consejo puede ser equivocado si su objetivo es maximizar su eventual impacto
cientfico. Si la productividad sobrepasa la calidad como un predictor del
impacto en la carrera, entonces los investigadores deben ser informados de
que es al menos tan importante publicar con frecuencia como publicar bien.
Puede ser imprudente esforzarse por publicar slo en revistas de alto nivel, ya
que esto puede conducir a una menor probabilidad de publicacin y
oportunidades perdidas de publicar en revistas menos selectivas que pueden
contribuir significativamente a un impacto cientfico posterior. Los
investigadores no siempre pueden predecir la recepcin eventual de su trabajo
por sus compaeros, y si restringen sus repertorios de publicacin eligiendo no
publicar en los puntos de venta menos prestigiosos que pueden estar costando
a s mismos impacto posterior. Sin embargo, nuestros hallazgos no implican
que los investigadores deben apuntar a la cantidad por encima de todo: los
artculos que aparecen en revistas "mejores" son, en promedio, ms
impactantes.

Es importante reconocer varias limitaciones de nuestro trabajo. En primer

lugar, sus conclusiones pueden no generalizarse a otros campos acadmicos,
que a menudo tienen diferentes normas de publicacin, oa otras cohortes de
investigadores. Adems, a pesar del amplio alcance de la SPN, algunos
miembros de la cohorte pertinente pueden haber sido omitidos. En segundo
lugar, reconocemos que la calidad y el impacto de la investigacin no son
reducibles a los ndices bibliomtricos, aunque estos ndices se utilizan cada
vez ms para ese propsito. La calidad del artculo, en particular, est
imperfectamente calibrada por los ndices de citas a nivel de la revista, y las
implicaciones de nuestros hallazgos sobre la "calidad" no deben extenderse
ms all del sentido bibliomtrico del trmino. No argumentamos que los
ndices bibliomtricos representen medidas puras o suficientes de la aptitud de
un investigador. Finalmente, nuestro estudio no incluy libros y captulos de
libros, que son proporciones significativas de la produccin de publicaciones de
algunos investigadores. Sin embargo, el estudio revela algunas nuevas
complejidades y tensiones en la publicacin acadmica dentro de la psicologa
social / personal.