Los análisis de citas en los trabajos científicos - Medidas de uso común en los analisis de citas

La primera y las más conocida de todas las medidas es aquélla que divide el número de citas recibidas por una revista en un determinado período de tiempo (1, 2, 3, 4 y 5 años) por el número de trabajos publicados en ella en un espacio de tiempo específico y que en la mayoría de los casos resulta menor que el período en que se analiza la citación. Por ejemplo, si se estudia un período de citación que incluye de 1986 al 1990, se puede tomar el número de trabajos publicados entre 1986 y 1988, de manera tal que exista un tiempo prudencial que posibilite el conocimiento, la utilización y la citación de los trabajos publicados por la revista. Este tipo de medida, en general, trata de determinar el impacto de la entidad que se evalúa mediante el número de citas que recibe el objeto de valoración.

Otro indicador que se utiliza para evaluar revistas es aquél que divide el número total de citas que recibe una publicación determinada en un conjunto de revistas estudiadas, por el número total de referencias que realiza la revista estudiada a todas las demás revistas analizadas. En este caso, se está ante una medida que pretende hallar el balance que existe entre la importación (citas recibidas) y la exportación de referencias. Cuando el valor de este indicador es superior a 1, indica que la importación (es decir, el número de citas que recibe) es mayor que la exportación (es decir, el número de referencias que ésta realiza de todas las demás revistas). Cuando el valor es igual a la unidad existe, entonces, un balance entre la importación y la exportación de referencias. En el caso de que la exportación de referencias sea menor que la importación de citas, la evaluación de la revista es considerada como deficiente.

Una alternativa a los indicadores expuestos la constituye aquélla en la cual se divide el número de veces que las revistas de un conjunto en estudio citan a la publicación que se evalúa, por el número total de citas realizadas por dicho conjunto a todas las revistas. Este tipo de medida pertenece a las denominadas como de influencia. Este indicador mide qué proporción del total general de citas realizadas por todas las revistas, corresponde a la revista evaluada. Puede expresarse en porcentaje mediante la multiplicación del valor obtenido por 100.

Para la aplicación de cualesquiera de estos indicadores y la interpretación de sus resultados, es necesario el cumplimiento de algunas condiciones esenciales como son que en el conjunto de revistas evaluadas no se deben mezclar publicaciones de distintas especialidades o temáticas, ni de diferentes esferas -especialmente las del sector investigativo y práctico-; y se debe separar del análisis aquellas revistas cuyo tipo de trabajo básico publicado sea el artículo de revisión o reseña. Las revistas que contribuyen al conocimiento de una disciplina se diferencian en sus patrones de citación de las revistas que soportan su práctica.

La presencia de estas condiciones resulta de gran importancia, por cuanto se ha podido determinar que el comportamiento de los parámetros de citación varía, con gran frecuencia, cuando cambia el campo temático, el sector analizado o el tipo de trabajo básico publicado en la revista.

Por último, es preciso aclarar que las citas y las referencias mencionadas en este trabajo no son aquéllas que aparecen como resultado del procesamiento analítico-sintético que de las publicaciones primarias se realiza regularmente en los servicios de información secundaria, sino a aquellas entidades reconocidas por el autor de un trabajo como fuentes de las ideas o conocimientos por él expuestos y que en general se ubican en el contenido de trabajo o en una lista al final de éste.

Las referencias registradas en los productos de información secundaria contienen, además de los datos -autor; título del trabajo; título, volumen, número y páginas de la publicación donde se encuentra- exigidos regularmente para identificar cualquier trabajo, otros elementos como la institución o afiliación del autor, los términos índices que representan la temática y los países, entre otros. Esto ofrece posibilidades más diversas de describir un flujo de literatura que el que proporcionan las citas contenidas en los trabajos científicos.

Aun cuando las referencias de los trabajos científicos ofrecen un número menor de elementos, objetos de posibles análisis, éstos contienen, en sí mismos, el reconocimiento de la importancia o la influencia que ejerció el trabajo citado en la realización de la obra del propio autor.

Las referencias registradas en los productos de información secundaria, son el resultado de una selección general realizada por la institución que los crea; sin embargo, no involucran una evaluación de su utilidad real tal y como la indican las citas aparecidas en los trabajos científicos.

Los elementos expuestos a lo largo del presente trabajo permiten valorar tanto la confiabilidad y la adecuación de los resultados de las evaluaciones obtenidas mediante los análisis de citas, como posibilitar su mejor conocimiento y uso en el contexto de las instituciones de información.

Abstract

The Analysis of Citations in the Evaluation of Scientific Papers and Serial Publications

Currently, the analysis of quotations constitutes one of the types of researches that is more frequently carried out so as to determine the impact on different information entities such as authors, institutions, publishing houses, countries and publications in the scientific processes. The theoretical bases of this type of assessment, the motivation of authors to quote other papers and some of the factors that influence on the number of quotes present in papers and publications from the biomedical sector are exposed. It is also expressed the impact of scientific mailing in the total volume of quotations from a title.

Subject headings: CITATION ANALYSIS; SERIALS; PUBLISHING EVALUATION; IMPACT FACTOR.

REFERENCIAS BIBLIOGRÁFICAS

1. Sancho R. Indicadores bibliométricos utilizados en la evaluación de la ciencia y la tecnología. Rev Esp Doc Cient 1990;13(3-4):842-65.
2. Solla Price DJ de. Hacia una ciencia de la ciencia. Barcelona: Ariel, 1973:128.
3. Garfield E. Which medical journals have the greatest impact? Ann Intern Med 1986;105(2):313-20.
4. Oppenheim C, Renn SP. Highly cited old paper and the reasons why they continue to be cited J Am Soc Inf Sci 1978;29:226-30.
5. Brooks TA. Evidence of complex citer motivations. J Am Soc Inf Sci 1986;37(1):34-6.
6. Moravcsik MJ, Morugesan P. Some results on the function and quality of citation. Soc Stud of Sci 1975;5:86-92.
7. Spiegel-Rüsing I. Highly cited old papers and the reasons why they continue to be cited. Soc Stud Sci 1977;7:105.
8. Vinkler P. A quasi-quantitative citation model. Scientometrics 1987;12(1-2):47-72.
9. Shaw JG. Article-by-article citation analysis of medical journals. Scientometrics 1987;12(1-2):101-10.
10. Spodick DH, Goldberg J. The editor’s correspondence: analysis of patterns appearing in selected specialty and general journals. Am J Cardiol 1983;52:1290-3.
11. Bonzi S. Characteristics of a literature as predictors of relatedness between cited and citing works. Am Soc Inform Sci 1982;33(4):208-16.