Indicadores cienciométricos - Bibliometría y Cienciometría

Los indicadores científicos surgen de la medición de los insumos y de los resultados de la institución científica. La cienciometría elabora metodologías para formular esos indicadores con técnicas interdisciplinarias de la economía, la estadística, la administración y la documentación. Las metodologías aceptadas internacionalmente (Manual de Frascati, Manual de Oslo y Manual de Camberra), constituyen las referencias clásicas para medir los insumos y los resultados económicos, así como los resultados tecnológicos de investigación y desarrollo (P&D). No existe consenso internacional acerca de cómo medir y evaluar la producción intelectual y académica, tal como se manifiesta en la interpretación de los impactos e influencia del sistema editorial. A partir de la definición de los términos bibliometría, cienciometría e informetría y de la explicación del alcance y aplicación de cada uno, se presentan en este trabajo varias alternativas para interpretar los indicadores cienciométricos existentes, derivados en su mayoría del Citation Index del Institute for Scientific Information y de otras bases de datos similares. En particular se presenta una hipótesis que explica el favoritismo del Citation Index hacia las publicaciones que forman parte de la corriente principal (mainstream) de los países desarrollados, en detrimento de las publicaciones de calidad similar provenientes de los países del Tercer Mundo.

Descriptores DeCS: INDICADORES/utilización; BIBLIOMETRIA; CIENCIOMETRIA; LEY DE BRADFORD; LEY DE ZIPF; LEY DE SENGUPTA; LEY DE LOTKA; ANALISIS DE CITAS; FACTOR DE IMPACTO.

Podemos considerar a la ciencia como un sistema de producción de información, en particular información en forma de publicaciones, considerando publicación a cualquier "información registrada en formatos permanentes y disponibles para el uso común". Desde este punto de vista la ciencia puede verse como una empresa con insumos y resultados. La medición de esas dos categorías -insumos y resultados- son la base de los indicadores científicos.

Gran parte de los esfuerzos de la ciencia se concentra en la elaboración de metodologías apropiadas para la formulación de estos indicadores. La medición de los insumos es una tarea más cercana a las ciencias de la economía, la estadística y la administración que, si bien trabajosa, dispone desde hace tiempo de metodologías de una razonable aceptación y de manuales con definiciones y procedimientos usados internacionalmente.

En cambio, los conceptos de la ciencia que tienen como propósito la formulación de indicadores de resultados -la segunda mitad de la tarea-, se considera generalmente la tarea más sofisticada y difícil.

A pesar de los considerables esfuerzos realizados para llegar a tener un conjunto de definiciones y clasificaciones general, apropiado, abarcador y sin ambigüedades, la situación permanece lejos de estar completamente resuelta.1 Las técnicas de medición de los resultados de la investigación tienen sólo unas décadas de existencia y todavía no se han consolidado por completo.

En los últimos 30 años la comunidad internacional, en particular la Organización para la Cooperación y Desarrollo Económico (OCDE) y la Unesco, desarrollaron metodologías para esta tarea compleja de elaborar indicadores, que pueden resumirse en 3 manuales de referencia obligada conocidos como el Manual de Frascati,2 el Manual de Oslo3 y el Manual de Camberra.4 Estos manuales ofrecen procedimientos de encuestas para medir las actividades de investigación y desarrollo experimental (I+D), determinar los recursos humanos dedicados a la ciencia y la tecnología (C&T) e interpretar la innovación tecnológica.

El Manual de Frascati, el primero de los 3 mencionados, cuya primera edición es de 1963, sigue reconociendo todavía en la reciente versión de 1993 la dificultad de elaborar un sistema de indicadores de C&T, se cita del manual:

"Por definición los indicadores ilustran un aspecto particular de una cuestión compleja y de facetas múltiples. Es necesario disponer de un modelo explícito que describa a la vez el sistema científico en sí mismo y la forma en que se relaciona con el resto de la sociedad y con la economía. En la práctica y en el estado actual de cosas, no existe un modelo explícito único capaz de establecer relaciones causales entre la ciencia, la tecnología, la economía y la sociedad".2

Estos comentarios tienen que ver con la parte de medición de insumos, es decir, con la evaluación económica, estadística, etcétera.

Cuando buscamos en el mismo manual indicaciones para interpretar resultados, en particular desde el punto de vista de la comunicación científica, o sea, las publicaciones, todavía el problema resulta ser más complicado. En el Anexo 2 del referido manual, cuyo título es "Otros indicadores de C&T" se reconoce:

"En el momento presente no existen principios básicos internacionales oficiales aplicables a la recogida de este tipo de datos o a su empleo como indicadores de ciencia y tecnología. En 1989-1990, la OCDE realizó un informe sobre el estado del conocimiento en materia de bibliometría, que podría servir para un futuro manual OCDE sobre utilización e interpretación de indicadores bibliométricos".2

El Manual de Oslo3 ofrece metodologías para la recopilación de datos que permitan interpretar la innovación en C&T. Si analizamos el manual en busca de procedimientos de evaluación basados en las publicaciones científicas, para nuestra sorpresa encontraremos que recién en el Anexo 1, como un procedimiento accesorio, se menciona a la LBIO (literature-based innovation output indicators). La LBIO es una metodología de encuestas basada en los casos de innovación en C&T que se informan en las revistas técnicas y comerciales.

Esto es sorprendente, pues una de las características de la ciencia es la publicación de sus resultados. En particular, toda aquella innovación y descubrimiento se legitima y reconoce por la prioridad de su publicación. En otras palabras, uno de los aspectos más visibles de la innovación en C&T, que es su comunicación impresa, se presenta como procedimiento marginal en el Manual de Oslo.3

Por último, en el Manual de Camberra,4 que proporciona diversas metodologías para evaluar a los recursos humanos dedicados a la C&T, ni siquiera se mencionan los métodos cienciométricos basados en la bibliometría.

En toda esta situación no deja de ser sumamente ex-traño que a la hora de medir C&T, innovación tecnológica, recursos humanos de I+D, etc.; la comunicación y la información en ciencia en su forma más característica que es la publicación, no figure en un lugar central en los referidos manuales de uso internacional. Hay razones para ello, y más adelante aventuraré algunas hipótesis.

La comunicación y la información son intrínsecas a la práctica de la ciencia. La investigación es estimulada y se sustenta por un flujo constante de nueva información. Cuando el ciclo de información se completa, otra vez se suministra nueva información en una interacción infinita, generando un ciclo renovado de creación y de descubrimientos.

El ciclo de información-creación-información puede verse como una espiral ascendente y perfectible. Este concepto es central en la idea de progreso de nuestra cultura; es la convicción de que la misma naturaleza del conocimiento -el conocimiento objetivo de la ciencia y la tecnología- es la de avanzar sin pausas, mejorar, y llegar a ser más y más perfecto.5 Este conocimiento llega a ser objetivo (el mundo III en la concepción popperiana),6 cuando se comunica y se legitima por los pares dentro de la misma comunidad científica.

Para entender el rol que juega la información en la vida de los científicos es necesario apreciar el mundo en el que trabajan, la naturaleza de su trabajo y las influencias a las que están sujetos.7 Este tema, propio de la sociología de la ciencia, requiere de instrumentos conceptuales y metodológicos que se han desarrollado bajo nombres de bibliometría y cienciometría, y se han modelizado matemáticamente en la informetría.8

No podemos interpretar los datos sobre las necesidades de información y sus usos sin reconocer que los científicos y técnicos se encuentran en el centro de muchos sistemas que tocan cada aspecto de sus trabajos. Entre los sistemas más importantes en que está inmerso ese científico están: el ambiente cultural, el político, los colegios invisibles, las organizaciones formales, los grupos de trabajo, el sistema legal y económico, las asociaciones profesionales y, finalmente, el sistema de información. La bibliometría es pues, una disciplina con alcance multidisciplinario y la que analiza uno de los aspectos más relevantes y objetivos de esa comunidad, la comunicación impresa.

Para definir con más precisión las ideas y los términos, digamos que la bibliometría comprende:

• La aplicación de análisis estadísticos para estudiar las características del uso y creación de documentos.
• El estudio cuantitativo de la producción de documentos como se refleja en las bibliografías.
• La aplicación de métodos matemáticos y estadísticos al estudio del uso que se hace de los libros y de otros soportes dentro de los sistemas de bibliotecas y entre estos.
• El estudio cuantitativo de las unidades físicas publicadas, o de las unidades bibliográficas, o de sus sustitutos.

Una vez definida la bibliometría, pasemos a definir la cienciometría. La cienciometría aplica técnicas bibliométricas a la ciencia. El término ciencia se refiere a las ciencias físicas y naturales, así como a las ciencias sociales. Pero la cienciometría va más allá de las técnicas bibliométricas, pues también examina el desarrollo y las políticas científicas. Los análisis cuantitativos de la cienciometría consideran a la ciencia como una disciplina o actividad económica. Por esta razón, la cienciometría puede establecer comparaciones entre las políticas de investigación entre los países con el análisis de sus aspectos económicos y sociales.

Los temas que interesan a la cienciometría incluyen el crecimiento cuantitativo de la ciencia, el desarrollo de las disciplinas y subdisciplinas, la relación entre ciencia y tecnología, la obsolescencia de los paradigmas científicos, la estructura de comunicación entre los científicos, la productividad y creatividad de los investigadores, las relaciones entre el desarrollo científico y el crecimiento económico, etc.