Descriptores: BIBLIOMETRIA; CIENCIOMETRIA; INDICADORES; INFORMETRIA; PAISES EN DESARROLLO; TECNOLOGIA DE LA INFORMACION.
La publicación de los resultados de sus investigaciones es un compromiso que los científicos están obligados a cumplir.1 Los nuevos conocimientos producidos por los investigadores se han de transformar en información accesible a la comunidad científica, de ahí que la investigación se realice en un contexto de intercambio. La publicación de los resultados de una investigación tiene 3 objetivos: divulgar los descubrimientos científicos, proteger la propiedad intelectual y lograr un reconocimiento.2 Un trabajo científico es al mismo tiempo más o menos un concepto, un dato o una hipótesis. Si el trabajo es la expresión de una persona o de un grupo que trabaja en un frente de investigación, se puede decir algo sobre las relaciones entre las personas a partir de los propios trabajos.3
Actualmente, los indicadores de la actividad científica están en el centro del debate sobre la vinculación entre los avances de la ciencia y la tecnología y el progreso económico y social. Hoy día las revisiones de la política científica serían inconcebibles sin recurrir a los indicadores existentes. Durante mucho tiempo, la atención se concentró en la medición de insumos tales como los gastos y el personal de investigación y su desarrollo, pero el interés se ha ido desplazando cada vez más hacia los indicadores de los resultados.2,4 En todo lo referente a la ciencia, los indicadores bibliométricos y cienciométricos se han convertido en algo fundamental.
El objetivo de este trabajo es discutir el papel de la informetría y la cienciometría desde la perspectiva nacional e internacional y analizar su aplicación práctica. En principio, se presentan las definiciones de bibliometría, cienciometría e informetría, para luego abordar el papel de la ciencia como proceso social, con el fin de identificar las limitaciones de los indicadores científicos. También se abordan algunas limitaciones que dificultan el desarrollo de los indicadores científicos.
La cienciometría es el estudio de los aspectos cuantitativos de la ciencia como disciplina o actividad económica. Forma parte de la sociología de la ciencia y se aplica en la elaboración de las políticas científicas; comprende estudios cuantitativos de las actividades científicas, incluidas las publicaciones y de esa forma se superpone a la bibliometría.
La informetría es el estudio de los aspectos cuantitativos de la información en cualquier forma, no sólo a partir de registros catalográficos o bibliografías, y abarca cualquier grupo social por lo que no se limita sólo al científico. Puede incorporar, utilizar y ampliar los diversos estudios de evaluación de la información que se encuentran fuera de los límites de la bibliometría y de la cienciometría.
En su tipología para la definición y clasificación en esas tres disciplinas, McGrath identificó su objeto de estudio, sus variables, sus métodos y sus objetivos (McGrath W. What bibliometricians, scientometricians and informetricians study; a typology for definition and classification; topics for discussion. En: International Conference on Bibliometrics, Scientometrics and Informetrics, 1989. Ontario: Second Conference... Ontario: The University of Western Ontario, 1989). En la tabla aparece un resumen de esta tipología.
Tipología | Bibliometría | Cienciometría | Informetría |
Objeto de estudio | Libros, documentos, revis tas, artículos, autores y usuarios | Disciplinas, materias, Campos, esferas | Palabras, documentos, bases de datos |
Variables | Números en circulación, citas, frecuencia de aparición de palabras, longitud de las oraciones, etc. | Aspectos que diferencian a las disciplinas y a las subdisciplinas. Revistas, autores, trabajos, forma en que se comunican los científicos | Difiere de la cienciometría en los propósitos de las variables, por ejemplo, medir la recuperación, la relevancia, el recordatorio, etc. |
Métodos | Clasificación, frecuencia, distribución | Análisis de conjunto y de correspondencia | Modelo rector-espacio, modelos boleanos de recuperación, modelos probabilísticos, lenguaje del procesamiento, enfoques basados en el conocimiento, tesauros |
Objetivos | Asignar recursos, tiempo, dinero, etc. | Identificar esferas de interés; dónde se encuentran las materias;comprender cómo y con qué frecuencia se comunican los científicos | Aumentar la eficiencia de la recuperación |
El alcance de la informetría es práctico y teórico; prioriza en primer lugar el desarrollo de modelos matemáticos y, en segundo lugar la determinación de medidas para los fenómenos estudiados. Los modelos brindan una base práctica para la toma de decisiones y su valor radica en su capacidad de sintetizar con pocos parámetros las características de diversos conjuntos de datos: el formato general, la concentración, la dispersión y los cambios a través del tiempo (Glanzel W, Schoepflin U. Little scientometrics, big scientometrics... and beyond? En: International Conference on Bibliometrics, Scientometrics and Informetrics, 1993. Berlin: Fourth International Conference... Berlin: [s.n.], 1993).
La cienciometría y la bibliometría se han concentrado en unas pocas y bien definidas áreas, a saber:5
Los productos de la ciencia no son objetos sino ideas, medios de comunicación y reacciones ante las ideas de otros. Si bien es posible seguir simultáneamente a los científicos y al dinero invertido en una investigación, es más difícil medir la ciencia como un cuerpo de ideas y hechos, o alcanzar a comprender su interrelación con el sistema económico y social.
De hecho, es necesario considerar a la ciencia como un amplio sistema social, cuya primera función es divulgar conocimiento, la segunda es garantizar la preservación de ciertos patrones y la tercera es atribuir méritos y reconocimientos a quienes con su trabajo han contribuido al desarrollo de las ideas en diferentes campos.
El medio más común de otorgar méritos y reconocimiento en la ciencia es mediante las citas. El artículo de revistas con su correspondiente lista de citas es, y probablemente seguirá siendo, el medio más universalmente aceptado por el que una institución científica registra y divulga los resultados de sus investigaciones. Con el surgimiento de los índices de citas disponibles comercialmente en las últimas 3 décadas, la importancia de las citas ha adquirido una nueva dimensión en la vida de los científicos, en los departamentos de investigaciones, las universidades y en las naciones.
Según Cronin,7 la comercialización de las citas significa que quienes las generan (autores que publican), o hacen uso de ellas (otros científicos), los que la procesan y comercializan (industria de la información) y los que median en su distribución (bibliotecarios y científicos de la información) necesitan comprender cabalmente lo que acarrea y significa una cita.
Estudios anteriores, como los de Cronin7 y Kaplan,8 han analizado hasta qué punto las prácticas de citación de los autores se rigen por normas y en qué medida reciben la influencia de factores ajenos a la ciencia. Existen algunas conjeturas que parecen favorecer la idea de que muchos autores citan por un reflejo de la moda sin entrar a considerar las implicaciones de esa práctica. En otras palabras, puede que no esté claro en sus mentes el porqué citan de la forma en que lo hacen o cómo las citas se relacionan con la ideología de la ciencia. Así, la atención se ha concentrado no sólo en el motivo sino en el qué de las citas.
La cuestión más importante se refiere al grado en que las prácticas de citación son reflejos de los elementos de los sistemas normativos y de valores de la ciencia.9 Un análisis adecuado de la actividad social de la ciencia tiene que basarse en la comprensión de objetivos muy especiales del trabajo de un científico; mientras que el análisis del conocimiento científico adquirido ha de comprender el carácter de ese conocimiento como propiedad social y producto de un proceso histórico.10
May12 desafió el punto de vista ortodoxo de que las citas brindan un cuadro exacto de los vínculos intelectuales entre las publicaciones. Él llegó a la conclusión de que los autores seleccionan las citas en función de sus objetivos científicos, políticos y personales y no para describir su linaje intelectual. Durante las últimas décadas se han dado diferentes clasificaciones, categorías y enfoques referidos a las citas, como por ejemplo, los de Bonzi,13 Chubin y Moitra,14 Duncam,15 Frost,16 Lipetz,17 Moravcsik y Murugesan,18 O Connor19 y Oppenheim y Renn,20 entre otros.
Según Cronin,7 es necesario considerar la citación en relación con los hábitos, actitudes, experiencias y expectativas de 4 grupos no bien definidos (pero no mutuamente excluyentes) que son los siguientes: los controladores de calidad, los educadores, los consumidores y los productores. Estos juntos conforman, definen y ejemplifican mediante la práctica las normas de citación, por lo que se puede afirmar que estas existen.
Los controladores de calidad son aquellos que actúan como guardianes de la comunidad internacional, como por ejemplo, los editores de revistas, los árbitros y los miembros del consejo editorial. Es necesario realizar investigaciones sobre las actitudes y las prácticas de este grupo. El papel de educadores corresponde a los profesores universitarios y orientadores. Los comunicadores son las personas a las que se dirigen las citas, a saber los lectores y los miembros de la comunidad científica. Los productores son todos aquellos que participan activamente en el proceso de publicación.
De lo anterior se infiere que hay que pensar en las citas como en un proceso. Los resultados de este proceso son las listas de citas que acompañan a los trabajos científicos. El tipo y la composición de esas listas reflejan la personalidad y el medio profesional del autor. No existe una teoría única sobre la citación capaz de explicar por qué los autores citan de una forma determinada. La mayoría de los análisis de citas, han tenido un carácter más interno que externo. Se han concentrado en los datos cuantitativos y en la distribución de la frecuencia, en lugar de tratar el contexto dentro del cual los autores emplean las citas. Los análisis de citas requieren este último tipo de investigación.
Los gobiernos de todos los países han ido percibiendo gradualmente la necesidad de realizar un análisis crítico de sus políticas científicas y tecnológicas. Algunos han creído necesario la creación de unidades administrativas dentro de sus ministerios con actividades de investigación (educación, industria, salud). Otros han preferido adiestrar a especialistas y desarrollar indicadores en un contexto académico que impulse el intercambio de ideas. Este es justamente el interés de la Red Iberoamericana de Indicadores en Ciencia y Tecnología (RIBYT). ]]>
La informetría y la cienciometría se han orientado cada vez más hacia la política científica. En el transcurso de medio siglo, estas disciplinas se han ganado un lugar como instrumentos de medición de la ciencia, tanto en los países occidentales industrializados y de Europa del Este, como en los países en desarrollo como la India, Holanda y el Reino Unido que fueron los primeros en publicar estudios reguladores sobre la ciencia con la utilización de indicadores informétricos y cienciométricos. Los grupos de investigaciones de estos países, fueron los pioneros en la construcción teórica y la aplicación práctica de esos campos.21-24En los círculos científicos y políticos de muchos países, ha sido difícil lograr la aceptación de la informetría y la cienciometría como medidores de la ciencia. Algunos científicos se resisten a la idea de que su actividad investigativa se evalúe con un sistema cuantitativo. No resulta fácil dar un salto en la medición al nivel de un país o de una disciplina científica, sin haber evaluado la labor individual de los investigadores,25,26 quienes consideran que la evaluación por árbitros es la única forma en que deben ser examinados. El análisis de los datos informétricos y cienciométricos brinda información sobre la orientación y el dinamismo científico de un país y sobre su participación en la ciencia y la tecnología a nivel mundial. El análisis en colaboración posibilita identificar y representar las redes científicas y destacar los nexos entre países, instituciones e investigadores además de que permite conocer el impacto de los principales programas y organizaciones. La cienciometría pone de relieve también la estructura de las disciplinas científicas y las relaciones entre ellas.
Por otro lado, los indicadores se basan en un enfoque comparativo. Los valores absolutos no son en sí mismos indicativos, pues alcanzan su pleno significado sólo en comparación con los valores de otros grupos. De hecho, contabilizar trabajos no es difícil; lo más complejo radica en hacer que las cifras tengan sentido. Los números no dicen nada, pues necesitan ser interpretados sobre la base de las tendencias reales y artificiales en los datos y en el método utilizado para contarlos.
Número de trabajos
Refleja la producción científica medida por el conteo de trabajos y el tipo de documentos (libros, artículos de revistas, publicaciones científicas, informes, etc.). La dinámica investigativa de un país determinado puede monitorearse, y seguirse sus tendencias a través del tiempo.
Número de citas
Refleja el impacto de los artículos en los asuntos citados.
Coautoría
Refleja el grado de colaboración en la ciencia, tanto a nivel nacional como internacional. Puede medirse el crecimiento y el decrecimiento de las investigaciones en colaboración.
Número de patentes ]]>
Refleja las tendencias en los cambios técnicos a través del tiempo y mide los resultados de los recursos invertidos en actividades de investigación y desarrollo. Estos indicadores determinan el grado aproximado de la innovación tecnológica de un país.Número de citas y patentes
Mide el impacto de la tecnología.
Mapas de los campos científicos y de los países
Ayudan a ubicar las posiciones relativas de diferentes países en la cooperación científica global.
Las técnicas informétricas y cienciométricas se han aplicado para realizar análisis nacionales e internacionales de la literatura científica. Algunos estudios han examinado el aporte de esta literatura en varios países en un período determinado;27-29 otros han presentado datos que muestran cuántas veces se cita a varios países.28,29 Además de los análisis de alcance verdaderamente internacional, se han aplicado métodos informétricos y cienciométricos para examinar los productos científicos de países individuales;30-32 de grupo de países;33-37 o para comparar países.38-42
A pesar de estos trabajos, poco se ha hecho para estudiar la influencia que un país podría ejercer sobre otro, si bien algunas investigaciones han llegado hasta el punto de insinuar que un país podría citar el trabajo de una nación vecina.43 Por otra parte, pueden utilizarse métodos bibliométricos y cienciométricos para observar las diferencias entre las influencias nacionales e internacionales en el campo de la ciencia. Por ejemplo, ¿son más solicitados por los políticos para prestar asesoría en un país los científicos más citados en las revistas nacionales? ?¿ los más citados en revistas internacionales? ¿Es dentro o fuera de su país que ellos más publican? ¿Publican ellos en revistas de más prestigio que los científicos con menos influencia política?
Las principales revistas que publican trabajos relacionados con la informetría y la cienciometría son las siguientes:
Bulletin of the Medical Library Association
Information Processing & Management ]]>
IntercienciaInternational Journal of Scientometrics and Informetrics (LJSI)
International Society for Scientometrics & Informetrics Proceedings (ISSI)
Journal of Documentation
Journal of Information Science
Journal of the American Society for Information Science (JASIS)
Rapport de l ¿Observatoire des Sciences et des Techniques
Research Evaluation
Research Policy
Revista Española de Documentación Científica ]]>
Science & Public PolicyScientometrics
Social Studies of Science
Los principales problemas relativos a los cálculos estadísticos de las publicaciones son:
MacRoberts y MacRoberts46 han relacionado los siguientes problemas en el análisis de citas en cuanto a hechos y datos:
Los grupos de datos incompletos, como por ejemplo los de fuentes corporativas, son en parte responsabilidad de los vendedores. En la mayoría de los casos, los editores de revistas y los autores son los responsables de las omisiones de datos o de alguna información incorrecta. Otros factores que perjudican la fiabilidad de las bases de datos bibliográficos son el tratamiento superficial y arbitrario de los registros (por ejemplo, autores con diferentes afiliaciones), los criterios de selección no documentados y los problemas de compatibilidad entre diferentes versiones de una misma base de datos (por ejemplo, en línea y en CD-ROM).
Estos problemas y limitaciones demandan un diálogo entre los autores, los editores y las empresas encargadas de la gerencia de las bases de datos, a fin de que se puedan discutir todos los aspectos antes mencionados. Particularmente los países en vías de desarrollo están urgidos de identificar y enfrentar estos problemas, antes de aplicar las nuevas tecnologías de la información.
Subject headings: BIBLIOMETRICS; SCIENTOMETRICS; INDICATORS; INFORMETRICS; DEVELOPING COUNTRIES; INFORMATION TECHNOLOGY.
* Trabajo presentado en el Seminario sobre Evaluación de la Producción Científica, realizado en São Paulo por el Proyecto SciELO del 4 al 6 de marzo de 1998.
1 Consultor en Ciencias de la Información. Hospital General de México.
]]>