<?xml version="1.0" encoding="ISO-8859-1"?><article xmlns:mml="http://www.w3.org/1998/Math/MathML" xmlns:xlink="http://www.w3.org/1999/xlink" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance">
<front>
<journal-meta>
<journal-id>1024-9435</journal-id>
<journal-title><![CDATA[ACIMED]]></journal-title>
<abbrev-journal-title><![CDATA[ACIMED]]></abbrev-journal-title>
<issn>1024-9435</issn>
<publisher>
<publisher-name><![CDATA[Centro Nacional de Información de Ciencias Médicas]]></publisher-name>
</publisher>
</journal-meta>
<article-meta>
<article-id>S1024-94352001000400006</article-id>
<title-group>
<article-title xml:lang="es"><![CDATA[Papel de la informetría y de la cienciometría y su perspectiva nacional e internacional]]></article-title>
</title-group>
<contrib-group>
<contrib contrib-type="author">
<name>
<surname><![CDATA[Macías-Chapula]]></surname>
<given-names><![CDATA[César A.]]></given-names>
</name>
<xref ref-type="aff" rid="A01"/>
</contrib>
</contrib-group>
<aff id="A01">
<institution><![CDATA[,Hospital General de México  ]]></institution>
<addr-line><![CDATA[ ]]></addr-line>
</aff>
<pub-date pub-type="pub">
<day>00</day>
<month>00</month>
<year>2001</year>
</pub-date>
<pub-date pub-type="epub">
<day>00</day>
<month>00</month>
<year>2001</year>
</pub-date>
<volume>9</volume>
<fpage>35</fpage>
<lpage>41</lpage>
<copyright-statement/>
<copyright-year/>
<self-uri xlink:href="http://scielo.sld.cu/scielo.php?script=sci_arttext&amp;pid=S1024-94352001000400006&amp;lng=en&amp;nrm=iso"></self-uri><self-uri xlink:href="http://scielo.sld.cu/scielo.php?script=sci_abstract&amp;pid=S1024-94352001000400006&amp;lng=en&amp;nrm=iso"></self-uri><self-uri xlink:href="http://scielo.sld.cu/scielo.php?script=sci_pdf&amp;pid=S1024-94352001000400006&amp;lng=en&amp;nrm=iso"></self-uri><abstract abstract-type="short" xml:lang="es"><p><![CDATA[El objetivo de este trabajo es discutir el papel de la informetría y de la cienciometría desde la perspectiva nacional e internacional con el análisis de su aplicación en la práctica. En principio, se presentan las definiciones de bibliometría, cienciometría e informetría, para luego abordar el papel de la ciencia como proceso social, con el fin de identificar las limitaciones de los indicadores científicos. Asimismo se describen algunas dificultades que obstaculizan el desarrollo de los indicadores científicos.]]></p></abstract>
<abstract abstract-type="short" xml:lang="en"><p><![CDATA[The purpose of this paper is to highlight the role of informetrics and scientometrics in the national and international perspective, noting their uses and practices. Beginning with some definitions of bibliometrics, scientometrics and informetrics, this paper discusses the role of science as a social process aiming at identifying the limitations of science indicators.]]></p></abstract>
<kwd-group>
<kwd lng="es"><![CDATA[BIBLIOMETRIA]]></kwd>
<kwd lng="es"><![CDATA[CIENCIOMETRIA]]></kwd>
<kwd lng="es"><![CDATA[INDICADORES]]></kwd>
<kwd lng="es"><![CDATA[INFORMETRIA]]></kwd>
<kwd lng="es"><![CDATA[PAISES EN DESARROLLO]]></kwd>
<kwd lng="es"><![CDATA[TECNOLOGIA DE LA INFORMACION]]></kwd>
<kwd lng="en"><![CDATA[BIBLIOMETRICS]]></kwd>
<kwd lng="en"><![CDATA[SCIENTOMETRICS]]></kwd>
<kwd lng="en"><![CDATA[INDICATORS]]></kwd>
<kwd lng="en"><![CDATA[INFORMETRICS]]></kwd>
<kwd lng="en"><![CDATA[DEVELOPING COUNTRIES]]></kwd>
<kwd lng="en"><![CDATA[INFORMATION TECHNOLOGY]]></kwd>
</kwd-group>
</article-meta>
</front><body><![CDATA[   <H2> Papel de la informetr&iacute;a y de la cienciometr&iacute;a y su perspectiva nacional e internacional<SUP>*</SUP></H2> <B>C&eacute;sar A. Mac&iacute;as-Chapula<SUP>1</SUP></B> <H4> RESUMEN</H4> El objetivo de este trabajo es discutir el papel de la informetr&iacute;a y de la cienciometr&iacute;a desde la perspectiva nacional e internacional con el an&aacute;lisis de su aplicaci&oacute;n en la pr&aacute;ctica. En principio, se presentan las definiciones de bibliometr&iacute;a, cienciometr&iacute;a e informetr&iacute;a, para luego abordar el papel de la ciencia como proceso social, con el fin de identificar las limitaciones de los indicadores cient&iacute;ficos. Asimismo se describen algunas dificultades que obstaculizan el desarrollo de los indicadores cient&iacute;ficos.      <P>Descriptores: BIBLIOMETRIA; CIENCIOMETRIA; INDICADORES; INFORMETRIA; PAISES EN DESARROLLO; TECNOLOGIA DE LA INFORMACION.      <P>La publicaci&oacute;n de los resultados de sus investigaciones es un compromiso que los cient&iacute;ficos est&aacute;n obligados a cumplir.<SUP>1</SUP> Los nuevos conocimientos producidos por los investigadores se han de transformar en informaci&oacute;n accesible a la comunidad cient&iacute;fica, de ah&iacute; que la investigaci&oacute;n se realice en un contexto de intercambio. La publicaci&oacute;n de los resultados de una investigaci&oacute;n tiene 3 objetivos: divulgar los descubrimientos cient&iacute;ficos, proteger la propiedad intelectual y lograr un reconocimiento.<SUP>2</SUP> Un trabajo cient&iacute;fico es al mismo tiempo m&aacute;s o menos un concepto, un dato o una hip&oacute;tesis. Si el trabajo es la expresi&oacute;n de una persona o de un grupo que trabaja en un frente de investigaci&oacute;n, se puede decir algo sobre las relaciones entre las personas a partir de los propios trabajos.<SUP>3</SUP>      <P>Actualmente, los indicadores de la actividad cient&iacute;fica est&aacute;n en el centro del debate sobre la vinculaci&oacute;n entre los avances de la ciencia y la tecnolog&iacute;a y el progreso econ&oacute;mico y social. Hoy d&iacute;a las revisiones de la pol&iacute;tica cient&iacute;fica ser&iacute;an inconcebibles sin recurrir a los indicadores existentes. Durante mucho tiempo, la atenci&oacute;n se concentr&oacute; en la medici&oacute;n de insumos tales como los gastos y el personal de investigaci&oacute;n y su desarrollo, pero el inter&eacute;s se ha ido desplazando cada vez m&aacute;s hacia los indicadores de los resultados.<SUP>2,4</SUP> En todo lo referente a la ciencia, los indicadores bibliom&eacute;tricos y cienciom&eacute;tricos se han convertido en algo fundamental.      <P>El objetivo de este trabajo es discutir el papel de la informetr&iacute;a y la cienciometr&iacute;a desde la perspectiva nacional e internacional y analizar su aplicaci&oacute;n pr&aacute;ctica. En principio, se presentan las definiciones de bibliometr&iacute;a, cienciometr&iacute;a e informetr&iacute;a, para luego abordar el papel de la ciencia como proceso social, con el fin de identificar las limitaciones de los indicadores cient&iacute;ficos. Tambi&eacute;n se abordan algunas limitaciones que dificultan el desarrollo de los indicadores cient&iacute;ficos. <H4> Algunas definiciones</H4> Entre los cient&iacute;ficos de la informaci&oacute;n de Europa Occidental y de los Estados Unidos, el t&eacute;rmino informetr&iacute;a se populariz&oacute; hace tan solo unos 10 a&ntilde;os como campo general de estudio que comprende las antiguas esferas de la bibliometr&iacute;a y la cienciometr&iacute;a. <I>Tague-Sutcliff </I><SUP>5</SUP> hizo en 1992 las siguientes definiciones de estos conceptos: "La bibliometr&iacute;a es el estudio de los aspectos cuantitativos de la producci&oacute;n, diseminaci&oacute;n y utilizaci&oacute;n de la informaci&oacute;n registrada. Desarrolla modelos y mediciones matem&aacute;ticas para estos procesos y utiliza sus resultados para elaborar pron&oacute;sticos y tomar decisiones". <I>Pritchard </I>1a utiliz&oacute; por primera vez en 1969.      <P>La cienciometr&iacute;a es el estudio de los aspectos cuantitativos de la ciencia como disciplina o actividad econ&oacute;mica. Forma parte de la sociolog&iacute;a de la ciencia y se aplica en la elaboraci&oacute;n de las pol&iacute;ticas cient&iacute;ficas; comprende estudios cuantitativos de las actividades cient&iacute;ficas, incluidas las publicaciones y de esa forma se superpone a la bibliometr&iacute;a.      <P>La informetr&iacute;a es el estudio de los aspectos cuantitativos de la informaci&oacute;n en cualquier forma, no s&oacute;lo a partir de registros catalogr&aacute;ficos o bibliograf&iacute;as, y abarca cualquier grupo social por lo que no se limita s&oacute;lo al cient&iacute;fico. Puede incorporar, utilizar y ampliar los diversos estudios de evaluaci&oacute;n de la informaci&oacute;n que se encuentran fuera de los l&iacute;mites de la bibliometr&iacute;a y de la cienciometr&iacute;a.      <P>En su tipolog&iacute;a para la definici&oacute;n y clasificaci&oacute;n en esas tres disciplinas, <I>McGrath</I> identific&oacute; su objeto de estudio, sus variables, sus m&eacute;todos y sus objetivos (McGrath W. What bibliometricians, scientometricians and informetricians study; a typology for definition and classification; topics for discussion. En: International Conference on Bibliometrics, Scientometrics and Informetrics, 1989. Ontario: Second Conference... Ontario: The University of Western Ontario, 1989). En la tabla&nbsp; aparece un resumen de esta tipolog&iacute;a.     <CENTER><B>Tabla. </B>Tipolog&iacute;a para la definici&oacute;n y clasificaci&oacute;n de la bibliometr&iacute;a, la cienciometr&iacute;a y la informetr&iacute;a seg&uacute;n McGrath</CENTER>      <CENTER>&nbsp;</CENTER>      ]]></body>
<body><![CDATA[<CENTER><TABLE CELLPADDING=4 > <TR> <TD VALIGN=TOP WIDTH="25%">Tipolog&iacute;a&nbsp;</TD>  <TD VALIGN=TOP WIDTH="25%">Bibliometr&iacute;a</TD>  <TD VALIGN=TOP WIDTH="25%">Cienciometr&iacute;a</TD>  <TD VALIGN=TOP WIDTH="25%">Informetr&iacute;a</TD> </TR>  <TR> <TD VALIGN=TOP WIDTH="25%">Objeto de estudio</TD>  <TD VALIGN=TOP WIDTH="25%">Libros, documentos, revis tas, art&iacute;culos, autores y usuarios</TD>  <TD VALIGN=TOP WIDTH="25%">Disciplinas, materias, Campos, esferas</TD>  <TD VALIGN=TOP WIDTH="25%">Palabras, documentos, bases de datos</TD> </TR>  <TR> <TD VALIGN=TOP WIDTH="25%">Variables</TD>  <TD VALIGN=TOP WIDTH="25%">N&uacute;meros en circulaci&oacute;n, citas, frecuencia de aparici&oacute;n de palabras, longitud de las oraciones, etc.</TD>  <TD VALIGN=TOP WIDTH="25%">Aspectos que diferencian a las disciplinas y a las subdisciplinas. Revistas, autores, trabajos, forma en que se comunican los cient&iacute;ficos</TD>  <TD VALIGN=TOP WIDTH="25%">Difiere de la cienciometr&iacute;a en los prop&oacute;sitos de las variables, por ejemplo, medir la recuperaci&oacute;n, la relevancia, el recordatorio, etc.</TD> </TR>  <TR> <TD VALIGN=TOP WIDTH="25%">M&eacute;todos</TD>  <TD VALIGN=TOP WIDTH="25%">Clasificaci&oacute;n, frecuencia, distribuci&oacute;n</TD>  <TD VALIGN=TOP WIDTH="25%">An&aacute;lisis de conjunto y de correspondencia</TD>  <TD VALIGN=TOP WIDTH="25%">Modelo rector-espacio, modelos boleanos de recuperaci&oacute;n, modelos probabil&iacute;sticos, lenguaje del procesamiento, enfoques basados en el conocimiento, tesauros</TD> </TR>  <TR> <TD VALIGN=TOP WIDTH="25%">Objetivos&nbsp;</TD>  <TD VALIGN=TOP WIDTH="25%">Asignar recursos, tiempo, dinero, etc.</TD>  <TD VALIGN=TOP WIDTH="25%">Identificar esferas de inter&eacute;s; d&oacute;nde se encuentran las materias;comprender c&oacute;mo y con qu&eacute; frecuencia se comunican los cient&iacute;ficos</TD>  <TD VALIGN=TOP WIDTH="25%">Aumentar la eficiencia de la recuperaci&oacute;n&nbsp;</TD> </TR> </TABLE></CENTER> &nbsp;      <P>El alcance de la informetr&iacute;a es pr&aacute;ctico y te&oacute;rico; prioriza en primer lugar el desarrollo de modelos matem&aacute;ticos y, en segundo lugar la determinaci&oacute;n de medidas para los fen&oacute;menos estudiados. Los modelos brindan una base pr&aacute;ctica para la toma de decisiones y su valor radica en su capacidad de sintetizar con pocos par&aacute;metros las caracter&iacute;sticas de diversos conjuntos de datos: el formato general, la concentraci&oacute;n, la dispersi&oacute;n y los cambios a trav&eacute;s del tiempo (Glanzel W, Schoepflin U. Little scientometrics, big scientometrics... and beyond? En: International Conference on Bibliometrics, Scientometrics and Informetrics, 1993. Berlin: Fourth International Conference... Berlin: [s.n.], 1993).      <P>La cienciometr&iacute;a y la bibliometr&iacute;a se han concentrado en unas pocas y bien definidas &aacute;reas, a saber:<SUP>5</SUP> <UL>     <LI> Aspectos estad&iacute;sticos del lenguaje, la palabra, y la frecuencia de citaci&oacute;n de las frases, tanto en los textos del lenguaje natural, como en los &iacute;ndices impresos o en formato electr&oacute;nico.</LI>      <LI> Caracter&iacute;sticas de las fuentes de publicaciones, sobre todo de la distribuci&oacute;n de art&iacute;culos sobre una disciplina dada en las revistas.</LI>      <LI> Caracter&iacute;sticas de la relaci&oacute;n autor-productividad, medida por el n&uacute;mero de art&iacute;culos o por otros medios, el grado de colaboraci&oacute;n.</LI>      <LI> An&aacute;lisis de citas, distribuci&oacute;n por autores, art&iacute;culos, instituciones, revistas, pa&iacute;ses; utilizaci&oacute;n de las citas en la evaluaci&oacute;n, representaci&oacute;n de disciplinas basada en las cocitaciones.</LI>      <LI> Uso de informaci&oacute;n registrada: circulaci&oacute;n en bibliotecas y uso de libros y revistas en una misma instituci&oacute;n: uso de bases de datos.</LI>      <LI> Obsolescencia de la literatura medida seg&uacute;n el uso y las citas.</LI>      <LI> Crecimiento de la literatura especializada, bases de datos, bibliotecas; desarrollo simult&aacute;neo de nuevos conceptos.</LI>      ]]></body>
<body><![CDATA[<LI> Definici&oacute;n y medici&oacute;n de la informaci&oacute;n.</LI>      <LI> Tipos y caracter&iacute;sticas de los niveles de comportamiento de la recuperaci&oacute;n.</LI>     </UL> Hoy d&iacute;a la bibliometr&iacute;a y la cienciometr&iacute;a se aplican en una gran variedad de campos como son la historia de las ciencias, las ciencias sociales, la documentaci&oacute;n y la biblioteconom&iacute;a, la pol&iacute;tica cient&iacute;fica y la industria de la informaci&oacute;n. Recientemente, la Organizaci&oacute;n para la Cooperaci&oacute;n y el Desarrollo Econ&oacute;mico (OCDE) se refiri&oacute; a la bibliometr&iacute;a como una herramienta mediante la cual se puede observar el estado de ciencia y la tecnolog&iacute;a a trav&eacute;s de la producci&oacute;n global de la literatura cient&iacute;fica en un nivel dado de especializaci&oacute;n.<SUP>2</SUP> La bibliometr&iacute;a constituye un medio para situar la producci&oacute;n de un pa&iacute;s con respecto al mundo, una instituci&oacute;n en relaci&oacute;n con su pa&iacute;s y hasta los cient&iacute;ficos en relaci&oacute;n con sus propias comunidades. Estos indicadores cient&iacute;ficos son igualmente apropiados para los macroan&aacute;lisis (por ejemplo, de participaci&oacute;n de un pa&iacute;s determinado en la producci&oacute;n global de literatura cient&iacute;fica durante un per&iacute;odo espec&iacute;fico) y los microan&aacute;lisis por ejemplo, del papel de una instituci&oacute;n dada en la elaboraci&oacute;n de art&iacute;culos en un campo de la ciencia altamente restringido. En combinaci&oacute;n con otros indicadores, los estudios bibliom&eacute;tricos pueden ayudar a valorar el estado actual de la ciencia y apoyar la toma de decisiones y la direcci&oacute;n de la investigaci&oacute;n.      <P>Los productos de la ciencia no son objetos sino ideas, medios de comunicaci&oacute;n y reacciones ante las ideas de otros. Si bien es posible seguir simult&aacute;neamente a los cient&iacute;ficos y al dinero invertido en una investigaci&oacute;n, es m&aacute;s dif&iacute;cil medir la ciencia como un cuerpo de ideas y hechos, o alcanzar a comprender su interrelaci&oacute;n con el sistema econ&oacute;mico y social. <H4> La ciencia como sistema social</H4> La ciencia es un proceso social. Las acciones y las conductas de los cient&iacute;ficos dependen del contexto. Para comprender esto es preciso conocer los escenarios y las personalidades, ya sea en el examen del modo en que los cient&iacute;ficos hacen ciencia, o de las formas en que comunican los resultados de su labor profesional.<SUP>7</SUP>      <P>De hecho, es necesario considerar a la ciencia como un amplio sistema social, cuya primera funci&oacute;n es divulgar conocimiento, la segunda es garantizar la preservaci&oacute;n de ciertos patrones y la tercera es atribuir m&eacute;ritos y reconocimientos a quienes con su trabajo han contribuido al desarrollo de las ideas en diferentes campos.      <P>El medio m&aacute;s com&uacute;n de otorgar m&eacute;ritos y reconocimiento en la ciencia es mediante las citas. El art&iacute;culo de revistas con su correspondiente lista de citas es, y probablemente seguir&aacute; siendo, el medio m&aacute;s universalmente aceptado por el que una instituci&oacute;n cient&iacute;fica registra y divulga los resultados de sus investigaciones. Con el surgimiento de los &iacute;ndices de citas disponibles comercialmente en las &uacute;ltimas 3 d&eacute;cadas, la importancia de las citas ha adquirido una nueva dimensi&oacute;n en la vida de los cient&iacute;ficos, en los departamentos de investigaciones, las universidades y en las naciones.      <P>Seg&uacute;n <I>Cronin</I>,<SUP>7</SUP> la comercializaci&oacute;n de las citas significa que quienes las generan (autores que publican), o hacen uso de ellas (otros cient&iacute;ficos), los que la procesan y comercializan (industria de la informaci&oacute;n) y los que median en su distribuci&oacute;n (bibliotecarios y cient&iacute;ficos de la informaci&oacute;n) necesitan comprender cabalmente lo que acarrea y significa una cita.      <P>Estudios anteriores, como los de <I>Cronin<SUP>7</SUP></I> y <I>Kaplan,<SUP>8</SUP></I> han analizado hasta qu&eacute; punto las pr&aacute;cticas de citaci&oacute;n de los autores se rigen por normas y en qu&eacute; medida reciben la influencia de factores ajenos a la ciencia. Existen algunas conjeturas que parecen favorecer la idea de que muchos autores citan por un reflejo de la moda sin entrar a considerar las implicaciones de esa pr&aacute;ctica. En otras palabras, puede que no est&eacute; claro en sus mentes el porqu&eacute; citan de la forma en que lo hacen o c&oacute;mo las citas se relacionan con la ideolog&iacute;a de la ciencia. As&iacute;, la atenci&oacute;n se ha concentrado no s&oacute;lo en el motivo sino en el qu&eacute; de las citas.      <P>La cuesti&oacute;n m&aacute;s importante se refiere al grado en que las pr&aacute;cticas de citaci&oacute;n son reflejos de los elementos de los sistemas normativos y de valores de la ciencia.<SUP>9</SUP> Un an&aacute;lisis adecuado de la actividad social de la ciencia tiene que basarse en la comprensi&oacute;n de objetivos muy especiales del trabajo de un cient&iacute;fico; mientras que el an&aacute;lisis del conocimiento cient&iacute;fico adquirido ha de comprender el car&aacute;cter de ese conocimiento como propiedad social y producto de un proceso hist&oacute;rico.<SUP>10</SUP> <H4> Razones para citar</H4> La indizaci&oacute;n de citas se basa en la premisa de que una cita bibliogr&aacute;fica es una expresi&oacute;n de la relaci&oacute;n entre dos documentos, el que cita y el citado. Invariablemente existir&aacute; una brecha entre la raz&oacute;n por la cual el autor hizo la cita y el porqu&eacute; se puede pensar que la hizo. Las razones por las cuales un autor cita de una forma particular pueden ser serias o fr&iacute;volas. En 1971, <I>Weinstock </I>identific&oacute; 15 funciones espec&iacute;ficas de las citas, todas clasificadas como serias. Ellas son: <OL>     <LI> Rendir homenaje a los precursores.</LI>      ]]></body>
<body><![CDATA[<LI> Dar cr&eacute;dito por trabajos afines.</LI>      <LI> Identificar metodolog&iacute;as, equipos, etc.</LI>      <LI> Brindar lectura b&aacute;sica.</LI>      <LI> Corregir el trabajo propio.</LI>      <LI> Corregir el trabajo de otros.</LI>      <LI> Analizar trabajos anteriores.</LI>      <LI> Sustentar declaraciones.</LI>      <LI> Informar a los cient&iacute;ficos sobre trabajos futuros.</LI>      <LI> Destacar trabajos poco divulgados, mal indizados o no citados.</LI>      <LI> Validar datos y categor&iacute;as de constantes f&iacute;sicas, de hechos, etc.</LI>      ]]></body>
<body><![CDATA[<LI> Identificar publicaciones originales donde se haya discutido un concepto o idea.</LI>      <LI> Identificar publicaciones originales que describen conceptos o t&eacute;rminos ep&oacute;nimos como por ejemplo, la enfermedad de Hodgkin.</LI>      <LI> Responder a trabajos o a ideas de otros.</LI>      <LI> Debatir la primac&iacute;a de otros.</LI>     </OL> Cualquier cita puede estar influenciada por una multitud de factores que afectan la citaci&oacute;n, pero no todos tienen que ver con las convenciones reconocidas por las publicaciones acad&eacute;micas. Los factores sociales y psicol&oacute;gicos desempe&ntilde;an una significativa funci&oacute;n, al igual que la acci&oacute;n subconsciente de recordar y olvidar.<SUP>11 </SUP>Existen tambi&eacute;n factores extr&iacute;nsecos, como por ejemplo: los lectores o la percepci&oacute;n del autor acerca de las necesidades y expectativas de los lectores, el car&aacute;cter o perfil de la revista en la que se publica un art&iacute;culo, el alcance, el formato, la extensi&oacute;n de este, el conocimiento del autor del &aacute;rea en cuesti&oacute;n y su habilidad y disposici&oacute;n para utilizar las fuentes y los servicios de informaci&oacute;n apropiados.      <P><I>May</I><SUP>12</SUP> desafi&oacute; el punto de vista ortodoxo de que las citas brindan un cuadro exacto de los v&iacute;nculos intelectuales entre las publicaciones. &Eacute;l lleg&oacute; a la conclusi&oacute;n de que los autores seleccionan las citas en funci&oacute;n de sus objetivos cient&iacute;ficos, pol&iacute;ticos y personales y no para describir su linaje intelectual. Durante las &uacute;ltimas d&eacute;cadas se han dado diferentes clasificaciones, categor&iacute;as y enfoques referidos a las citas, como por ejemplo, los de <I>Bonzi,<SUP>13</SUP></I> <I>Chubin</I> y <I>Moitra,<SUP>14</SUP></I> <I>Duncam,<SUP>15</SUP></I> <I>Frost,<SUP>16</SUP></I> <I>Lipetz,<SUP>17</SUP> Moravcsik</I> y <I>Murugesan,<SUP>18</SUP></I> <I>O Connor<SUP>19</SUP></I> y <I>Oppenheim </I>y<I> Renn,</I><SUP>20</SUP> entre otros.      <P>Seg&uacute;n <I>Cronin</I>,<SUP>7</SUP> es necesario considerar la citaci&oacute;n en relaci&oacute;n con los h&aacute;bitos, actitudes, experiencias y expectativas de 4 grupos no bien definidos (pero no mutuamente excluyentes) que son los siguientes: los controladores de calidad, los educadores, los consumidores y los productores. Estos juntos conforman, definen y ejemplifican mediante la pr&aacute;ctica las normas de citaci&oacute;n, por lo que se puede afirmar que estas existen.      <P>Los controladores de calidad son aquellos que act&uacute;an como guardianes de la comunidad internacional, como por ejemplo, los editores de revistas, los &aacute;rbitros y los miembros del consejo editorial. Es necesario realizar investigaciones sobre las actitudes y las pr&aacute;cticas de este grupo. El papel de educadores corresponde a los profesores universitarios y orientadores. Los comunicadores son las personas a las que se dirigen las citas, a saber los lectores y los miembros de la comunidad cient&iacute;fica. Los productores son todos aquellos que participan activamente en el proceso de publicaci&oacute;n.      <P>De lo anterior se infiere que hay que pensar en las citas como en un proceso. Los resultados de este proceso son las listas de citas que acompa&ntilde;an a los trabajos cient&iacute;ficos. El tipo y la composici&oacute;n de esas listas reflejan la personalidad y el medio profesional del autor. No existe una teor&iacute;a &uacute;nica sobre la citaci&oacute;n capaz de explicar por qu&eacute; los autores citan de una forma determinada. La mayor&iacute;a de los an&aacute;lisis de citas, han tenido un car&aacute;cter m&aacute;s interno que externo. Se han concentrado en los datos cuantitativos y en la distribuci&oacute;n de la frecuencia, en lugar de tratar el contexto dentro del cual los autores emplean las citas. Los an&aacute;lisis de citas requieren este &uacute;ltimo tipo de investigaci&oacute;n. <H4> Perspectiva nacional e internacional</H4> Los enfoques inform&eacute;tricos, bibliom&eacute;tricos y cienciom&eacute;tricos mediante los cuales la ciencia puede ser representada por los resultados obtenidos, se basan en la noci&oacute;n de que la esencia de las investigaciones cient&iacute;ficas es la producci&oacute;n de conocimiento y que la literatura cient&iacute;fica es un componente de ese conocimiento. La idea de examinar la literatura se remonta a los inicios del siglo XX. Sin embargo, no fue hasta 1963 con la creaci&oacute;n del Science Citation Index (SCI), que se abri&oacute; el camino para todos los que buscaban medir la ciencia mediante m&eacute;todos cuantitativos y objetivos.      <P>Los gobiernos de todos los pa&iacute;ses han ido percibiendo gradualmente la necesidad de realizar un an&aacute;lisis cr&iacute;tico de sus pol&iacute;ticas cient&iacute;ficas y tecnol&oacute;gicas. Algunos han cre&iacute;do necesario la creaci&oacute;n de unidades administrativas dentro de sus ministerios con actividades de investigaci&oacute;n (educaci&oacute;n, industria, salud). Otros han preferido adiestrar a especialistas y desarrollar indicadores en un contexto acad&eacute;mico que impulse el intercambio de ideas. Este es justamente el inter&eacute;s de la Red Iberoamericana de Indicadores en Ciencia y Tecnolog&iacute;a (RIBYT).      ]]></body>
<body><![CDATA[<P>La informetr&iacute;a y la cienciometr&iacute;a se han orientado cada vez m&aacute;s hacia la pol&iacute;tica cient&iacute;fica. En el transcurso de medio siglo, estas disciplinas se han ganado un lugar como instrumentos de medici&oacute;n de la ciencia, tanto en los pa&iacute;ses occidentales industrializados y de Europa del Este, como en los pa&iacute;ses en desarrollo como la India, Holanda y el Reino Unido que fueron los primeros en publicar estudios reguladores sobre la ciencia con la utilizaci&oacute;n de indicadores inform&eacute;tricos y cienciom&eacute;tricos. Los grupos de investigaciones de estos pa&iacute;ses, fueron los pioneros en la construcci&oacute;n te&oacute;rica y la aplicaci&oacute;n pr&aacute;ctica de esos campos.<SUP>21-24</SUP>      <P>En los c&iacute;rculos cient&iacute;ficos y pol&iacute;ticos de muchos pa&iacute;ses, ha sido dif&iacute;cil lograr la aceptaci&oacute;n de la informetr&iacute;a y la cienciometr&iacute;a como medidores de la ciencia. Algunos cient&iacute;ficos se resisten a la idea de que su actividad investigativa se eval&uacute;e con un sistema cuantitativo. No resulta f&aacute;cil dar un salto en la medici&oacute;n al nivel de un pa&iacute;s o de una disciplina cient&iacute;fica, sin haber evaluado la labor individual de los investigadores,<SUP>25,26</SUP> quienes consideran que la evaluaci&oacute;n por &aacute;rbitros es la &uacute;nica forma en que deben ser examinados. El an&aacute;lisis de los datos inform&eacute;tricos y cienciom&eacute;tricos brinda informaci&oacute;n sobre la orientaci&oacute;n y el dinamismo cient&iacute;fico de un pa&iacute;s y sobre su participaci&oacute;n en la ciencia y la tecnolog&iacute;a a nivel mundial. El an&aacute;lisis en colaboraci&oacute;n posibilita identificar y representar las redes cient&iacute;ficas y destacar los nexos entre pa&iacute;ses, instituciones e investigadores adem&aacute;s de que permite conocer el impacto de los principales programas y organizaciones. La cienciometr&iacute;a pone de relieve tambi&eacute;n la estructura de las disciplinas cient&iacute;ficas y las relaciones entre ellas.      <P>Por otro lado, los indicadores se basan en un enfoque comparativo. Los valores absolutos no son en s&iacute; mismos indicativos, pues alcanzan su pleno significado s&oacute;lo en comparaci&oacute;n con los valores de otros grupos. De hecho, contabilizar trabajos no es dif&iacute;cil; lo m&aacute;s complejo radica en hacer que las cifras tengan sentido. Los n&uacute;meros no dicen nada, pues necesitan ser interpretados sobre la base de las tendencias reales y artificiales en los datos y en el m&eacute;todo utilizado para contarlos. <H4> Los indicadores</H4> A continuaci&oacute;n se detallan los indicadores m&aacute;s conocidos e importantes en la arena nacional y/o internacional.      <P>N&uacute;mero de trabajos      <P>Refleja la producci&oacute;n cient&iacute;fica medida por el conteo de trabajos y el tipo de documentos (libros, art&iacute;culos de revistas, publicaciones cient&iacute;ficas, informes, etc.). La din&aacute;mica investigativa de un pa&iacute;s determinado puede monitorearse, y seguirse sus tendencias a trav&eacute;s del tiempo.      <P>N&uacute;mero de citas      <P>Refleja el impacto de los art&iacute;culos en los asuntos citados.      <P>Coautor&iacute;a      <P>Refleja el grado de colaboraci&oacute;n en la ciencia, tanto a nivel nacional como internacional. Puede medirse el crecimiento y el decrecimiento de las investigaciones en colaboraci&oacute;n.      <P>N&uacute;mero de patentes      ]]></body>
<body><![CDATA[<P>Refleja las tendencias en los cambios t&eacute;cnicos a trav&eacute;s del tiempo y mide los resultados de los recursos invertidos en actividades de investigaci&oacute;n y desarrollo. Estos indicadores determinan el grado aproximado de la innovaci&oacute;n tecnol&oacute;gica de un pa&iacute;s.      <P>N&uacute;mero de citas y patentes      <P>Mide el impacto de la tecnolog&iacute;a.      <P>Mapas de los campos cient&iacute;ficos y de los pa&iacute;ses      <P>Ayudan a ubicar las posiciones relativas de diferentes pa&iacute;ses en la cooperaci&oacute;n cient&iacute;fica global.      <P>Las t&eacute;cnicas inform&eacute;tricas y cienciom&eacute;tricas se han aplicado para realizar an&aacute;lisis nacionales e internacionales de la literatura cient&iacute;fica. Algunos estudios han examinado el aporte de esta literatura en varios pa&iacute;ses en un per&iacute;odo determinado;<SUP>27-29</SUP> otros han presentado datos que muestran cu&aacute;ntas veces se cita a varios pa&iacute;ses.<SUP>28,29</SUP> Adem&aacute;s de los an&aacute;lisis de alcance verdaderamente internacional, se han aplicado m&eacute;todos inform&eacute;tricos y cienciom&eacute;tricos para examinar los productos cient&iacute;ficos de pa&iacute;ses individuales;<SUP>30-32 </SUP>de grupo de pa&iacute;ses;<SUP>33-37</SUP> o para comparar pa&iacute;ses.<SUP>38-42</SUP>      <P>A pesar de estos trabajos, poco se ha hecho para estudiar la influencia que un pa&iacute;s podr&iacute;a ejercer sobre otro, si bien algunas investigaciones han llegado hasta el punto de insinuar que un pa&iacute;s podr&iacute;a citar el trabajo de una naci&oacute;n vecina.<SUP>43</SUP> Por otra parte, pueden utilizarse m&eacute;todos bibliom&eacute;tricos y cienciom&eacute;tricos para observar las diferencias entre las influencias nacionales e internacionales en el campo de la ciencia. Por ejemplo, &iquest;son m&aacute;s solicitados por los pol&iacute;ticos para prestar asesor&iacute;a en un pa&iacute;s los cient&iacute;ficos m&aacute;s citados en las revistas nacionales? ?&iquest; los m&aacute;s citados en revistas internacionales? &iquest;Es dentro o fuera de su pa&iacute;s que ellos m&aacute;s publican? &iquest;Publican ellos en revistas de m&aacute;s prestigio que los cient&iacute;ficos con menos influencia pol&iacute;tica?      <P>Las principales revistas que publican trabajos relacionados con la informetr&iacute;a y la cienciometr&iacute;a son las siguientes:      <P>Bulletin of the Medical Library Association      <P>Information Processing &amp; Management      ]]></body>
<body><![CDATA[<P>Interciencia      <P>International Journal of Scientometrics and Informetrics (LJSI)      <P>International Society for Scientometrics &amp; Informetrics Proceedings (ISSI)      <P>Journal of Documentation      <P>Journal of Information Science      <P>Journal of the American Society for Information Science (JASIS)      <P>Rapport de l &iquest;Observatoire des Sciences et des Techniques      <P>Research Evaluation      <P>Research Policy      <P>Revista Espa&ntilde;ola de Documentaci&oacute;n Cient&iacute;fica      ]]></body>
<body><![CDATA[<P>Science &amp; Public Policy      <P>Scientometrics      <P>Social Studies of Science <H4> Dificultades y limitaciones</H4> En relaci&oacute;n con los tipos de documentos, la principal limitaci&oacute;n para identificar la productividad cient&iacute;fica de un pa&iacute;s es la cobertura de las bases de datos. Pocas bases de datos incluyen libros, cap&iacute;tulos de libros y tesis, y en casi ninguna se puede encontrar la llamada literatura gris (informes t&eacute;cnicos, conferencias, notas t&eacute;cnicas, etc&eacute;tera).      <P>Los principales problemas relativos a los c&aacute;lculos estad&iacute;sticos de las publicaciones son: <OL> <OL>     <LI> Cada publicaci&oacute;n no hace el mismo aporte al conocimiento cient&iacute;fico.</LI>      <LI> Lo variable de los promedios de las publicaciones con respecto a la especialidad y al contexto institucional.</LI>     </OL>     </OL> En relaci&oacute;n con las citas, los soci&oacute;logos argumentar&iacute;an que estas no se pueden comprender mediante el examen de las condiciones sociales que predisponen a los cient&iacute;ficos a citar de la forma que lo hacen. Luego entonces, para comprender el significado de una cita, es necesario entender su realidad social. Seg&uacute;n <I>Martyn</I>,<SUP>44</SUP> la cita no es una entidad sino un fen&oacute;meno, pues no todos los autores citan de la misma forma. Lo que demandan los soci&oacute;logos es la comprensi&oacute;n cabal de este fen&oacute;meno. Las t&eacute;cnicas de indizaci&oacute;n de citas no muestran de forma expl&iacute;cita la naturaleza de las relaciones entre los documentos; simplemente se utilizan para indizar la literatura cient&iacute;fica.<SUP>45</SUP>      <P><I>MacRoberts</I> y <I>MacRoberts</I><SUP>46</SUP> han relacionado los siguientes problemas en el an&aacute;lisis de citas en cuanto a hechos y datos: <OL>     <LI> Influencias formales no citadas.</LI>      ]]></body>
<body><![CDATA[<LI> Citaci&oacute;n tendenciosa o preconcebida.</LI>      <LI> Influencias informales no citadas.</LI>      <LI> Autocitas.</LI>      <LI> Diferentes tipos de citas.</LI>      <LI> Variaci&oacute;n en el promedio de citas relacionadas con el tipo de publicaci&oacute;n, la nacionalidad, el per&iacute;odo, el alcance y la especialidad.</LI>      <LI> Limitaciones t&eacute;cnicas de los &iacute;ndices de citas y bibliograf&iacute;as:</LI>     </OL>  <UL>     <LI> Autor&iacute;a m&uacute;ltiple</LI>      <LI> Sinonimia</LI>      <LI> Homonimia</LI>      ]]></body>
<body><![CDATA[<LI> Errores de edici&oacute;n</LI>      <LI> Cobertura de la literatura</LI>     </UL> Las pol&iacute;ticas de publicaci&oacute;n y las posibilidades de recuperaci&oacute;n ofrecidas por los vendedores de bases de datos tienden a limitar la investigaci&oacute;n bibliom&eacute;trica. Las bases de datos resultan insuficientes para responder a las expectativas de los especialistas en bibliometr&iacute;a. Solo tendr&iacute;a sentido la introducci&oacute;n de ciertos cambios en la estructura de los datos o de las normas, si estos pudiesen remontarse a 10 &oacute; 15 a&ntilde;os como m&iacute;nimo. Los cambios hasta ese punto parecen ser definitivamente irreales, si se tienen en cuenta los costos para los clientes.      <P>Los grupos de datos incompletos, como por ejemplo los de fuentes corporativas, son en parte responsabilidad de los vendedores. En la mayor&iacute;a de los casos, los editores de revistas y los autores son los responsables de las omisiones de datos o de alguna informaci&oacute;n incorrecta. Otros factores que perjudican la fiabilidad de las bases de datos bibliogr&aacute;ficos son el tratamiento superficial y arbitrario de los registros (por ejemplo, autores con diferentes afiliaciones), los criterios de selecci&oacute;n no documentados y los problemas de compatibilidad entre diferentes versiones de una misma base de datos (por ejemplo, en l&iacute;nea y en CD-ROM).      <P>Estos problemas y limitaciones demandan un di&aacute;logo entre los autores, los editores y las empresas encargadas de la gerencia de las bases de datos, a fin de que se puedan discutir todos los aspectos antes mencionados. Particularmente los pa&iacute;ses en v&iacute;as de desarrollo est&aacute;n urgidos de identificar y enfrentar estos problemas, antes de aplicar las nuevas tecnolog&iacute;as de la informaci&oacute;n. <H4> REFERENCIAS BIBLIOGR&Aacute;FICAS</H4>  <OL>     <!-- ref --><LI> Merton RK. Social and democratic social structure. En: Social theory and social structure. New York: Free Press, 1957;550-61.    </LI>      <!-- ref --><LI> Okubo Y. Bibliometric indicators and analysis of research systems: methods and examples. Paris: OCDE/GD, 1997.    </LI>      <!-- ref --><LI> Price D. Little science, big science. New York: Columbia University, 1963</LI>      <!-- ref --><LI> King J. A review of bibliometric and other science indicators and their role in research evaluation. J Inform Sci 1987;(13):261-76.    </LI>      <!-- ref --><LI> Tague-Sutcliffe, J. An introduction to informetrics. Inf Proc Manag 1992;28(1):1-3.    </LI>      <!-- ref --><LI> Pritchard A. Statistical bibliography or bibliometrics? J Document 1969;(25):348-9.    </LI>      <!-- ref --><LI> Cronin B. The citation process: The role and sognificance of citations in scientific communication. London: Taylor Graham, 1984.    </LI>      <!-- ref --><LI> Kaplan N. The norms of citation behaviorur: prolegomena to the footnote. Am Document 1965;16(3):179-84.    </LI>      ]]></body>
<body><![CDATA[<!-- ref --><LI> Mitroff I.I. The subjective side of science: a philosophical inquiry into the psychology of the Apollo moon scientists. Amsterdam: Elsevier, 1974.    </LI>      <!-- ref --><LI> Ravetz JR. Scientific knowledge and its social problems Harmondsworth: Peguin, 1971.    </LI>      <!-- ref --><LI> Aaronson S. The footnotes of science. Mosaic 1975;6(2):22-7.    </LI>      <!-- ref --><LI> May KO. Abuses of citation indexing. Science. 1967;(156):890-2.    </LI>      <!-- ref --><LI> Bonzi S. Characteristics of a literature as predictors of relatedness between cited and citing works. JASIS 1982;33(4):208-16.    </LI>      ]]></body>
<body><![CDATA[<!-- ref --><LI> Chubin DE; Moitra SD. Content analysis of references: adjunct or alternative to citation counting? Social Studies of Science. 1975;(5):423-41.    </LI>      <!-- ref --><LI> Duncan EB. Qualified citation indexing: its relevance to educational technology. In: EB. Duncan and R. Mcaleese R, eds. information Retrieval in Educational Technology. Aberdeen: University of Aberdeen, 1981:70-9.    </LI>      <!-- ref --><LI> Frost C. The use of citations in literary research: preliminary classification of citation functions. Lib Q 1979;49(4):399-414.    </LI>      <!-- ref --><LI> Lipetz BA. Improvement of the selectivity of citation indexes to science literature through the inclusion of citation relationship indicators American Documentation. 1965;16(2):81-90.    </LI>      <!-- ref --><LI> Moravcsk MJ; Murugesan P. Some results on the function and quality of citations. Social Studies of Science 1975;5:86-92.    </LI>      ]]></body>
<body><![CDATA[<!-- ref --><LI> O&acute;Connor, J. Citing statements: computer recognition and its use to information retrieval. Inform Process Manag 1982;18(3):125-31.    </LI>      <!-- ref --><LI> Oppenheim C; Renn SP. Highly cited old papers and the reasons why they continue to be cited. JASIS 1978;29(5):225-31.    </LI>      <LI> Irvine J; Martin BR. The econocmic effects of big science: the case of radio astronomy. En: Science &amp; Technology indicators Conference, 1980, Par&iacute;s. [Proceedings...] Par&iacute;s: OECD, 1980.</LI>      <!-- ref --><LI> ______. CERN. Past, perfomance and future prospects. Res Policy 1984;(13):311-42.    </LI>      <!-- ref --><LI> Leven O. Report of the National Survey Committee on Biochemistry. The Hague: Staatsuitgeverij, 1982</LI>      <!-- ref --><LI> Moed HF. On the measurement of research performance: the use of bibliometric indicators. Leiden: Leiden University, 1983.    </LI>      ]]></body>
<body><![CDATA[<LI> Chauvin R. Evaluer, &eacute;valuer. La Recherche 1991;(22):22.782.</LI>      <!-- ref --><LI> Rappa MA. Bibliometric methods for monitoring the emergence of new technologies. Cambridge: MIT, 1989. (Report n. WP3049-89BPS)</LI>      <!-- ref --><LI> Hulme EW. Statistical bibliography in relation to the growth of modern civilisation. London: Grafton, 1923.    </LI>      <!-- ref --><LI> Narin F, Carpenter M. National publication and citation comparisons JASIS 1975;(26)26:80-93.    </LI>      <!-- ref --><LI> Schubert A, Glanzel W, Braun T. Scientometric datafiles: a comprehensive set of indicators on 2649 journals and 96 countries in all major science fields and subfields 1981-1985. Scientometrics 1989;(16):3-478.    </LI>      <!-- ref --><LI> Arunachalam S. Physics research in Israel: a preliminary bibliometric analysis J Inform Sci 1984;(8):185-95.    </LI>      ]]></body>
<body><![CDATA[<!-- ref --><LI> Velho L. The meaning of citation in the context of a scientifically peripheral country. Scientometrics 1986;(9):71-89.    </LI>      <!-- ref --><LI> Macias-Chapula CA. Primary health care in Mexico: a non-ISI bibliometric analysis. Scientometrics 1995;34(1):63-71.    </LI>      <!-- ref --><LI> Arunachalam S, Markandy S. Science in the middle-level countries: a bibliometric analysis of scientific journals of Australia, Canada, India and Israel. J Inform Sc 1981;(3):13-26.    </LI>      <!-- ref --><LI> Macias-Chapula CA. Production and dissemination of the Mexican biomedical journals, with some considerations of the Latin American/Caribbean region. En: Egghe L, Rousseau R, eds. Informetrics 89/90. Amsterdam: Elsevier, 1989;217-28.    </LI>      <!-- ref --><LI> ____ Patterns of scientific communication among Latin American countries in the field of medical education. Scientometrics 1992;23(1):123-35.    </LI>      ]]></body>
<body><![CDATA[<!-- ref --><LI> ____ Non-SCI subject visibility of the Latin American scientific production in the health field. Scientometrics 1994;30(1):97-104.    </LI>      <!-- ref --><LI> Narvaez-Berthelemot N. International scientific collaboration in Latin America Scientometrics 1992;24(3): 373-92.    </LI>      <!-- ref --><LI> Braun T, Schubert A. Scientometric versus socio- economic indicators. Scatter plots for 51 countries, 1978-1980. Scientometrics 1988;13(1-2):3-9.    </LI>      <!-- ref --><LI> Galb&aacute;n C, G&oacute;mez I. La operaci&oacute;n cient&iacute;fica entre Espa&ntilde;a e Iberoam&eacute;rica en revistas internacionales. Rev Esp Document Cient&iacute;f.1992;15(4):405-24.    </LI>      <!-- ref --><LI> Lancaster FW. Some publication patterns in Indian and Japanese science: a bibliometric comparison. International Forum on Information and Document 1984;9(4):11-16.    </LI>      ]]></body>
<body><![CDATA[<!-- ref --><LI> Narvaez-Berthelemot N. International scientific collaboration between in Latin America and Spain, as seen from different databases. J Inform Sci 1993;(19):389-94.    </LI>      <!-- ref --><LI> Russell JM. The increasing role of international cooperation in science and technology research in Mexico. Scientometrics 1995;34(1):45-61.    </LI>      <!-- ref --><LI> Rabkin Y, Inhaber H. Science on the periphery: a citation study of three less developed countries. Scientometrics 1979;(1):261-74.    </LI>      <!-- ref --><LI> Martyn J. An examination of citation indexes. Aslib proceedings 1965;17(6):184-96.    </LI>      <!-- ref --><LI> Blackwell PK, Kochtanek TR. An iterative technique for document retrieval using descriptors and relations. En: ASIS Meeting, 1981, Washington. Proccedings of the 44<SUP>th</SUP> ... Washington: ASIS, 1981:215-7.    </LI>      ]]></body>
<body><![CDATA[<!-- ref --><LI> MacRoberts MH, MacRoberts BR. Problems of citation analysis: a critical review. JASIS 1989;40(5):342-9.    </LI>     </OL>  <H4> C&eacute;sar A. Mac&iacute;as-Chapula</H4> cesarmch@liceaga.facmed.unam.mx <H4> Abstract</H4> The purpose of this paper is to highlight the role of informetrics and scientometrics in the national and international perspective, noting their uses and practices. Beginning with some definitions of bibliometrics, scientometrics and informetrics, this paper discusses the role of science as a social process aiming at identifying the limitations of science indicators.      <P>Subject headings: BIBLIOMETRICS; SCIENTOMETRICS; INDICATORS; INFORMETRICS; DEVELOPING COUNTRIES; INFORMATION TECHNOLOGY.      <P><A NAME="x"></A>*&nbsp; Trabajo presentado en el Seminario sobre Evaluaci&oacute;n de la Producci&oacute;n Cient&iacute;fica, realizado en S&atilde;o Paulo por el Proyecto SciELO del 4 al 6 de marzo de 1998.     <BR><SUP>1</SUP>&nbsp; Consultor en Ciencias de la Informaci&oacute;n. Hospital General de M&eacute;xico.     <BR>&nbsp;       ]]></body><back>
<ref-list>
<ref id="B1">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Merton]]></surname>
<given-names><![CDATA[RK]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Social and democratic social structure]]></article-title>
<source><![CDATA[]]></source>
<year>1957</year>
<page-range>550-61</page-range><publisher-loc><![CDATA[New York ]]></publisher-loc>
<publisher-name><![CDATA[Free Press]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B2">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Okubo]]></surname>
<given-names><![CDATA[Y]]></given-names>
</name>
</person-group>
<source><![CDATA[Bibliometric indicators and analysis of research systems: methods and examples]]></source>
<year>1997</year>
<publisher-loc><![CDATA[Paris ]]></publisher-loc>
<publisher-name><![CDATA[OCDE/GD]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B3">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Price]]></surname>
<given-names><![CDATA[D]]></given-names>
</name>
</person-group>
<source><![CDATA[Little science, big science]]></source>
<year>1963</year>
<publisher-loc><![CDATA[New York ]]></publisher-loc>
<publisher-name><![CDATA[Columbia University]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B4">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[King]]></surname>
<given-names><![CDATA[J]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[A review of bibliometric and other science indicators and their role in research evaluation]]></article-title>
<source><![CDATA[J Inform Sci]]></source>
<year>1987</year>
<numero>13</numero>
<issue>13</issue>
<page-range>261-76</page-range></nlm-citation>
</ref>
<ref id="B5">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Tague-Sutcliffe]]></surname>
<given-names><![CDATA[J]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[An introduction to informetrics]]></article-title>
<source><![CDATA[Inf Proc Manag]]></source>
<year>1992</year>
<volume>28</volume>
<numero>1</numero>
<issue>1</issue>
<page-range>1-3</page-range></nlm-citation>
</ref>
<ref id="B6">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Pritchard]]></surname>
<given-names><![CDATA[A]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Statistical bibliography or bibliometrics?]]></article-title>
<source><![CDATA[J Document]]></source>
<year>1969</year>
<numero>25</numero>
<issue>25</issue>
<page-range>348-9</page-range></nlm-citation>
</ref>
<ref id="B7">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Cronin]]></surname>
<given-names><![CDATA[B]]></given-names>
</name>
</person-group>
<source><![CDATA[The citation process: The role and sognificance of citations in scientific communication]]></source>
<year>1984</year>
<publisher-loc><![CDATA[London ]]></publisher-loc>
<publisher-name><![CDATA[Taylor Graham]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B8">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Kaplan]]></surname>
<given-names><![CDATA[N]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The norms of citation behaviorur: prolegomena to the footnote]]></article-title>
<source><![CDATA[Am Document]]></source>
<year>1965</year>
<volume>16</volume>
<numero>3</numero>
<issue>3</issue>
<page-range>179-84.</page-range></nlm-citation>
</ref>
<ref id="B9">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Mitroff]]></surname>
<given-names><![CDATA[I.I]]></given-names>
</name>
</person-group>
<source><![CDATA[The subjective side of science: a philosophical inquiry into the psychology of the Apollo moon scientists]]></source>
<year>1974</year>
<publisher-loc><![CDATA[Amsterdam ]]></publisher-loc>
<publisher-name><![CDATA[Elsevier]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B10">
<nlm-citation citation-type="">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Ravetz]]></surname>
<given-names><![CDATA[JR]]></given-names>
</name>
</person-group>
<source><![CDATA[Scientific knowledge and its social problems Harmondsworth]]></source>
<year>1971</year>
<publisher-loc><![CDATA[Peguin ]]></publisher-loc>
</nlm-citation>
</ref>
<ref id="B11">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Aaronson]]></surname>
<given-names><![CDATA[S]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The footnotes of science]]></article-title>
<source><![CDATA[Mosaic]]></source>
<year>1975</year>
<volume>6</volume>
<numero>2</numero>
<issue>2</issue>
<page-range>22-7</page-range></nlm-citation>
</ref>
<ref id="B12">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[May]]></surname>
<given-names><![CDATA[KO]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Abuses of citation indexing]]></article-title>
<source><![CDATA[Science]]></source>
<year>1967</year>
<numero>156</numero>
<issue>156</issue>
<page-range>890-2</page-range></nlm-citation>
</ref>
<ref id="B13">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Bonzi]]></surname>
<given-names><![CDATA[S]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Characteristics of a literature as predictors of relatedness between cited and citing works]]></article-title>
<source><![CDATA[JASIS]]></source>
<year>1982</year>
<volume>33</volume>
<numero>4</numero>
<issue>4</issue>
<page-range>208-16</page-range></nlm-citation>
</ref>
<ref id="B14">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Chubin]]></surname>
<given-names><![CDATA[DE]]></given-names>
</name>
<name>
<surname><![CDATA[Moitra]]></surname>
<given-names><![CDATA[SD]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Content analysis of references:: adjunct or alternative to citation counting?]]></article-title>
<source><![CDATA[Social Studies of Science]]></source>
<year>1975</year>
<numero>5</numero>
<issue>5</issue>
<page-range>423-41</page-range></nlm-citation>
</ref>
<ref id="B15">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Duncan]]></surname>
<given-names><![CDATA[EB]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Qualified citation indexing: its relevance to educational technology]]></article-title>
<source><![CDATA[information Retrieval in Educational Technology]]></source>
<year>1981</year>
<page-range>70-9</page-range><publisher-loc><![CDATA[Aberdeen ]]></publisher-loc>
<publisher-name><![CDATA[University of Aberdeen]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B16">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Frost]]></surname>
<given-names><![CDATA[C]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The use of citations in literary research: preliminary classification of citation functions]]></article-title>
<source><![CDATA[Lib Q]]></source>
<year>1979</year>
<volume>49</volume>
<numero>4</numero>
<issue>4</issue>
<page-range>399-414.</page-range></nlm-citation>
</ref>
<ref id="B17">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Lipetz]]></surname>
<given-names><![CDATA[BA]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Improvement of the selectivity of citation indexes to science literature through the inclusion of citation relationship indicators]]></article-title>
<source><![CDATA[American Documentation]]></source>
<year>1965</year>
<volume>16</volume>
<numero>2</numero>
<issue>2</issue>
<page-range>81-90</page-range></nlm-citation>
</ref>
<ref id="B18">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Moravcsk]]></surname>
<given-names><![CDATA[MJ]]></given-names>
</name>
<name>
<surname><![CDATA[Murugesan]]></surname>
<given-names><![CDATA[P]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Some results on the function and quality of citations]]></article-title>
<source><![CDATA[Social Studies of Science]]></source>
<year>1975</year>
<volume>5</volume>
<page-range>86-92</page-range></nlm-citation>
</ref>
<ref id="B19">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Connor]]></surname>
<given-names><![CDATA[J]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Citing statements: computer recognition and its use to information retrieval]]></article-title>
<source><![CDATA[Inform Process Manag]]></source>
<year>1982</year>
<volume>18</volume>
<numero>3</numero>
<issue>3</issue>
<page-range>125-31</page-range></nlm-citation>
</ref>
<ref id="B20">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Oppenheim]]></surname>
<given-names><![CDATA[C]]></given-names>
</name>
<name>
<surname><![CDATA[Renn]]></surname>
<given-names><![CDATA[SP]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Highly cited old papers and the reasons why they continue to be cited.]]></article-title>
<source><![CDATA[JASIS]]></source>
<year>1978</year>
<volume>29</volume>
<numero>5</numero>
<issue>5</issue>
<page-range>225-31.</page-range></nlm-citation>
</ref>
<ref id="B21">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Irvine]]></surname>
<given-names><![CDATA[J]]></given-names>
</name>
<name>
<surname><![CDATA[Martin]]></surname>
<given-names><![CDATA[BR]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The econocmic effects of big science: the case of radio astronomy]]></article-title>
<source><![CDATA[Science & Technology indicators Conference]]></source>
<year>1980</year>
<publisher-loc><![CDATA[París ]]></publisher-loc>
<publisher-name><![CDATA[OECD]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B22">
<nlm-citation citation-type="journal">
<collab>^dCERN</collab>
<article-title xml:lang="en"><![CDATA[Past, perfomance and future prospects]]></article-title>
<source><![CDATA[Res Policy]]></source>
<year>1984</year>
<numero>13</numero>
<issue>13</issue>
<page-range>311-42.</page-range></nlm-citation>
</ref>
<ref id="B23">
<nlm-citation citation-type="">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Leven]]></surname>
<given-names><![CDATA[O]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Report of the National Survey Committee on Biochemistry]]></article-title>
<source><![CDATA[The Hague]]></source>
<year>1982</year>
<publisher-loc><![CDATA[Staatsuitgeverij ]]></publisher-loc>
</nlm-citation>
</ref>
<ref id="B24">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Moed]]></surname>
<given-names><![CDATA[HF]]></given-names>
</name>
</person-group>
<source><![CDATA[On the measurement of research performance: the use of bibliometric indicators]]></source>
<year>1983</year>
<publisher-loc><![CDATA[Leiden ]]></publisher-loc>
<publisher-name><![CDATA[Leiden University]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B25">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Chauvin]]></surname>
<given-names><![CDATA[R]]></given-names>
</name>
</person-group>
<article-title xml:lang="fr"><![CDATA[Evaluer, evaluer]]></article-title>
<source><![CDATA[La Recherche]]></source>
<year>1991</year>
<numero>22</numero>
<issue>22</issue>
<page-range>22.782</page-range></nlm-citation>
</ref>
<ref id="B26">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Rappa]]></surname>
<given-names><![CDATA[MA]]></given-names>
</name>
</person-group>
<source><![CDATA[Bibliometric methods for monitoring the emergence of new technologies]]></source>
<year>1989</year>
<publisher-loc><![CDATA[Cambridge ]]></publisher-loc>
<publisher-name><![CDATA[MIT]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B27">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Hulme]]></surname>
<given-names><![CDATA[EW]]></given-names>
</name>
</person-group>
<source><![CDATA[Statistical bibliography in relation to the growth of modern civilisation]]></source>
<year>1923</year>
<publisher-loc><![CDATA[London ]]></publisher-loc>
<publisher-name><![CDATA[Grafton]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B28">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Narin]]></surname>
<given-names><![CDATA[F]]></given-names>
</name>
<name>
<surname><![CDATA[Carpenter]]></surname>
<given-names><![CDATA[M]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[National publication and citation comparisons]]></article-title>
<source><![CDATA[JASIS]]></source>
<year>1975</year>
<volume>26</volume>
<numero>26</numero>
<issue>26</issue>
<page-range>80-93</page-range></nlm-citation>
</ref>
<ref id="B29">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Schubert]]></surname>
<given-names><![CDATA[A]]></given-names>
</name>
<name>
<surname><![CDATA[Glanzel]]></surname>
<given-names><![CDATA[W]]></given-names>
</name>
<name>
<surname><![CDATA[Braun]]></surname>
<given-names><![CDATA[T]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Scientometric datafiles: a comprehensive set of indicators on 2649 journals and 96 countries in all major science fields and subfields 1981-1985]]></article-title>
<source><![CDATA[Scientometrics]]></source>
<year>1989</year>
<numero>16</numero>
<issue>16</issue>
<page-range>3-478.</page-range></nlm-citation>
</ref>
<ref id="B30">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Arunachalam]]></surname>
<given-names><![CDATA[S]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Physics research in Israel: a preliminary bibliometric analysis]]></article-title>
<source><![CDATA[J Inform Sci]]></source>
<year>1984</year>
<numero>8</numero>
<issue>8</issue>
<page-range>185-95</page-range></nlm-citation>
</ref>
<ref id="B31">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Velho]]></surname>
<given-names><![CDATA[L]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The meaning of citation in the context of a scientifically peripheral country.]]></article-title>
<source><![CDATA[Scientometrics]]></source>
<year>1986</year>
<numero>9</numero>
<issue>9</issue>
<page-range>71-89</page-range></nlm-citation>
</ref>
<ref id="B32">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Macias-Chapula]]></surname>
<given-names><![CDATA[CA]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Primary health care in Mexico: a non-ISI bibliometric analysis.]]></article-title>
<source><![CDATA[Scientometrics]]></source>
<year>1995</year>
<volume>34</volume>
<numero>1</numero>
<issue>1</issue>
<page-range>63-71.</page-range></nlm-citation>
</ref>
<ref id="B33">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Arunachalam]]></surname>
<given-names><![CDATA[S]]></given-names>
</name>
<name>
<surname><![CDATA[Markandy]]></surname>
<given-names><![CDATA[S]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Science in the middle-level countries: a bibliometric analysis of scientific journals of Australia, Canada, India and Israel]]></article-title>
<source><![CDATA[J Inform Sc]]></source>
<year>1981</year>
<numero>3</numero>
<issue>3</issue>
<page-range>13-26</page-range></nlm-citation>
</ref>
<ref id="B34">
<nlm-citation citation-type="book">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Macias-Chapula]]></surname>
<given-names><![CDATA[CA]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Production and dissemination of the Mexican biomedical journals, with some considerations of the Latin American/Caribbean region]]></article-title>
<person-group person-group-type="editor">
<name>
<surname><![CDATA[Egghe]]></surname>
<given-names><![CDATA[L]]></given-names>
</name>
<name>
<surname><![CDATA[Rousseau]]></surname>
<given-names><![CDATA[R]]></given-names>
</name>
</person-group>
<source><![CDATA[]]></source>
<year>1989</year>
<page-range>217-28</page-range><publisher-loc><![CDATA[Amsterdam ]]></publisher-loc>
<publisher-name><![CDATA[Elsevier]]></publisher-name>
</nlm-citation>
</ref>
<ref id="B35">
<nlm-citation citation-type="journal">
<article-title xml:lang="en"><![CDATA[Patterns of scientific communication among Latin American countries in the field of medical education]]></article-title>
<source><![CDATA[Scientometrics]]></source>
<year>1992</year>
<volume>23</volume>
<numero>1</numero>
<issue>1</issue>
<page-range>123-35</page-range></nlm-citation>
</ref>
<ref id="B36">
<nlm-citation citation-type="journal">
<article-title xml:lang="en"><![CDATA[Non-SCI subject visibility of the Latin American scientific production in the health field]]></article-title>
<source><![CDATA[Scientometrics]]></source>
<year>1994</year>
<volume>30</volume>
<numero>1</numero>
<issue>1</issue>
<page-range>97-104</page-range></nlm-citation>
</ref>
<ref id="B37">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Narvaez-Berthelemot]]></surname>
<given-names><![CDATA[N]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[International scientific collaboration in Latin America]]></article-title>
<source><![CDATA[Scientometrics]]></source>
<year>1992</year>
<volume>24</volume>
<numero>3</numero>
<issue>3</issue>
<page-range>373-92.</page-range></nlm-citation>
</ref>
<ref id="B38">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Braun]]></surname>
<given-names><![CDATA[T]]></given-names>
</name>
<name>
<surname><![CDATA[Schubert]]></surname>
<given-names><![CDATA[A]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Scientometric versus socio- economic indicators. Scatter plots for 51 countries, 1978-1980]]></article-title>
<source><![CDATA[Scientometrics]]></source>
<year>1988</year>
<volume>13</volume>
<numero>1-2</numero>
<issue>1-2</issue>
<page-range>3-9</page-range></nlm-citation>
</ref>
<ref id="B39">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Galbán]]></surname>
<given-names><![CDATA[C]]></given-names>
</name>
<name>
<surname><![CDATA[Gómez]]></surname>
<given-names><![CDATA[I]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[La operación científica entre España e Iberoamérica en revistas internacionales]]></article-title>
<source><![CDATA[Rev Esp Document Científ]]></source>
<year>1992</year>
<volume>15</volume>
<numero>4</numero>
<issue>4</issue>
<page-range>405-24.</page-range></nlm-citation>
</ref>
<ref id="B40">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Lancaster]]></surname>
<given-names><![CDATA[FW]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Some publication patterns in Indian and Japanese science: a bibliometric comparison]]></article-title>
<source><![CDATA[International Forum on Information and Document]]></source>
<year>1984</year>
<volume>9</volume>
<numero>4</numero>
<issue>4</issue>
<page-range>11-16</page-range></nlm-citation>
</ref>
<ref id="B41">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Narvaez-Berthelemot]]></surname>
<given-names><![CDATA[N]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[International scientific collaboration between in Latin America and Spain, as seen from different databases]]></article-title>
<source><![CDATA[J Inform Sci]]></source>
<year>1993</year>
<numero>19</numero>
<issue>19</issue>
<page-range>389-94</page-range></nlm-citation>
</ref>
<ref id="B42">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Russell]]></surname>
<given-names><![CDATA[JM]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[The increasing role of international cooperation in science and technology research in Mexico]]></article-title>
<source><![CDATA[Scientometrics]]></source>
<year>1995</year>
<volume>;34</volume>
<numero>1</numero>
<issue>1</issue>
<page-range>45-61.</page-range></nlm-citation>
</ref>
<ref id="B43">
<nlm-citation citation-type="">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Rabkin]]></surname>
<given-names><![CDATA[Y]]></given-names>
</name>
<name>
<surname><![CDATA[Inhaber]]></surname>
<given-names><![CDATA[H]]></given-names>
</name>
</person-group>
<source><![CDATA[]]></source>
<year></year>
</nlm-citation>
</ref>
<ref id="B44">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Martyn]]></surname>
<given-names><![CDATA[J]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[An examination of citation indexes]]></article-title>
<source><![CDATA[Aslib proceedings.]]></source>
<year>1965</year>
<volume>17</volume>
<numero>6</numero>
<issue>6</issue>
<page-range>184-96</page-range></nlm-citation>
</ref>
<ref id="B45">
<nlm-citation citation-type="">
<person-group person-group-type="author">
<name>
<surname><![CDATA[Blackwell]]></surname>
<given-names><![CDATA[PK]]></given-names>
</name>
<name>
<surname><![CDATA[Kochtanek]]></surname>
<given-names><![CDATA[TR]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[An iterative technique for document retrieval using descriptors and relations]]></article-title>
<collab>ASIS</collab>
<source><![CDATA[]]></source>
<year>1981</year>
<month>19</month>
<day>81</day>
<page-range>215-7</page-range><publisher-loc><![CDATA[Washington ]]></publisher-loc>
</nlm-citation>
</ref>
<ref id="B46">
<nlm-citation citation-type="journal">
<person-group person-group-type="author">
<name>
<surname><![CDATA[MacRoberts]]></surname>
<given-names><![CDATA[MH]]></given-names>
</name>
<name>
<surname><![CDATA[MacRoberts]]></surname>
<given-names><![CDATA[BR]]></given-names>
</name>
</person-group>
<article-title xml:lang="en"><![CDATA[Problems of citation analysis: a critical review]]></article-title>
<source><![CDATA[JASIS]]></source>
<year>1989</year>
<volume>40</volume>
<numero>5</numero>
<issue>5</issue>
<page-range>342-9</page-range></nlm-citation>
</ref>
</ref-list>
</back>
</article>
