Español (pdf)
Articulo en XML
Referencias del artículo
Traducción automática
Enviar articulo por email
Citado por SciELO 
Similares en
SciELO 
Permalink
1. Introducción
En la actualidad ya está instaurada la idea de que la ciencia debe ser una actividad evaluada (Cordina, 2016 citado en Castelló-Cogollos et al., 2018) es así que la evaluación de estas publicaciones permite al investigador realizar un seguimiento y análisis de los resultados obtenidos (Sweileh y Moh'd Mansour, 2020, p. 9) para varios aspectos académicos como la financiación de proyectos de investigación, cargos de investigadores y/o directivos en instituciones como también para un trabajo colaborativo entre profesionales o colegas en un tema de interés.
Existen varios indicadores bibliométricos para valorar la productividad científica particularmente de los investigadores, como es el caso del índice h, que cumple el rol de “medir la producción científica individual de los autores” (Gómez-Mascaraque y Lourenco, 2019, p. 8).
La propuesta hecha por Jorge Hirsch en el año 2005, “ha revolucionado el mundo de la evaluación de la investigación científica al representar un balance entre el número de publicaciones y las citas a éstas” (Gisbert y Panés, 2009, p. 164), “durante estos últimos años se ha extendido el uso de un tercer parámetro, denominado índice h, el cual es un marcador específico de la penetración e influencia que tienen los trabajos publicados por un autor en particular” (Miró et al., 2016, p. 214).
El índice h representa “la distribución de citas del trabajo de un investigador, una métrica que indica la productividad (número de publicaciones) y el impacto de las citas (número de citas por publicación) de los autores” (Hirsch, 2005, p. 16569), que también “permite una comparación de autores dentro de la misma comunidad” (Favre et al., 2020, p. 931).
Como toda métrica de evaluación cuenta con desventajas, “una de las limitaciones más importantes del uso y la comparación del índice h radica en la cobertura de la base de datos” (Bar-Ilan 2008; Adriaansee y Rensleigh 2013; Halevi et al. 2017 citado por Teixeira da Silva y Dobránszki, 2018, p. 1108), además que “no es recomendable las comparaciones entre autores de diferentes edades científicas” (Askeridis, 2018, p. 620), así mismo el índice h “tiene en cuenta las autocitas, lo que varios autores sugieren que sean excluidas para una evaluación justa” (Alonso et al., 2009, p. 274).
En Paraguay se puede cuantificar el aporte en cuanto al número de publicaciones científicas realizadas por los investigadores paraguayos, es más, según cifras del Consejo Nacional para la Ciencia y la Tecnología (2019a) “en el país la investigación en la última década ha crecido cinco veces” (párr. 3), ha mostrado un crecimiento relativo de manera particular en el área de ciencias de la salud (Solís et, 2018, p. 112), debido al mayor número de contribución cuando se trata de análisis y evaluación de la producción en el país (Quintana, 2016, p. 28).
Según antecedentes sobre estudios bibliométricos realizados, no se registran resultados relacionados a la utilización del Índice h en función a los investigadores de Paraguay en una disciplina en específico, ciertamente se han analizado y se han presentado resultados de rankings de investigadores de las áreas en cuestión utilizando Google Scholar, Scopus, Web of Science y otros, pero no así específicamente utilizando esta métrica.
Por consiguiente, el objetivo de este estudio es identificar la posición que ocupan los científicos paraguayos en la escala de Hirsch mediante el índice h y contrastar los resultados recuperados de Google Scholar y Scopus, de las disciplinas de medicina, bioquímica y biología.
2. Referente teórico
Lograr una estabilidad en la ciencia, para los investigadores en Paraguay sigue siendo incierto, por lo que es importante la evaluación constante de la producción científica mediante la bibliometría para mejorar los índices de menor porcentaje.
La bibliometría es un parámetro de evaluación de los autores, al momento de valorar a un investigador se analizan varios factores en especial, la producción científica del autor, en el que se analizan su “número de publicación, la posición que ocupa su nombre entre los autores de un artículo, el número de veces que su trabajo es citado por otros y el factor de impacto de la revista donde ha publicado cada artículo” (León González et al., 2020, p. 4).
Consecuentemente, de acuerdo a las fuentes consultadas, el índice h permite la evaluación de manera singular de los investigadores. En principio, es importante ahondar sobre el concepto del índice h según algunos autores.
Para Marqués (2013) “el índice h de un investigador se define como el mayor número h de artículos científicos de ese investigador que tiene al menos el mismo número h de citas cada uno” (p. 35), por otra parte, Kpolovie y Dorgu (2019) lo describen como “una representación numérica del impacto y la productividad de un investigador / científico, estrictamente basado en las publicaciones y patentes del investigador” (p. 60), “expresa mejor el valor medio de visibilidad internacional de los artículos de un científico, por lo que su creador lo ha llamado indicador de carrera” (Chacín-Bonilla, 2012, p. 219). Grech y Rizk (2018) explican que se “reordena la producción de un autor basándose en el número total de publicaciones y el número total de citas de esos trabajos” (p. 620).
Su creador, el Dr. Jorge Hirsch (2005) afirma que “se trata de un indicador robusto que considera al mismo tiempo aspectos cuantitativos y cualitativos o de visibilidad, por lo que se podría afirmar que existe correlación entre el índice y el éxito de un investigador apreciado por sus pares” (Dorta González y Dorta González, 2010, p. 226).
Por su parte, Díaz (2014) añade que:
Para Hirsch un índice h de 20, luego de 20 años de actividad científica, es característico de un científico exitoso, es decir un índice de 40 después de 20 años caracteriza científicos sobresalientes, un índice de 60 luego de 20 años de trabajo científico es característico de individuos únicos. (p.10)
Su aparición se está dando en importantes bases de datos como Web of Science, Scopus, y especialmente en Google Scholar, de cuales se pueden obtener el índice h de los autores.
Las diversas herramientas disponibles como Google Scholar Citations, Publish or Perish y Scopus hacen que un lector y/o aficionado, investigador, docente y estudiante accedan al Índice h de un investigador.
En cuanto a la primera herramienta, Google Scholar por intermedio de Google Scholar Citations, permite “incorporar la producción académica de un investigador, indicando la publicación, el año, la cantidad de citas recibidas, así como un gráfico de citas y el cálculo del índice H para cada autor” (Ramírez-Vega y Meneses-Guillén, 2017, p. 15).
La segunda herramienta es Publish or Perish, un software que recupera y analiza citas académicas (Harzing, 2007, párr. 1); y la tercera es la base de datos Scopus, en el que los autores disponen de un perfil como autor que muestra información de su índice h (Túñez López, 2013, p. 61).
Finalmente, Paraguay se encuentra en la ardua tarea de hacer ciencia, es por ello la importancia de evaluar los resultados de la producción científica, por intermedio de las herramientas mencionadas, particularmente valorar el trabajo del investigador observando el índice h de los autores.
Actualmente, el Consejo Nacional para la Ciencia y la Tecnología (2020) registra 566 investigadores categorizados en el Programa Nacional de Incentivo a los Investigadores (PRONII), que reciben un capital limitado destinado a proyectos de investigación por medio de concursos. Por otra parte, independientemente del mencionado programa, existen investigadores autónomos cuyo aporte es significativo para el análisis de la producción del país.
3. Metodología
3.1 Enfoque
Es un estudio con enfoque cuantitativo, de alcance descriptivo con metodología bibliométrica.
3.2 Población de estudio
Publicaciones científicas (artículos originales, comunicaciones cortas, reporte de casos, artículos de revisión) recuperadas por Google Scholar y Scopus, de investigadores paraguayos, que formen parte de instituciones de filiación nacional y pertenezcan a las disciplinas del área de las ciencias de la salud: medicina, bioquímica y biología en el periodo 2019 y 2020. Se excluyeron libros, capítulos de libros y tesis.
3.3 Recolección de datos
En primer lugar, se recurrió a la base de datos del Programa Nacional de Incentivo a los Investigadores (PRONII) para obtener la lista de los investigadores categorizados de los periodos 2019-. El PRONII es un programa que establece un sistema de incentivos económicos a los investigadores (Consejo Nacional para la Ciencia y la Tecnología, 2019a) residentes en el país.
Se identificaron 188 investigadores del área de ciencias de la salud, química y biología animal. Con el fin de identificar a los investigadores de las disciplinas de medicina, bioquímica y biología se procedió a verificar la Formación Académica/Titulación de los investigadores en el CVPy curriculum vitae Paraguay (Consejo Nacional de Ciencia y Tecnología, 2019b) que son públicos según lo establece el CONACYT (Programa Nacional de Incentivo al Investigador, 2021). Se excluyeron a 44 investigadores por ser de las disciplinas de odontología, veterinaria, química, enfermería, farmacia y nutrición, quedando 144 investigadores. De estos, 122 no tenían perfiles en Google Scholar.
En vista a la limitación encontrada para acceder a los perfiles de los autores, se recurrió al software gratuito Publish or Perish, que posee mayor alcance de búsqueda que Google Scholar Citations. De los 144 investigadores identificados en la lista del PRONII, se excluyeron 11 investigadores debido a que no se pudo recuperar ninguna publicación de los mismos mediante Publish or Perish. En esta primera etapa se seleccionaron 133 investigadores paraguayos de la lista PRONII CONACYT.
En la segunda etapa se recurrió a la base de datos Scopus a través del portal Centro de Información Científica del CONACYT, CICCO (Consejo Nacional de Ciencia y Tecnología, 2019c), que permite el acceso gratuito a la mencionada base de datos en el país.
Para la búsqueda en Scopus se utilizó el término Paraguay en el campo de filtro país de afiliación, luego se aplicó el filtro por área temática. Debido a la falta de normalización de firmas en las publicaciones y alto número de resultados de nombres similares, se optó por la búsqueda de los investigadores por medio del identificador iD ORCID.
Se identificaron a 161 investigadores, de los cuales se eliminaron cuatro nombres duplicados por la falta de normalización de nombre y apellido en las publicaciones, 26 investigadores con afiliación paraguaya, pero de nacionalidad extranjera y 12 investigadores de otras disciplinas que fue verificado en el CVPy.
En esta etapa se identificaron 119 investigadores por Scopus, de ellos 25 no habían sido identificados previamente por no estar categorizados en el PRONII. Los 25 investigadores pasaron por el mismo proceso de revisión de publicaciones en Google Scholar realizado en la primera etapa. La muestra quedó finalmente conformada por 158 investigadores, 133 identificados en la primera etapa y 25 en la segunda.
Una vez localizado el perfil del investigador se visualizaron los títulos de las publicaciones, periodo inicial-final de publicación, y el número de citas recibidas y así también el índice h tanto en Google Scholar como en Scopus. Los datos demográficos como sexo y fecha de nacimiento para calcular la edad se obtuvieron del CVPy.
4. Resultados
De los 158 investigadores paraguayos, incluidos en el estudio, 65 investigadores eran de medicina, 64 de bioquímica y 29 de biología. El 66 % de los investigadores es del género femenino y el 45 % tiene ≥ 50 años de edad. En cuanto a la afiliación de los investigadores, el 59 % registra como afiliación diferentes unidades académicas de la Universidad Nacional de Asunción, 18 % al Ministerio de Salud Pública y Bienestar Social, 13 % a otras instituciones, y 10 % a otras universidades públicas y privadas. El 50 % de los investigadores están categorizados en el Nivel I del PRONII, el 13 % en el Nivel II, el 4 % en el Nivel III y el 25 % son candidatos a investigadores (ver Tabla 1).
Tabla 1 Características de los investigadores paraguayos de las disciplinas medicina, bioquímica y biología. (n=158)
| CARACTERÍSTICAS | FRECUENCIA | PORCENTAJE |
| Grupo de edad | ||
| <30 años | 6 | 4 |
| 31-38 años | 31 | 20 |
| 39-49 años | 49 | 31 |
| >50 años | 72 | 45 |
| Género | ||
| Femenino | 104 | 66 |
| Masculino | 54 | 34 |
| Área de conocimiento | ||
| Medicina | 65 | 41 |
| Bioquímica | 64 | 41 |
| Biología | 29 | 18 |
| Afiliación | ||
| Universidad Nacional de Asunción | 93 | 59 |
| Ministerio de Salud Pública y Bienestar Social | 29 | 18 |
| Otras universidades públicas y privadas | 15 | 10 |
| Otras instituciones | 21 | 13 |
| Categorización | ||
| No categorizados | 11 | 7 |
| Candidato a investigador | 40 | 25 |
| Nivel I | 80 | 51 |
| Nivel II | 20 | 13 |
| Nivel III | 7 | 4 |
Elaboración propia con información de CVPy del CONACYT, 2019b
Se muestra en la Figura 1, entre los investigadores de la disciplina de medicina, 29 (44 %) tienen un índice h entre 1-5 en Google Scholar y 34 (52 %) en Scopus.
Google Scholar y Scopus, 2020
Figura 1 Rango de Índice h en Google Scholar y Scopus de investigadores de la disciplina de medicina. (n=65)
En la Figura 2 se observa que el mayor porcentaje (61 %) de investigadores de la disciplina de bioquímica se posicionó en el rango 1 y 5 del índice h con 39 investigadores. En la base de datos Scopus, 37 (58 %) de los investigadores se encontraron en este rango.
Google Scholar y Scopus, 2020
Figura 2 Rango de Índice h en Google Scholar y Scopus de investigadores de la disciplina de bioquímica. (n=64)
En la disciplina de biología (Figura 3), al igual que las disciplinas de medicina y bioquímica, el mayor número de investigadores se posicionaron entre 1 y 5 de índice h tanto en Google Scholar (45 %) como en Scopus (40 %).
Google Scholar y Scopus, 2020
Figura 3 Rango de Índice h en Google Scholar y Scopus de investigadores de la disciplina de biología. (n=29)
En la Tabla 2 se presentan los nombres de investigadores de las disciplinas de medicina, bioquímica y biología con número de índice h igual o mayor a 10 en Google Scholar y Scopus (en este orden) organizados en forma descendente.
Tabla 2 Ranking de investigadores de medicina, bioquímica y biología con Índice h igual o mayor a 10 en Google Scholar y Scopus
| Autor | Área | N° de índice h | |
| Google Scholar | Scopus | ||
| Cubilla, A. | Medicina | 54 | 47 |
| Rojas de Arias, A. | Biología | 43 | 34 |
| Chaux Salinas, A. | Medicina | 39 | 31 |
| Russomando, G. | Bioquímica | 26 | 20 |
| Yaluff, G. | Biología | 24 | 20 |
| Rolón, M. | Biología | 22 | 19 |
| Vega Gómez, C. | Biología | 22 | 14 |
| Samudio Acevedo, M. | Bioquímica | 20 | 11 |
| Molinas Sanabria, C. R. | Medicina | 17 | 19 |
| Segovia Lohse, H. | Medicina | 17 | 10 |
| Torres de Ortiz, A. | Biología | 17 | 14 |
| Centurión Alcaraz, O. | Medicina | 16 | 14 |
| Ferreira de Paredes, E. | Biología | 16 | 19 |
| Iehisa Ouchi, M. | Biología | 16 | 13 |
| Kasamatsu, E. | Medicina | 15 | 13 |
| Arbo Sosa, A. | Medicina | 14 | 10 |
| Nakayama Nakashima, H. | Bioquímica | 14 | 15 |
| Flores Flores, A. A. | Medicina | 13 | 20 |
| Acosta Garcete, N. | Biología | 11 | 10 |
| Serna Grance, M. E. | Bioquímica | 10 | 12 |
Google Scholar y Scopus, 2020
Finalmente, se presenta la escala (Figura 4) de valoración establecida por Jorge Eduardo Hirsch para evaluar la actividad científica de un investigador por medio del Índice h.
En la Figura 5 se exponen los investigadores paraguayos que cumplen con la escala de Hirsch. Índice h=60; los investigadores Cubilla y Rojas de Arias presentan un Índice h=40 en Google Scholar por lo que categorizan como sobresalientes, Chaux, Russomando, Yaluff, Vega, Rolón y Samudio son considerados científicos exitosos por tener un Índice h=20. Ningún investigador ha alcanzado el valor máximo de la escala.
Google Scholar y Scopus, 2020
Figura 5 Posicionamiento según escala de Índice h en Google Scholar y Scopus de investigadores paraguayos
Otros indicados bibliométricos se han utilizado para el Ranking de autores paraguayos, uno fue el ranking de investigadores con más de 10 publicaciones en Web of Science en el periodo 2002 y 2015, y otro en la base de datos Scopus (2012-2016). En ambos casos, en la Tabla 3 se observan los investigadores posicionados son los mismos.
Tabla 3 Comparación de ranking de investigadores paraguayos en base de datos Web of Science y Scopus.
| Web of Science (2002-2015) | Scopus (2012-2016) | ||
| Posición | Autor | Posición | Autor |
| 1° | Cubilla, A. | 1° | Chaux, A. |
| 2° | Chaux, A. | 2° | Cubilla, A. |
| 5° | Rojas de Arias, A. | 3° | Samudio, M. |
| 7° | Russomando, G. | 5° | Rolón, M. |
| 8° | Samudio, M. | 6° | Vega, C. |
| 12° | Rolón, M. | 7° | Rojas de Arias, A. |
| 16° | Vega, C. | 8° | Russomando, G. |
| 19° | Yaluff, G. | 15° | Yaluff, G. |
Elaboración propia en base a CONACYT (citado por Cubilla, 2017) y Ciencias del Sur (2017)
5. Discusión y conclusión
Por intermedio de la bibliometría, la evaluación de la producción científica de los investigadores paraguayos es regular, no obstante, el análisis de las contribuciones por medio del índice h permitió conocer la valoración de los investigadores de las disciplinas de medicina, bioquímica y biología, y posicionarlos en la escala propuesta por Hirsch, cuyo resultado mostró a solo 8 investigadores, “lo que permitió identificar autores destacados dentro de cada área” (Corchuelo Rodríguez, 2014, p. 102).
En comparación a resultados de algunos países latinoamericanos, es relativamente bajo, ya que Lemarchand (2015, p. 189) ha mencionado que “entre 1996 y 2014, los índices h más altos los obtuvieron el Brasil (379), México (289), Argentina (273), Chile (233) y Colombia (169)”, mientras que Vega-Dienstmaier (2019) recientemente ha indicado que “el mayor índice h en Brasil es de h=128, en Colombia h=69 y Perú h=29” (p. 163).
Este resultado quizás se dé por varios motivos, uno de los factores más influyentes es el apoyo para financiar investigación, que si bien en el país se encuentra el Consejo Nacional para la Ciencia y la Tecnología (CONACYT) que registra 566 investigadores que se encuentran categorizados en el Programa Nacional de Incentivo a los Investigadores (PRONII) (Consejo Nacional para la Ciencia y la Tecnología, 2020), es quien actualmente apoya las investigaciones de científicos por medio de concursos, con un capital limitado destinado a proyectos de investigación, que si bien (adicionalmente la producción científica) se da progresivamente en las universidades, por lo general no cuenta con respaldo económico.
En cuanto a la comparación del índice h por disciplina permitió observar el número h en dicha área ya que “un índice h elevado en esa disciplina implica que el investigador ha hecho cosas con impacto” (Marques, 2013, párr.3) o bien “el problema fundamental es que incluso dentro de una misma especialidad puede haber también diferencias que impidan la correcta comparación entre dos autores debido a que los temas de investigación más populares tendrán, teóricamente, más posibilidad de ser citados” (Gisbert y Panés, 2009).
Las disciplinas tomadas para el estudio forman parte de Ciencia de la Salud, ya que el índice h varía según el área o especialidad de los artículos y donde se publiquen, ya que las disciplinas como medicina, bioquímica y biología tienden a obtener mayor valor para el índice H que artículos en otras áreas, como Ciencias Sociales (Ramírez-Vega y Meneses-Guillén, 2017, p. 16).
En cuanto a la visibilidad de los datos de los investigadores, se observó que muchos autores no tenían un perfil en Google Scholar, o bien no se encuentran visibles al público, lo más probable es que los investigadores con más producción y citas son los que cuentan con perfiles públicos, otra posibilidad es que varios de los investigadores han pasado a la jubilación, por otra parte muchos investigadores jóvenes optan por difundir sus publicaciones por medio de repositorios, página web personal y las redes sociales, considerando las nuevas tendencias bibliométricas.
Las diferencias de datos recuperados por Scopus son relativamente menores a los resultados en Google Scholar, esto se debe a que Google Scholar recupera artículos de revistas indexadas y no indexadas (Chiroque-Solano y Chiroque-Solano, 2017, p. 169), en cambio de la base de datos Scopus solo pueden ser recuperados artículos de revistas que se encuentren indexadas en él.
Los números de índice h que se observan en Google Scholar son mucho mayores que en Scopus, lo que supone también que, pese a la cantidad de publicaciones de investigadores paraguayos, es menor la presencia de los artículos en bases de datos indexadas en Scopus; por su parte Espínola de Canata (2011) refiere a que “Paraguay presenta el número más bajo de publicaciones arbitradas y consultadas” (p.182).
En efecto, se destaca que 35 investigadores no cuentan con publicaciones en Scopus, lo que expone al investigador paraguayo como reto el desafío de publicar sus artículos científicos en revistas indexadas de Scopus “dada su calidad, impacto y reconocimiento dentro de la comunidad científica, para compartir nuevos conocimientos sustentados en evidencia científica confiable” (Zavaleta-Lopez et al., 2019, p. 4) y por su impacto a nivel internacional. Si bien está latente el desafío de publicar en revistas de alto impacto, y de esta forma “tomar conciencia de la importancia de visibilizar sus resultados de investigación a través de publicaciones en revistas indexada” (Ramírez-Vega y Meneses-Guillén, 2017, p. 17).
En cuanto a los resultados del estudio, favorece evidentemente a los investigadores de mayor trayectoria, ya que el 45 % de la población se encontraba en el sesgo de edad de 50 años en adelante, pues “Hirsch propone un Índice h de 20 después de veinte años de carrera como un indicador de buen rendimiento científico” (Masiá et al., 2013, p. 137), lo que significaría una ventaja solo para los investigadores nóveles, sobre ello Askeridis (2018) sugiere que “tal vez habría que sugerir un valor umbral para la edad científica a fin de hacer una comparación razonable” (p.622) y justa.
Existen algunas desventajas en cuanto al uso del índice h ya que además se consideraron los datos del índice h total de la carrera del investigador para este estudio, lo que permitió “valorar la producción académica a largo plazo” (Corchuelo Rodríguez, 2014, p. 102). Sería importante considerar el índice h del rango de los últimos publicados en 5 años, para conocer la continuidad del proceso de producción del autor.
El resultado que se expone muestra evidentes deficiencias en la visibilidad de la producción del país, en ambos aspectos bajo número de índice h y número de investigadores que conforman la escala propuesta por Hirsch, pese al esfuerzo en crear una cultura de ciencia en las academias, en especial. Es fundamental comparar los números con otros indicadores, ya que “los estudios bibliométricos aportan una interesante visión de la actividad científica del propio país” (Corrales-Reyes et al., 2017, p. 25) y su constante fortalecimiento.
Si bien el resultado en cuanto al mayor número de índice h es alentador, es necesario el trabajo colaborativo y continuo para la realización de investigaciones en las áreas de estudios, que son las más sobresalientes en el país.
