Spanish (pdf)
Article in xml format
Article references
Automatic translation
Send this article by e-mail
Cited by SciELO 
Cited by Google 
Similars in
SciELO 
Similars in Google 
Permalink
Introducción
La institucionalización del conocimiento como meta del desarrollo ha sido una presencia duradera y significativa en el discurso público sobre la ciencia por casi medio siglo en América Latina. En esta medida, para los países se vuelve relevante determinar cuándo hay generación de conocimiento científico y cuál es su impacto, convirtiendo a los artículos científicos en uno de los mecanismos más eficientes que miden estos factores. En este sentido, históricamente la mayor parte de la producción científica latinoamericana era considerada prácticamente gris, por el hecho de que apenas si era accesible, y menos aún consultada o citada, por su baja circulación no sólo internacional sino incluso al interior de los países mismos de la región 1,2.
Bajo esta perspectiva existen a nivel mundial diferentes indicadores que utiliza cada país con el fin de identificar la calidad científica de los artículos. En Colombia, Colciencias 1es la entidad encargada de regular la calidad del conocimiento científico publicado a través de Publindex con un nuevo modelo de clasificación (2017) donde se incluye al índice H5 como un indicador de medición de impacto de las publicaciones; además, de redefinir los criterios de evaluación de las revistas, con el fin de evaluar el impacto de los artículos, promover la producción científica de calidad en el país y generar mayor reconocimiento en el ámbito científico internacionalmente. El modelo consta de dos etapas, una de diagnóstico y otra de clasificación oficial, que se comprenden en tres fases: la declaración de cumplimiento del proceso de gestión editorial, seguida de la validación del proceso de evaluación y de la visibilidad, y evaluación del impacto de la revista. Este modelo implica un gran reto que beneficia a toda la comunidad académica y científica en el país, jugando un papel de control en la calidad de la investigación y generando información que sirve como fuente de mejora en la visibilidad e impacto de las publicaciones 3-5.
Sin embargo, parte de las objeciones al modelo de Publindex radica en limitar la calidad de las revistas a la medición de un solo indicador bibliométrico, desconociendo que los indicadores cuantitativos de productividad y citación sirven para identificar y caracterizar pero no determinan el impacto de la generación de nuevo conocimiento, y por ello, deben ser tenidos en cuenta otro tipo de indicadores cualitativos e incluso sociales 6,7. Adicionalmente, la doble categorización por cuartil en JCR o JSJR y el uso de la herramienta Harzing's Publish or Perish (POP) para la medición de las citas citación parecen no reflejar el impacto real de las revistas del país 8,9. En consecuencia, este artículo por medio de un estudio bibliométrico evalúa la actividad científica e investigativa de las revistas en Ciencias en Ciencias Naturales del país, cruzando diversos tipos de producción y publicaciones con el historial de categorización de estas publicaciones Publindex, para entender el comportamiento en esta área de conocimiento del país.
Materiales y métodos
El objeto de estudio fue las revistas de Ciencias Naturales categorizadas en Publindex2 y sus publicaciones indexadas en Google Académico. Como fuente se usó la base de datos de Publindex y Google Académico por medio de Harzing's Publish or Perish (POP) versión 7.15.2643. La búsqueda se realizó entre 1- 30 de octubre de 2019, en el orden presentado en la Tabla 1.
Criterios de inclusión: Se consideraron las revistas registradas en la base de datos de Publindex en la gran área de conocimiento "Ciencias Naturales" y todas las publicaciones de estas, indexadas en Google Scholar Search por la búsqueda combinada de Publication name e ISSN. Las variables analizadas en este artículo están señaladas en la Tabla 2.
Se analizaron los indicadores bibliométricos de producción (total de publicaciones, publicaciones por año e índice de productividad). Índices de citación (total de citas, citas por año, índice H, Índice G, Índice E, Índice HC, hI_index D e Índice H5) e Informetría (concurrencia de palabras). 10.
Análisis estadístico: se realizó un análisis descriptivo usando SPSS 26.0 para Windows, además, se usó VandagePoint para análisis informétrico y la hoja de cálculo de Microsoft Excel.
Resultados
Publindex
En el índice bibliográfico nacional (IBN) hay 68 revistas en Ciencias Naturales, la mayor concentración se encuentra en el área de conocimiento Ciencias de la Tierra y Medioambientales (24%) y Ciencias Biológicas (21%). En total, se analizaron 50 revistas que corresponde al 74%, se excluyeron 18 (26%) por no ser representativas para el estudio dado que no registran categorización en el histórico de Publindex y registran menos de 50 publicaciones indexadas en Google Scholar (ver Figura 1 y Tabla 3). En este sentido, la institución editora con mayor representación es la Universidad Nacional de Colombia (31%) y solo una revista (NOVA) registra coedición de la publicación con dos instituciones (Universidad Nacional Abierta y a Distancia y Universidad Colegio Mayor De Cundinamarca) (ver Tabla 4).
Con relación a la categorización de las revistas entre 2004 y 2014, se registró un promedio anual de 54 revistas en el IBN; mientras que con el nuevo modelo de clasificación, este promedio bajó a 19,5 revistas entre 2017-2020 (ver Figura 2). Es importante mencionar que las revistas que han estado categorizadas en ambos modelos son: Caldasia, Revista Colombiana de Estadística, Revista Colombiana de Entomología, Acta Biológica Colombiana y Boletín de Geología. Por otro lado, la institución editora que concentra la mayor cantidad de revistas categorizadas es la Universidad Nacional con 31%. Además, en el total de revistas de esta área en el país la publicación Boletín Científico Centro de Museos Museo de Historia Natural es la de mejor categorización 2020 (A1 - Q2 Scimago) (ver Tabla 5).
Indicadores de producción
En total se identificaron 17197 publicaciones en Google Scholar de las 50 revistas del estudio. Se depuró el 10,4% por duplicidad. Las revistas con la mayor tasa de ítem depurados son Earth Sciences Research Journal (36%) y Revista de La Academia Colombiana de Ciencias Exactas, Físicas y Naturales (32%). 2011 es el año en que más publicaciones se registran con el 7% del total general. No obstante, entre 2016 y 2019 se registra un descenso en la publicación con un promedio de 747 publicaciones por año3 (ver Figuras 3 y 4). Por otra parte, 511 publicaciones (3,3%) no registran correctamente el metadato "fecha", razón por la cual su fecha de publicación es indeterminada.
Las publicaciones que concentran la mayor cantidad de publicaciones son Revista Colombiana de Física (6,5%), Acta Biológica Colombiana (6,3%), Revista Colombiana de Entomología (6,2%), Revista de La Academia Colombiana de Ciencias Exactas, Físicas y Naturales (6,1%) y Caldasia (6%) con más de 900 publicaciones (ver Figuras 5 y 6).
Indicadores de citación
Se registra un total de 58716 citas y un promedio anual de 757 citas. En este sentido, se identifica un crecimiento constante de citas desde 2004 hasta 2008, siendo este último el año donde más citas se registran (4683) (ver Figura 7). Sin embargo, entre 2014 y 2019 se registra un descenso promedio de 49% en las citas, registrando en 2018 y 2019 los niveles más bajos con 305 y 28 respectivamente. En el total general, la revista que registra el mayor número de citas es Caldasia (10202) y la menor Elementos (0). No obstante, la revista Avances en Sistemas e Informática, con 1408, registra el mejor promedio anual de citas en sus publicaciones. Por otra parte, al analizar el promedio de citas por publicación, las revistas Biota Colombiana (12,85), Caldasia (11,21) y Boletín Científico CIOH (11) son las de mayor ponderación. En lo relacionado con autorías, la revista Acta Agronómica (3,2) y Boletín de Geología (3,1) registran los promedios más altos de cantidad de autores por documentos (ver Figura 8).
Además, se identificó el "top" de las publicaciones con más citas (más de 120 citas), dentro de las cuales se destacan las revistas Biota colombiana y Caldasia, cada una con 3 artículos relacionados.
En lo relacionado con los índices de citación más representativos 10-16 la correlación de publicaciones y citas recibidas por la mismas (índice H), las revistas Caldasia (H=43), Revista de La Academia Colombiana de Ciencias Exactas, Físicas y Naturales (H=37) y Biota Colombiana 34 registran las ponderaciones más altas. Por su parte, en el análisis del índice G cuyo objetivo es mejorar la medición del índice H al nivelar las ponderaciones por los artículos con citación más alta, las revistas Caldasia (G=63), Biota Colombiana (G=55) y Revista de La Academia Colombiana de Ciencias Exactas, Físicas y Naturales (G=53) registran las mejores mediciones. Otra de las mediciones creada para comprender mejor el comportamiento de citas y publicaciones es el índice E. En éste se eliminan los excesos de citas (citas no relevantes) del índice H normal para caracterizar el corpus bibliográfico de mayor relevancia y citación. En consecuencia, las publicaciones Caldasia (E=36,59), Biota Colombiana (E=36,04) y Revista de La Academia Colombiana de Ciencias Exactas, Físicas y Naturales (E=30,03) están por encima de las revistas del país. Finalmente, en la revisión del índice HC donde se da más peso a los artículos recientes para evaluar el constante nivel de actividad académicas, las publicaciones Avances en Sistemas e Informática (HC=37) y Avances en Recursos Hidráulicos (HC=26) son las que mejor puntúan (ver Figura 9).
Fuente: Elaboración propia.
Figura 9 Métricas de índice H, índice G, índice E, índice HC y hl_index D por revista.
Por otra parte, el modelo de Clasificación de revistas científicas de Publindex incluye en la Fase 3 el impacto de la revista científica nacional medido por el índice H5 de la revista 5,22-24. En consecuencia, se realizaron 5 mediciones, de 2010 a 2018, para identificar tendencias en la medición que define el cuartil (categoría) de la revista en el IBN (ver Figura 11). Como resultado, el H5 promedio general de todas las publicaciones analizadas es 6. En este sentido, la revista que marca el límite superior con la mayor ponderación es NOVA (H5=18). De acuerdo con lo anterior, la simulación de la próxima medición de Publindex 2020 en la Fase 3 para el H5 de las revistas en esta área de conocimiento, arroja un aumento del 19% en las revistas categorizadas. Además, las categorías que presentarían incrementos son A1 (ver Figura 10; ver Tablas 7-9).
Fuente: Elaboración propia.
Figura 11 Top 10 de las revistas con el mayor índice H5 durante los últimos 5 periodos.
Tabla 7 Cuartiles H5 convocatorias No.830 de 2018 y simulación del H5 para Convocatoria 2020.
Fuente: Elaboración propia.
Tabla 8 Comparación revistas categorizadas en convocatoria de 2018 y simulación convocatoria 2020 en la Fase 3 (índice H5).
Fuente: Elaboración propia.
Tabla 9 Simulación convocatoria 2020 en la Fase 3 (índice H5) por revista.
Fuente: Elaboración propia.
Mediante el análisis informétrico se analizaron las palabras que componen los títulos de todas las publicaciones (15402) de las revistas del estudio. Como resultado, la expresión más usada en las publicaciones de Ciencias Naturales del país es "Caribe colombiano". Además, otras de las expresiones que se usan concurrentemente son "New species", "New records", "Valle del Cauca", "Bogotá", "Antioquia" y "First record" (ver Figura 11). En esa medida, al analizar la interacción de las expresiones con una concurrencia mayor a 30, las mayores relaciones se concentran en "Descripción" y "Nuevas especies" 7 y "First record" y "Pacífico Colombiano" 6 (ver Figuras 12 y 13).
Fuente: Elaboración propia.
Figura 12 Nube de expresiones con más concurrencia (más de 10 ocurrencias).
Conclusiones
Durante la última década, las instituciones encargadas de realizar investigación en Colombia han aumentado la cantidad de publicaciones lo que puede ser causado por algunas estrategias que se realizan al interior de ellas. Adicionalmente, también se hacen más visibles los trabajos producidos en el área de Ciencias por la comunidad nacional e internacional, con lo que la cantidad de citaciones también ha aumentado. Sin embargo, los cambios constantes en los modelos de medición, en particular para las revistas de Publindex, ha hecho que en los últimos años la cantidad de revistas científicas en el país se vea disminuida, lo que se ve reflejado en el cambio de interés de los investigadores por visibilizar sus trabajos en revistas internacionales y no en revistas nacionales, como el año inmediatamente anterior. En este sentido, de acuerdo con la Fase 3 del modelo actual, el 37% de las revistas en Ciencias Naturales tienen alta posibilidad de ser categorizadas en el IBN 2020, presentando un aumento en revistas A1 del (9%) y C (14%). No obstante, es un porcentaje bajo teniendo en cuenta el potencial de revistas en Ciencias Naturales del país.
Por otro lado, si bien el nivel de inversión, tanto del gobierno nacional como de las universidades y centros de investigación, ha tenido un aumento interesante y promueve nuevas prácticas y estrategias para las revistas nacionales, es un poco preocupante que no se muestren aumentos significativos en la producción científica en el área de Ciencias en las revistas nacionales. Dado este crecimiento de inversión en CTI, los parámetros sistémicos muestran un incremento apenas del orden del 5% o menos. Toda esta dinámica ha permitido la creación del Ministerio de Ciencia, Tecnología e Innovación, con el fin de consolidar la centralización de las actividades de ciencia y tecnología en el país. En esa medida, es importante reconocer y valorar las prácticas institucionales de las IES que soportan la mayor cantidad de revistas en Ciencias Naturales del país (Universidad Nacional de Colombia). Además, de iniciativas de coedición interinstitucional de revistas, como el caso de NOVA, para garantizar la sostenibilidad de las publicaciones. Finalmente, es necesario identificar las fortalezas de procesos editorial de las revistas con mayor impacto bibliométrico (NOVA, Acta Biológica Colombiana, Biota Colombiana, Revista Lasallista de Investigación, Revista de La Academia Colombiana de Ciencias Exactas, Físicas y Naturales y Caldasia).
Los índices de actividad y los indicadores de citación han permitido que las revistas que estén indexadas en Publindex mejoren su calidad editorial y aumenten sus estrategias de divulgación y citación. En particular, el uso de repositorios institucionales anclados con la plataforma Google Scholar ha permitido ese aumento de visibilidad. Es importante evaluar con otros indicadores bibliométricos e informétricos el grado de especialidad que tiene, así como el ajuste de indicadores de impacto para percibir de manera más acertada las publicaciones más citadas y el impacto que ellas generan.
