Contenido anticipado y la nueva política del Factor de Impacto del Web of Science

Por Ernesto Spinak

Imagen: Miguel A. Amutio.

Cada revista descrita en Journal Citation Reports (JCR) ha cumplido con los rigurosos criterios de calidad e impacto documentados en el proceso de selección editorial de los índices Science Citation Index Expanded y el Social Science Citation Index del Web of Science Core Collection, para que se pueda encontrar rápidamente una lista de las revistas más influyentes en las ciencias de la vida, ciencias fisicas y las ciencias sociales.

Los informes de citas de revistas se publican anualmente en el mes de junio; cada año también se proporciona una “recarga” de datos actualizada aproximadamente tres meses después de la publicación anual, lo que da la oportunidad de realizar los ajustes y actualizaciones necesarios a los datos incluidos en la publicación de junio.

Una vez que la recarga de 2020 se completó, la atención del JCR se enfocó a la edición de 2021 debido a que, tal como estaba planificado, se procedería a la inclusión de los artículos de acceso anticipado. Esto había sido anunciado en octubre de 2020.

Un número creciente de revistas acostumbra a publicar artículos en línea antes de su inclusión formal como parte de un volumen/número programado; esto a menudo se denomina “acceso anticipado” (EA, early access) y representa la versión definitiva del registro. Dependiendo de las preferencias de cada revista, estos artículos a menudo también se denominan: artículos en prensa; publicados antes de impresión; en línea primero, etc., (in press, ahead of print, online first). En el modelo SciELO de Publicación son identificados como ahead of print (AOP).

No hay cambios en los textos arbitrados de los artículos de EA aparte de que se les asigne un volumen, un número y la información de la página; por lo cual conservan el mismo DOI. La definición que se usa es “Una versión fija de un artículo de revista que ha sido puesto a disposición por cualquier organización que actúa como editor declarando formal y exclusivamente el artículo ‘publicado’.” Aunque esta definición se refiere específicamente a artículos, se aplica este concepto de manera más amplia a cualquier tipo de documento siempre que cumpla con los mismos criterios.

Para calificar como Acceso Anticipado (EA), el contenido debe:

• ser la versión del registro que no cambiará, aparte de la asignación final en un volumen/número;
• incluir un DOI que no cambiará;
• incluir una fecha de publicación de acceso anticipado;
• incluir las referencias citadas que están presentes en la versión del registro;
• no incluye volumen, número, rango de páginas, ni fecha de publicación final;
• ser publicado en una revista con un modelo de volumen/número.¹

El EA permite el descubrimiento y un análisis más rápido del contenido académico. Debe aclararse que esto no incluye a los preprints.

Desde 2017, como parte del programa piloto de EA, al JCR se han incorporado gradualmente los editores que proporcionan contenido de EA en formato XML. Este programa piloto ha progresado bien; hasta ahora se han incluido más de 6.000 revistas que se han incorporado a través de envíos en XML. De acuerdo con el compromiso de JCR de apoyar la investigación abierta, la edición 2021 del JCR incluirá contenido de EA y se incluirá en las métricas proporcionadas, incluido el factor de impacto de la revista, (JIF, Journal Impact Factor).

Al agregar contenidos de EA a los recuentos de citas de revistas esto implicará cambios en los índices de impacto, por lo que el JCR deberá elegir como política de evaluación de las revistas o bien un modelo prospectivo, o bien un modelo retrospectivo para el recuento, por la siguiente razón.

El tema es que hay dos fechas distintas asociadas con el contenido de EA:

1. una “fecha de acceso anticipado” que marca la primera disponibilidad de la Versión del Registro y/o
2. una “fecha de publicación” vinculada a una asignación de volumen-edición-página.

El problema se produce cuando la fecha de EA y la fecha de publicación caen en diferentes años naturales, porque presenta un desafío para el cálculo de las métricas de JCR:

¿deben estos artículos ser considerados en el recuento de elementos publicados en su año de EA o en el recuento de elementos publicados en su año de publicación?

Y acá es cuando surge el problema del enfoque prospectivo y el retrospectivo…

Evaluación de los enfoques retroactivo o el enfoque prospectivo

En el modelo retroactivo aplicaría la fecha de EA hacia atrás, en todo el contenido que se recibe como EA desde 2017 en adelante. Esto afectaría el denominador 2020 Journal Impact Factor (JIF) para las revistas que proporcionaban contenido de EA para indexar en 2018 o 2019, lo que podría disminuir su valor JIF y su clasificación en la categoría como resultado de su participación temprana en el proyecto piloto de acceso anticipado. Por el contrario, no habría ningún efecto en el denominador JIF para las revistas que no proporcionaban contenido de EA antes de 2020.

El modelo prospectivo establecería al 2020 como el primer año para el que el contenido de EA se considerara de acuerdo con su fecha de EA en lugar de su fecha de publicación y continuaría incorporando contenido nuevo utilizando la fecha de EA. A diferencia del modelo retroactivo, el contenido que se indexó como EA antes de 2020 no cambiaría el año en que se cuenta en el JCR desde su fecha de publicación hasta su fecha de EA.

En ambos casos, el contenido publicado como EA en 2020 contribuiría con referencias citadas al numerador JIF 2020, incluso si el artículo no tiene una asignación de volumen-año hasta 2021 o más tarde. Esto amplía el número de elementos y citas que contribuyen al numerador JIF 2020 de la mayoría de las revistas en el JCR, independientemente de si ellos mismos publican contenido de EA que ya está indexado en Web of Science (WoS).

¿Complicado? No tanto, estas situaciones quedarán más claras con los ejemplos que presentamos más abajo.

Clarivate ha optado por implementar el modelo prospectivo. El modelo retroactivo crearía dos poblaciones de revistas que se verían afectadas de manera diferencial, basándose solo en cuándo Clarivate comenzó a aceptar su contenido de EA, no habiendo ningún cambio en la dinámica de citas o publicación de la revista en sí. La razón se fundamenta en el documento de análisis asociado al reporte citado, que analiza para las distintas opciones los cambios en los numeradores y denominadores del índice con que se genera el JIF.

Pero este cambio de reglas no pasó inadvertida por la comunidad de editores, como se publicó rápidamente en The Scholarly Kitchen en el post no post Changing Journal Impact Factor Rules Creates Unfair Playing Field For Some² de febrero de 2021 con los argumentos que presentamos más abajo, lo que hizo que Clarivate publicara en marzo una aclaración³ sobre las dudas planteadas.

Sigue el análisis² publicado por The Scholarly Kitchen.

1. La transición a un modelo que cuenta la publicación en función de la fecha de publicación en línea, en lugar de la publicación impresa, modificará en más y en menos la siguiente ronda de puntajes de Journal Impact Factor (JIF).
   • El cambio a un modelo de recuento basado en la fecha de publicación online se esperaba desde hace mucho tiempo. Sin embargo, el nuevo modelo puede dar lugar a cambios inesperados en las puntuaciones de JIF y en la clasificación de las revistas porque “Clarivate carece de datos de publicación en línea para aproximadamente la mitad de las revistas que indexa.” En la actualidad, Clarivate tiene fechas de publicación electrónica para las revistas de Springer-Nature, pero no por ejemplo, para las de Elsevier. En otras palabras, dada su falta de datos completos de e-Pub para todas las revistas, el modelo retroactivo es una muy mala idea.
2. El cambio de fechas de selección no es neutral pues podría afectar sus valores y por lo tanto el ránking de la revista. Esto se ve analizando tres escenarios para revistas diferentes
   • Revista Médica Multidisciplinar. Esta revista de alto impacto (JIF=25) publica 500 artículos al año, con una media de 40 referencias por artículo, de las cuales el 5% son autocitas. El tiempo de espera entre la publicación de EA y la designación impresa es de solo un mes.
     Cambio esperado: Con el nuevo modelo de Clarivate, el JIF aumentará solo un tercio del uno por ciento, o 0,083 puntos, a JIF 25,083.
   • Revista científica de subespecialidades. Esta revista de desempeño moderado (JIF=4) publica 250 artículos/año, 40 referencias/artículo, 20% de tasa de autocitas y 3 meses de tiempo de retraso.
     Cambio esperado: Su puntuación JIF aumentará en un 25% (en un punto completo) a JIF 5,000.
   • Revista regional/especializada. Esta revista (JIF=2) publica 50 artículos/año, con una media de 40 referencias por artículo, la mitad de las cuales son autocitas. El tiempo de retraso es de 6 meses.
     Cambio esperado: Su puntuación JIF aumenta en un 250% (en 5 puntos completos) a 7,000.

En esencia, las revistas con altos niveles de autocitas y largos tiempos de espera entre la publicación electrónica y la designación impresa son particularmente sensibles a cambios masivos en su próxima puntuación JIF. Sin embargo, incluso las revistas con tasas de autocitas relativamente bajas y retrasos cortos de publicación se ven lo suficientemente afectadas como para cambiar su clasificación por encima de los competidores que no tienen datos de publicación online en Web of Science.

Pero aún quedan interrogantes por responder; solo para indicar unas cuantas:

• ¿Por qué la ventana de citas sigue en 2 años y no se lleva a 3 años, por ejemplo?
• ¿Por qué se siguen usando índices con cuatro valores decimales?
• ¿Por qué insistir con los índices basados en la revista en lugar de los artículos en sí, o quizás sus autores.
• ¿Es el cambio de modelo una reacción debido a que Scopus proporciona actualizaciones mensuales a su métrica Citescore?
• ¿Por qué las revistas que adoptan el modelo de publicación continua de artículos (que son cada día más) no se incluyen en el modelo EA?

Es probable que veamos grandes ganadores y grandes perdedores si Clarivate continúa con su nuevo modelo de conteo. Todo esto es muy nuevo, y seguramente “los zapallos se acomodan en el carro en el camino.”

Notas

1. Las revistas que siguen un modelo de publicación continua de artículos (CAP, continuous article publishing), o sea un modelo de “construcción en línea” o que se publican solo en forma impresa, no son elegibles para la indexación de acceso anticipado (EA). O sea, el modelo de publicación continua no requiere incorporación ya que esos elementos tienen una única fecha de publicación y metadatos finales de la revista (volumen, eventualmente número, número del artículo)

2. Changing Journal Impact Fator Rules Creates Unfair Playing Field For Some by Phil Davis, The Scholarly Kitchen, feb 1 2021. https://scholarlykitchen.sspnet.org/2021/02/01/unfair-playing-field/

3. Web of Science Journal Citation Reports:2021 Release Updates. February 2021 (revised March 2021) http://s786780033.t.en25.com/e/es?s=786780033&e=1281010&elqTrackId =9697c1f688ef4be5a0e63c7ab2ba2730&elq=a327f9316c6740289ccd46b15b756a52&elqaid=14594&elqat=1

Referencias

Adding Early Access content to Journal Citation Reports: Choosing a prospective model [online]. Web of Science. 2021 [viewed April 15 2021]. Available from: https://clarivate.com/webofsciencegroup/wp-content/uploads/sites/2/dlm_uploads/2021/01/EA-in-JCR3-discussion-paper-1.pdf

DAVIS, P. Changing Journal Impact Fator Rules Creates Unfair Playing Field For Some [online]. The Scholarly Kitchen, 2021 [viewed April 15 2021]. Available from: https://scholarlykitchen.sspnet.org/2021/02/01/unfair-playing-field/

HUBBARD, S. What’s next for JCR: defining ‘Early Access’ [online]. Web of Science blog, 2020 [viewed April 15 2021]. Available from: https://clarivate.com/webofsciencegroup/article/whats-next-for-jcr-defining-early-access/

McVEIGH. M. Adding Early Access content to Journal Citation Reports: choosing a prospective model [online]. Web of Science blog, 2021 [viewed April 15 2021]. Available from: https://clarivate.com/webofsciencegroup/article/adding-early-access-content-to-journal-citation-reports-choosing-a-prospective-model/

QUADERI, N. The JCR Reload and a look ahead to the introduction of early access content in 2021 [online]. Web of Science blog, 2020 [viewed April 15 2021]. Available from: https://clarivate.com/webofsciencegroup/article/the-jcr-reload-and-a-look-ahead-to-the-introduction-of-early-access-content-in-2021/

Web of Science Journal Citation Reports 2021: Novidades que serão implementadas. Web of Science. 2021 [viewed April 15 2021]. Available from: http://s786780033.t.en25.com/e/es?s=786780033&e=1281010&elqTrackId=9697c1f688ef4be5 a0e63c7ab2ba2730&elq=a327f9316c6740289ccd46b15b756a52&elqaid=14594&elqat=1