{"id":4939,"date":"2022-02-09T12:00:48","date_gmt":"2022-02-09T15:00:48","guid":{"rendered":"https:\/\/blog.scielo.org\/es\/?p=4939"},"modified":"2022-02-09T12:05:44","modified_gmt":"2022-02-09T15:05:44","slug":"como-se-utilizan-las-altmetrias-para-evaluar-la-produccion-cientifica-en-america-latina","status":"publish","type":"post","link":"https:\/\/blog.scielo.org\/es\/2022\/02\/09\/como-se-utilizan-las-altmetrias-para-evaluar-la-produccion-cientifica-en-america-latina\/","title":{"rendered":"C\u00f3mo se utilizan las Altmetr\u00edas para evaluar la producci\u00f3n cient\u00edfica en Am\u00e9rica Latina"},"content":{"rendered":"

Por Lilian Nassi-Cal\u00f2<\/strong><\/p>\n

\"\"<\/a>

Imagen: William Warby<\/a>.<\/em><\/p><\/div>\n

Los lectores de este blog est\u00e1n familiarizados con las limitaciones y cr\u00edticas del uso de indicadores bibliom\u00e9tricos basados en citas para evaluar revistas. Sobre todo, el impacto, la relevancia, la calidad y el rigor atribuidos a los resultados de las investigaciones publicadas en revistas con altas tasas de citaci\u00f3n \u00fanicamente en base a estos indicadores.<\/p>\n

Movimientos como la San Francisco Declaration on Research Assessment (DORA)<\/a> y el Manifiesto de Leiden<\/a> recomiendan utilizar \u00edndices como el Factor de Impacto solo para clasificar revistas, no investigadores, instituciones que otorgan recursos de investigaci\u00f3n o programas de posgrado. A esto se suma el hecho de que las estimaciones indican que alrededor del 50% de los art\u00edculos publicados no son citados formalmente por otros autores, y su impacto en la comunidad cient\u00edfica no es nulo. Estos art\u00edculos son le\u00eddos, descargados, compartidos y citados a trav\u00e9s de redes sociales, blogs, noticias, pol\u00edticas p\u00fablicas y otras formas de presencia en l\u00ednea, recopilados y medidos en \u00edndices como Altmetric<\/em> (alternative metric<\/em>).<\/p>\n

La velocidad con la que los art\u00edculos reci\u00e9n publicados se comparten en la web<\/em> es uno de los puntos fuertes de las altmetr\u00edas en comparaci\u00f3n con las m\u00e9tricas basadas en citas, que se cuentan dos o tres a\u00f1os despu\u00e9s de la publicaci\u00f3n. Adem\u00e1s, los estudios indican que los art\u00edculos con alta presencia en las redes sociales son m\u00e1s difundidos y reciben m\u00e1s citas.<\/p>\n

En la \u00faltima d\u00e9cada, numerosas revistas, incluidas las de la colecci\u00f3n SciELO Brasil, comenzaron a incorporar el \u00edndice Altmetric<\/em> en sus art\u00edculos, junto con otros \u00edndices basados en citas, como Dimensions<\/em>, ScienceOpen<\/em> y otros, que muestran a los lectores el \u201cimpacto alternativo\u201d con actualizaciones diarias, es decir, cu\u00e1nto se mencion\u00f3 ese art\u00edculo en redes sociales (Twitter<\/em>, Facebook<\/em>, Instagram<\/em>, LinkedIn<\/em>, etc.), blogs<\/em>, noticias, patentes, p\u00e1ginas de Wikipedia y otras menciones.<\/p>\n

Los autores Spatti, Cintra, Bin y Ferreira Ara\u00fajo realizaron un estudio altm\u00e9trico<\/a>1<\/sup> para evaluar la presencia de la producci\u00f3n cient\u00edfica de Am\u00e9rica Latina en la web<\/em> social utilizando la colecci\u00f3n de revistas y art\u00edculos indexados en SciELO. El corte realizado por los autores en la colecci\u00f3n comprende los siguientes pa\u00edses: Argentina, Bolivia, Brasil, Chile, Colombia, Costa Rica, Cuba, Ecuador, M\u00e9xico, Paraguay, Per\u00fa, Uruguay y Venezuela. Los datos se extrajeron de la plataforma altmetric.com<\/a> de Digital Science<\/em> para art\u00edculos publicados entre 2015 y 2018. Este subconjunto incluye 1.211 revistas y 140.158 art\u00edculos.<\/p>\n

La investigaci\u00f3n arroj\u00f3 que de las 1.211 revistas, 707 (58%) ten\u00edan art\u00edculos compartidos por redes sociales y menciones cubiertas por la plataforma Altmetric<\/em>. De los 141.158 art\u00edculos, sin embargo, una fracci\u00f3n menor, 18.737 (13%) fueron mencionados en la web social.<\/p>\n

Del total de estas menciones, 58.994 (media de 3,14 menciones\/art\u00edculo), la gran mayor\u00eda, el 94,3%, fueron en redes sociales (Twitter<\/em>, 73,8%; Facebook<\/em>, 20,0%; y Google+<\/em>, 0,4%;); 3,7% en sitios de noticias y blogs<\/em>; 0,7% en documentos de p\u00f3liza y patentes; y el 1,3 % de otras fuentes (Wikipedia, videos, publicaciones de preguntas y respuestas y sitios acad\u00e9micos de revisi\u00f3n por pares).<\/p>\n

El hecho de que Twitter<\/em> ocupe el primer lugar (73,8%) como la plataforma m\u00e1s utilizada para compartir art\u00edculos de investigaci\u00f3n, seguida de lejos por Facebook<\/em> (20,0%) en segundo lugar, era en cierto modo esperado, debido a que al ser la plataforma de m\u00e1s r\u00e1pido crecimiento entre acad\u00e9micos para compartir y recomendar publicaciones, seg\u00fan estudios previos. Sin embargo, es necesario hacer una reserva sobre los datos de Facebook<\/em>, ya que es posible que los datos de esta red social est\u00e9n subestimados, ya que la b\u00fasqueda altmetric no tiene en cuenta las publicaciones en grupos cerrados o perfiles de acceso restringido, a diferencia de Twitter<\/em>, cuyos datos son ampliamente capturados.<\/p>\n

Un dato interesante obtenido por los autores del art\u00edculo se refiere al origen de los tuits sobre publicaciones latinoamericanas. M\u00e1s de un tercio de ellos se originan fuera de Am\u00e9rica Latina. Este porcentaje es del 100% para art\u00edculos de Cuba y Bolivia, 63% para Argentina, 57% para Venezuela, 43% para Brasil, 36% para Chile, 29% para M\u00e9xico y 24% para Costa Rica. Los dem\u00e1s pa\u00edses muestran porcentajes del orden del 10-15%. Los pa\u00edses de donde proceden la mayor\u00eda de los tuits son Reino Unido, Espa\u00f1a, Estados Unidos y Malasia.<\/p>\n

Estos resultados llaman inmediatamente la atenci\u00f3n sobre el idioma de las publicaciones, variable que puede influir en el rendimiento altm\u00e9trico de los art\u00edculos. De la muestra estudiada por los autores, el 57% de las menciones son a art\u00edculos en ingl\u00e9s, 24% en espa\u00f1ol y 18% en portugu\u00e9s, indicando una internacionalizaci\u00f3n de las publicaciones latinoamericanas. Cabe mencionar el caso de Brasil, donde el 70% de las menciones son a art\u00edculos en ingl\u00e9s, el 27% a art\u00edculos en portugu\u00e9s y el 3% en espa\u00f1ol. Estos datos est\u00e1n en l\u00ednea con la pol\u00edtica de internacionalizaci\u00f3n de SciELO<\/a>,2<\/sup> que entr\u00f3 en vigor en 2014.<\/p>\n

Los autores tambi\u00e9n destacan que la mayor\u00eda de los desarrollos y aplicaciones para la web, especialmente los de aplicaci\u00f3n acad\u00e9mica, son desarrollados por investigadores para publicaciones en idioma ingl\u00e9s, por lo que en las naciones no angloparlantes se producen sesgos en el seguimiento. de material en la web<\/em> por dichas aplicaciones.<\/p>\n

El estudio tambi\u00e9n evalu\u00f3 el n\u00famero promedio de menciones de art\u00edculos por revista en cada pa\u00eds de Am\u00e9rica Latina. Chile ocupa el primer lugar en porcentaje de revistas con el 81% de sus revistas presentes en Altmetric<\/em>, seguido de Brasil (76%), Colombia (75%), Costa Rica (61%), Per\u00fa (60%) y M\u00e9xico (50%). Brasil lidera el ranking<\/em> del pa\u00eds con mayor porcentaje de art\u00edculos con menci\u00f3n (20%) y mayor promedio de art\u00edculos con menci\u00f3n por revista (44%). El buen resultado en Brasil posiblemente se deba a la pol\u00edtica de SciELO de incentivar la difusi\u00f3n de las revistas en las redes sociales, que a partir de 2014 incluye en los Criterios de Selecci\u00f3n y Permanencia de la Colecci\u00f3n SciELO Brazil<\/a>3<\/sup> un plan de difusi\u00f3n que prev\u00e9 la creaci\u00f3n de un perfil de revista en redes sociales como Facebook<\/em> y\/o Twitter<\/em>.<\/p>\n

Para evaluar la influencia del \u00e1rea de conocimiento en la presencia web<\/em> de los art\u00edculos, el estudio de Spatti et al.,1<\/sup> indic\u00f3 que es necesario identificar un patr\u00f3n de comportamiento seg\u00fan el \u00e1rea de conocimiento, especialmente para pa\u00edses con mayor participaci\u00f3n. Brasil, al igual que Chile, Colombia y Ecuador, tienen fuertes publicaciones en el \u00e1rea de las ciencias biol\u00f3gicas y de la salud y de las ciencias humanas y sociales aplicadas, y es en esa \u00e1rea que las redes sociales, blogs y sitios de noticias, documentos de pol\u00edticas y patentes y fuentes acad\u00e9micas. En cambio, en Chile, Venezuela, Argentina y Costa Rica predominan las revistas de Ciencias Biol\u00f3gicas y de la Salud, as\u00ed como las menciones en la web social. En Per\u00fa, sin embargo, no hay diferencia entre las \u00e1reas para las menciones altm\u00e9tricas.<\/p>\n

El comportamiento altm\u00e9trico de los perfiles de pa\u00edses aqu\u00ed analizados permite identificar tres indicadores para la caracterizaci\u00f3n de perfiles: penetraci\u00f3n<\/strong> (cobertura altm\u00e9trica en t\u00e9rminos de revistas y publicaciones); inserci\u00f3n<\/strong> (porcentaje de automenci\u00f3n y menci\u00f3n latinoamericana) e internacionalizaci\u00f3n<\/strong> (porcentaje de menci\u00f3n no latinoamericana y art\u00edculos mencionados en ingl\u00e9s).<\/p>\n

Con base en estos indicadores, fue posible identificar tres grupos. El primer grupo est\u00e1 formado \u00fanicamente por Brasil. Posee alta inserci\u00f3n evidenciada por el n\u00famero de revistas y n\u00famero de art\u00edculos ubicados en altmetric; alta inserci\u00f3n, con un porcentaje del 48% de automenci\u00f3n; y alta internacionalizaci\u00f3n, con 43% de menciones no latinoamericanas y 70% de publicaciones mencionadas en ingl\u00e9s.<\/p>\n

El segundo grupo lo conforman Chile, Colombia y Costa Rica, pa\u00edses cuyo comportamiento altm\u00e9trico muestra: penetraci\u00f3n media<\/strong> (porcentaje de revistas con menciones superiores a la mediana de la regi\u00f3n y porcentaje de art\u00edculos con menciones cercanas a la mediana de la regi\u00f3n); alta inserci\u00f3n<\/strong>, con un porcentaje significativo de automenciones e internacionalizaci\u00f3n media<\/strong>, caracterizado por porcentajes entre 10-36% de menciones no latinoamericanas y 23-35% de art\u00edculos mencionados en ingl\u00e9s.<\/p>\n

El tercer grupo, formado por Per\u00fa y M\u00e9xico, tiene un perfil m\u00e1s moderado, con penetraci\u00f3n media<\/strong>, caracterizado por el porcentaje de art\u00edculos y revistas con menciones cercanas a la mediana de los pa\u00edses; inserci\u00f3n media, con un porcentaje de automenci\u00f3n de 27-44% y perfil internacional moderado<\/strong>, 14%-29% de menciones no latinoamericanas y 25-27% de menciones de art\u00edculos en ingl\u00e9s.<\/p>\n

Un cuarto grupo lo forma solo Argentina, caracterizado por baja penetraci\u00f3n e inserci\u00f3n<\/strong>, pero alta internacionalizaci\u00f3n<\/strong>, con un 63% de menciones no latinoamericanas. Finalmente, un quinto grupo incluye a Ecuador, Venezuela, Uruguay, Cuba, Bolivia y Paraguay, pa\u00edses con baja penetraci\u00f3n<\/strong> y valores absolutos de publicaciones con menci\u00f3n por debajo de 100, lo que hace inviable un mayor an\u00e1lisis.<\/p>\n

Es importante resaltar que el art\u00edculo de Spatti, et al<\/em>.1<\/sup> se public\u00f3 en 2021, con datos de 2015 a 2018. Es de esperar que despu\u00e9s de tres a\u00f1os se hayan producido cambios tanto en el perfil de los art\u00edculos publicados, en cuanto al porcentaje de internacionalizaci\u00f3n de las publicaciones, como en la difusi\u00f3n de los mismos. estos art\u00edculos a trav\u00e9s de las redes sociales, lo que habr\u00eda aumentado la penetraci\u00f3n, inserci\u00f3n e internacionalizaci\u00f3n.<\/p>\n

Las m\u00e9tricas alternativas, como se\u00f1alan los autores del art\u00edculo, se interpretan mejor en comparaci\u00f3n con las m\u00e9tricas basadas en citas y otras, como las medidas de uso y descarga. En este sentido, la evaluaci\u00f3n de la ciencia producida y publicada en revistas latinoamericanas se beneficiar\u00eda mucho de nuevos an\u00e1lisis de esta naturaleza.<\/p>\n

Notas<\/h3>\n

1 SPATTI, A.C., et al<\/em>. M\u00e9tricas alternativas para avalia\u00e7\u00e3o da produ\u00e7\u00e3o cient\u00edfica latino-americana: um estudo da rede SciELO. Inf. Inf.<\/em> [online]. 2021, vol. 26, no. 2, pp. 596-624 [viewed\u00a009 February 2022]. http:\/\/doi.org\/10.5433\/1981-8920.2021v26n2p596<\/a>. Available from: https:\/\/www.uel.br\/revistas\/uel\/index.php\/informacao\/article\/view\/41474<\/a><\/p>\n

2. PACKER, A. La internacionalizaci\u00f3n de las revistas fue el tema central de la IV Reuni\u00f3n Anual de SciELO [online].\u00a0SciELO en Perspectiva<\/em>, 2014 [viewed\u00a009 February 2022]. Available from: https:\/\/blog.scielo.org\/es\/2014\/12\/16\/la-internacionalizacion-de-las-revistas-fue-el-tema-central-de-la-iv-reunion-anual-de-scielo\/<\/a><\/p>\n

3. Criterios SciELO Brasil: https:\/\/www.scielo.br\/about\/criterios-scielo-brasil<\/a><\/p>\n

Referencias<\/h3>\n

ENKHBAYAR, A. and ALPERIN, J. P. Challenges of capturing engagement on Facebook for Altmetrics [online]. arXiv<\/em>. 2018 [viewed\u00a009 February 2022]. Available from: https:\/\/arxiv.org\/abs\/1809.01194<\/a><\/p>\n

ORTEGA, J. S. Las revistas acad\u00e9micas con presencia en Twitter est\u00e1n m\u00e1s ampliamente diseminadas y reciben un mayor n\u00famero de citas [Publicado originalmente en el blog LSE Impact of Social Sciences en Diciembre\/2017] [online].\u00a0SciELO en Perspectiva<\/em>, 2017 [viewed\u00a003 February 2022]. Available from: https:\/\/blog.scielo.org\/es\/2017\/12\/14\/las-revistas-academicas-con-presencia-en-twitter-estan-mas-ampliamente-diseminadas-y-reciben-un-mayor-numero-de-citas\/<\/a><\/p>\n

ORTEGA, J. S. The presence of academic journals on Twitter and its relationship with dissemination (tweets) and research impact (citations). Aslib Journal of Information Management<\/em> [online]. 2017, vol. 69, no. 6, pp. 674-687, ISSN: 2050-3806 [viewed\u00a009 February 2022]. https:\/\/doi.org\/10.1108\/AJIM-02-2017-0055<\/a>. Available from: http:\/\/www.emeraldinsight.com\/doi\/abs\/10.1108\/AJIM-02-2017-0055<\/a><\/p>\n

PACKER, A. La internacionalizaci\u00f3n de las revistas fue el tema central de la IV Reuni\u00f3n Anual de SciELO [online].\u00a0SciELO en Perspectiva<\/em>, 2014 [viewed\u00a009 February 2022]. Available from: https:\/\/blog.scielo.org\/es\/2014\/12\/16\/la-internacionalizacion-de-las-revistas-fue-el-tema-central-de-la-iv-reunion-anual-de-scielo\/<\/a><\/p>\n

SCIENTIFIC ELECTRONIC LIBRARY ONLINE. Entrevista con Atila Iamarino [online].\u00a0SciELO en Perspectiva<\/em>, 2013 [viewed\u00a009 February 2022]. Available from: https:\/\/blog.scielo.org\/es\/2013\/11\/29\/entrevista-con-atila-iamarino\/<\/a><\/p>\n

SCIENTIFIC ELECTRONIC LIBRARY ONLINE. Entrevista con Euan Adie, CEO de altmetric.com [online].\u00a0SciELO en Perspectiva<\/em>, 2013 [viewed\u00a004 February 2022]. Available from: https:\/\/blog.scielo.org\/es\/2013\/08\/29\/entrevista-con-euan-adie-ceo-de-altmetric-com\/<\/a><\/p>\n

SPATTI, A.C., et al<\/em>. M\u00e9tricas alternativas para avalia\u00e7\u00e3o da produ\u00e7\u00e3o cient\u00edfica latino-americana: um estudo da rede SciELO. Inf. Inf.<\/em> [online]. 2021, vol. 26, no. 2, pp. 596-624 [viewed\u00a009 February 2022]. http:\/\/doi.org\/10.5433\/1981-8920.2021v26n2p596<\/a>. Available from: https:\/\/www.uel.br\/revistas\/uel\/index.php\/informacao\/article\/view\/41474<\/a><\/p>\n

The donut and Altmetric Attention Score [online]. Altmetric [viewed\u00a009 February 2022]. Available from: https:\/\/www.altmetric.com\/about-our-data\/the-donut-and-score\/<\/a>
\nEnlaces externos
\nCriterios SciELO Brasil: https:\/\/www.scielo.br\/about\/criterios-scielo-brasil<\/a><\/p>\n

The Leiden Manifesto for Research Metrics. http:\/\/www.leidenmanifesto.org\/<\/a><\/p>\n

The San Francisco Declaration on Research Assessment (DORA): https:\/\/sfdora.org\/<\/a><\/p>\n

 <\/p>\n

Sobre Lilian Nassi-Cal\u00f2\"\"<\/a><\/h3>\n

Lilian Nassi-Cal\u00f2 estudi\u00f3 qu\u00edmica en el Instituto de Qu\u00edmica de la USP, tiene un doctorado en Bioqu\u00edmica por la misma instituci\u00f3n y un pos doctorado como becaria de la Fundaci\u00f3n Alexander von Humboldt en Wuerzburg, Alemania. Despu\u00e9s de concluir sus estudios, fue docente e investigadora en el IQ-USP. Trabaj\u00f3 en la industria privada como qu\u00edmica industrial y actualmente es Coordinadora de Comunicaci\u00f3n Cient\u00edfica en BIREME\/OPS\/OMS y colaboradora de SciELO.<\/p>\n

 <\/p>\n

Traducido del original en portugu\u00e9s<\/a> por Ernesto Spinak.<\/p>\n","protected":false},"excerpt":{"rendered":"

Las altmetr\u00edas son m\u00e9tricas alternativas que recogen las menciones realizadas a art\u00edculos cient\u00edficos en redes sociales, sitios de noticias y blogs; p\u00f3lizas y patentes; Wikipedia y otras fuentes para evaluar el impacto de las publicaciones en la web social. Se realiz\u00f3 un estudio utilizando revistas y art\u00edculos de la red SciELO en Am\u00e9rica Latina para calificar la presencia en la web de los resultados de investigaci\u00f3n latinoamericanos y explorar el potencial de las altm\u00e9tricas. …<\/span> Read More →<\/span><\/a><\/span><\/p>\n","protected":false},"author":22,"featured_media":4942,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"om_disable_all_campaigns":false,"_monsterinsights_skip_tracking":false,"footnotes":"","_links_to":"","_links_to_target":""},"categories":[3],"tags":[30,29,7,47,34],"class_list":["post-4939","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-analisis","tag-altmetria","tag-bibliometria","tag-comunicacion-cientifica","tag-difusion-de-la-informacion","tag-redes-sociales"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t