{"id":404,"date":"2013-08-29T15:42:21","date_gmt":"2013-08-29T18:42:21","guid":{"rendered":"http:\/\/blog.scielo.org\/es\/?p=404"},"modified":"2016-01-15T13:34:29","modified_gmt":"2016-01-15T15:34:29","slug":"entrevista-con-euan-adie-ceo-de-altmetric-com","status":"publish","type":"post","link":"https:\/\/blog.scielo.org\/es\/2013\/08\/29\/entrevista-con-euan-adie-ceo-de-altmetric-com\/","title":{"rendered":"Entrevista con Euan Adie, CEO de altmetric.com"},"content":{"rendered":"
\"Euan

Euan Adie<\/p><\/div>\n

La aparici\u00f3n de un nuevo concepto suele generar muchas preguntas – y es el caso de la Altmetr\u00eda.\u00a0 \u00bfQu\u00e9 significa el t\u00e9rmino Altmetr\u00eda? \u00bfEstos nuevos indicadores tratan de suplantar o solo complementar los indicadores bibliom\u00e9tricos cl\u00e1sicos basados en las citas? \u00bfEn qu\u00e9 cambia la forma de entender el impacto de la investigaci\u00f3n en las universidades y en la sociedad? \u00bfCu\u00e1l es el uso de estos nuevos indicadores? \u00bfC\u00f3mo se expresa la preocupaci\u00f3n o la necesidad de selectividad en la composici\u00f3n de estas medidas? \u00bfQu\u00e9 controles o mecanismos correctivos adopta la altmetr\u00eda para hacer frente a manipulaciones? \u00bfC\u00f3mo son percibidas por los sistemas de evaluaci\u00f3n de investigaci\u00f3n o por las agencias de financiaci\u00f3n de la investigaci\u00f3n?<\/p>\n

En esta entrevista exclusiva, Euan Adie – CEO de la empresa altmetric.com, responde a \u00e9stas y otras preguntas en el blog p\u00fablico SciELO en Perspectiva, que mantiene su compromiso de llevar a sus lectores las discusiones que se libran en todo el mundo en relaci\u00f3n con las nuevas posibilidades de evaluaci\u00f3n de la investigaci\u00f3n cient\u00edfica, abriendo nuevos horizontes para su impacto y alcance.<\/p>\n

1. Para empezar, \u00bfpodr\u00eda contarnos acerca de la aparici\u00f3n del concepto de Altmetr\u00eda, y por qu\u00e9 este nombre en particular?<\/p>\n

\u00a1Por supuesto! El ‘alt’ se refiere a la alternativa: una alternativa para el contar s\u00f3lo las citas para uso como indicadores. Altmetr\u00eda se refiere esencialmente a adoptar una visi\u00f3n m\u00e1s amplia de los resultados e impactos.<\/b><\/p>\n

Parte de la producci\u00f3n cient\u00edfica se refiere a la obtenci\u00f3n de cr\u00e9dito por cosas tales como hablar en una conferencia, o contribuir a una base de datos o producir uno software<\/i>. La parte de impacto es acerca de reconocer que la investigaci\u00f3n acad\u00e9mica influye en diferentes grupos en toda clase de formas que no son capturadas solamente por citaciones.<\/b><\/p>\n

Hay un mont\u00f3n de otras fuentes de datos potencialmente interesantes, como medios de comunicaci\u00f3n o menciones en las redes sociales, blogs, gestores de referencias, documentos de pol\u00edticas, y las cuentas de descargas: \u00bfpor qu\u00e9 no estamos haciendo, como productores y consumidores de la investigaci\u00f3n, un mejor uso de ellas?<\/b><\/p>\n

Un tipo espec\u00edfico de altmetr\u00eda es la m\u00e9trica a nivel de art\u00edculo: estas son las m\u00e9tricas para un tipo de producci\u00f3n (art\u00edculos) y el tipo de datos que usted puede ver en los sitios de los editores.<\/b><\/p>\n

2. \u00bfPretenden los indicadores alternativos suplantar o simplemente complementar los indicadores bibliom\u00e9tricos cl\u00e1sicos basados \u200b\u200ben citaciones?<\/p>\n

Esta es una buena pregunta. Las citas siguen siendo una medida muy importante – y altmetr\u00eda es m\u00e1s bien complementaria que un reemplazo de ellas – pero s\u00f3lo miden una cosa, y es que otro acad\u00e9mico encontr\u00f3 el art\u00edculo \u00fatil en su propio trabajo. Esto ignora otras formas de impacto, ya sea cl\u00ednico, econ\u00f3mico o de cualquier otro p\u00fablico.<\/b><\/p>\n

Dicho esto, en la comunidad de altmetr\u00eda hay un amplio apoyo que sugiere que altmetr\u00eda podr\u00eda ser una alternativa al uso del factor de impacto (FI) en las \u00e1reas en que el FI no es adecuado (y hay un mont\u00f3n de ellas).<\/b><\/p>\n

Un punto clave a destacar es que la altmetr\u00eda no mide la calidad, de la misma manera que las citas no miden la calidad. La gente puede citar su trabajo porque es terrible. Si lo que necesita saber es qu\u00e9 tan bueno es un trabajo, entonces deber\u00eda leerlo! O conseguir expertos que lo lean para usted: bases de datos tales como F1000<\/a>1<\/sup><\/b><\/a> o la colecci\u00f3n de Biblioteca Cochrane<\/a>2<\/sup><\/b><\/a> son interesantes en este sentido.<\/b><\/p>\n

3. La siguiente declaraci\u00f3n hecha por Ian Mulvany de el peri\u00f3dico cient\u00edfico eLife<\/a>3<\/sup><\/a> acerca del Explorador Altmetric desarrollado por su empresa aparece en el sitio Web altmetric.com:<\/p>\n

“Explorador Altmetric<\/i> tiene el potencial de cambiar la forma de entender el impacto que tiene la investigaci\u00f3n en el mundo acad\u00e9mico y lo m\u00e1s importante el impacto m\u00e1s amplio que tiene en la sociedad.”<\/p>\n

\u00bfPodr\u00eda comentar sobre la forma en que va a cambiar nuestra comprensi\u00f3n del impacto que la investigaci\u00f3n tiene en el mundo acad\u00e9mico y en la sociedad?<\/p>\n

S\u00ed, esto es menos acerca de los n\u00fameros y m\u00e1s acerca de la aparici\u00f3n de la informaci\u00f3n a la que de otra manera los financiadores y los autores nunca estar\u00edan expuestos.<\/b><\/p>\n

Digamos que yo escribo un art\u00edculo sobre las mejores maneras de cuidar a los ni\u00f1os autistas en una sala de hospitalizaci\u00f3n pedi\u00e1trica. Esto podr\u00eda tener un impacto en la manera en que los pediatras y enfermeras practiquen y mejoren la calidad de la atenci\u00f3n a cientos de ni\u00f1os: pero nunca lo sabr\u00eda s\u00f3lo por la cuenta de citas. Yo podr\u00eda investigar una enfermedad rara; mi grupo de pares es peque\u00f1o, pero tiene un impacto importante en las personas y familias que lidian con esta enfermedad. Yo podr\u00eda haber escrito un documento que tenga mucho inter\u00e9s por parte de ciertas partes de la poblaci\u00f3n – lo vemos mucho con, por ejemplo, el inter\u00e9s de Jap\u00f3n en la investigaci\u00f3n sobre los efectos de la radiaci\u00f3n ionizante en la salud (despu\u00e9s de Fukushima …)<\/b><\/p>\n

La altmetr\u00eda no garantiza que usted va a ver la evidencia de cualquiera de los apartados anteriores. Sin embargo s\u00ed permite esa posibilidad, mientras que las citas no – s\u00f3lo van a reflejar el impacto entre las personas que escriben art\u00edculos. Debemos estar abiertos a la evidencia de que un documento ha llegado a la audiencia correcta, venga de donde venga, ya sea un hilo de Reddit<\/a>4<\/sup><\/b><\/a> , el blog de una enfermera, o de un art\u00edculo de una revista.<\/b><\/p>\n

Es un poco dif\u00edcil juzgar qu\u00e9 es significativo e importante y qu\u00e9 no lo es.<\/b><\/p>\n

4. Los servicios altmetric.com que operan a nivel de art\u00edculo pueden ser adquiridos por los individuos. \u00bfQu\u00e9 usos est\u00e1n haciendo los investigadores de estos indicadores? \u00bfCree usted que la altmetr\u00eda encontrar\u00e1 su camino en los curr\u00edculos de los investigadores?<\/p>\n

\u00a1S\u00ed! Aunque creo que la evidencia por ahora es anecd\u00f3tica y no como indicadores duros – es posible descubrir y se\u00f1alar en su CV que sus trabajos han sido recogidos por x medios de comunicaci\u00f3n incluyendo el New York Times, y blogs, incluyendo el m\u00e1s conocido en su campo, etc.<\/b><\/p>\n

Vemos tambi\u00e9n gente tuiteando mucho sobre la puntuaci\u00f3n relativa (en la parte superior x% de los art\u00edculos m\u00e1s relevantes ).<\/b><\/p>\n

No tanto “me tuitearon veinte veces!” o “Tengo una puntuaci\u00f3n altm\u00e9trica de catorce!” – Esto no significa tanto. Es importante que las personas tengan el contexto para todos los n\u00fameros.<\/b><\/p>\n

La mayor\u00eda de los usos que vemos son de autores que buscan en sus documentos propios, en lugar de los lectores que utilizan la altmetr\u00eda, digamos por el contexto o el descubrimiento.<\/b><\/p>\n

5. \u00bfPuede la m\u00e9trica a nivel de art\u00edculo extenderse para ser aplicada a nivel de revista? \u00bfCu\u00e1l es su experiencia? \u00bfTiene conocimiento de alg\u00fan estudio que examine la correlaci\u00f3n entre la altmetr\u00eda y el Factor de Impacto de las revistas? \u00bfEst\u00e1 pensando en trabajar con la altmetr\u00eda a nivel de revista?<\/p>\n

Nos han preguntado acerca de esto algunas veces, pero creo que es algo por lo que tendr\u00edamos que ver una mayor demanda por los usuarios finales. En un art\u00edculo es bastante f\u00e1cil de profundizar en los datos y tener una idea de por qu\u00e9 ha estado recibiendo atenci\u00f3n; es mucho m\u00e1s dif\u00edcil hacer esto para una revista por lo que tendr\u00edan que tomarse los n\u00fameros en su valor nominal, lo que no es necesariamente una buena cosa.<\/b><\/p>\n

No he visto ning\u00fan estudio formal correlacionando altmetr\u00edas y el FI, pero si nos fijamos en los datos a simple vista las principales revistas seg\u00fan la altmetr\u00eda son similares a las principales revistas de FI: Nature, Science, The Lancet<\/i>, y as\u00ed sucesivamente. Esto es en parte debido a que estas revistas tienen un alcance mucho m\u00e1s amplio que otros t\u00edtulos por lo que el trabajo se expone a m\u00e1s gente, por lo que es natural que se vaya a poner m\u00e1s atenci\u00f3n.<\/b><\/p>\n

Las diferencias son interesantes. Vemos un mont\u00f3n de atenci\u00f3n en torno a PLoS One<\/i>, y alrededor de preprints<\/i> en algunas \u00e1reas (especialmente la f\u00edsica, donde hay un mont\u00f3n de murmullo en torno a art\u00edculos en arXiv).<\/b><\/p>\n

6. En lo que se refiere a su empresa altmetric.com \u00bfla recolecci\u00f3n de datos relacionados con el art\u00edculo dependen de tener el consentimiento de los editores para hacer esto? \u00bfC\u00f3mo se asegura altmetric.com que se han identificado todas las conversaciones relacionadas con un art\u00edculo en particular?<\/p>\n

\"Altmetric.com\"<\/a>No, hacemos un seguimiento de tantos editores como sea posible. Creo que tienes que hacer esto para poder poner los n\u00fameros en el contexto apropiado. Volviendo al ejemplo “me tuitearon veinte veces!” lo que realmente importa es ser capaz de decir “me tuitearon veinte veces! – la mayor\u00eda de los trabajos en mi campo s\u00f3lo son tuiteados dos veces.”<\/b><\/p>\n

Sin duda nos perdemos cosas. Uno de los sesgos con los que actualmente estamos luchando es que tomamos un mont\u00f3n de informaci\u00f3n desde Europa, Norteam\u00e9rica y Jap\u00f3n, pero no mucho de Am\u00e9rica del Sur o del resto de Asia. Tenemos un mont\u00f3n de comentarios de los autores que nos dicen que hemos perdido un post<\/i> de blog o una p\u00e1gina en particular, esto es muy \u00fatil, ya que mejora el servicio para todo el mundo.<\/b><\/p>\n

7. M\u00e9tricas basadas en citas bibliogr\u00e1ficas se publican los \u00edndices multidisciplinarios internacionales como WoS, Scopus, Google Scholar<\/i> y, regionalmente, por SciELO. Estos \u00edndices limitan la cobertura de las revistas debido a los criterios de selecci\u00f3n que han establecido. En el caso de altmetric.com y la altmetr\u00eda en general, \u00bfde qu\u00e9 manera hay una preocupaci\u00f3n o necesidad de selectividad?<\/p>\n

Nosotros registramos alegremente la mayor\u00eda de las cosas, pero la selectividad viene cuando estamos eligiendo lo que se debe usar para los c\u00e1lculos en contexto o para mostrarle a los usuarios finales. Nuestra preocupaci\u00f3n aqu\u00ed tiene que ver con los editores p\u00edcaros que de pronto tratan de jugar con el sistema para que sus revistas se vean bien.<\/b><\/p>\n

Ciertamente no se aplican algunos criterios como la antig\u00fcedad. Hacemos un seguimiento de revistas desde que se acaban de lanzar – no hay necesidad de esperar durante dieciocho meses para ver ingresando las primeras citas.<\/b><\/p>\n

8. \u00bfSabe usted si la altmetr\u00eda se est\u00e1 utilizando en los sistemas de evaluaci\u00f3n de la investigaci\u00f3n por las instituciones o por los organismos que financian la investigaci\u00f3n?<\/p>\n

Claro, hemos hablado con muchos y tenemos dos como clientes. En cada caso estamos en los primeros d\u00edas y no creo que en ninguna parte se est\u00e9 mirando a un amplio espectro de altmetr\u00eda sistem\u00e1ticamente (aunque algunos pueden estar utilizando, por ejemplo, informes F1000).<\/b><\/p>\n

El tipo de uso que o\u00edmos hablar se centra m\u00e1s en torno a los datos reales recogidos – los tuits, las noticias, etc – y no s\u00f3lo los n\u00fameros. Por ejemplo, un donante puede mirar a los tuits de un departamento del gobierno o de las ONG como prueba de que un art\u00edculo que han financiado ha llegado a la audiencia correcta.<\/b><\/p>\n

9. Algunos indicadores bibliom\u00e9tricos como el Factor de Impacto est\u00e1n sujetos a manipulaciones para aumentar su valor. Algunas de estas manipulaciones son bastante aceptables, mientras que otras van de dudosas hasta completamente inaceptables. \u00bfQu\u00e9 control y\/o mecanismos de correcci\u00f3n tiene la altmetr\u00eda por ejemplo, para hacer frente a los robots sociales?<\/p>\n

\u00a1Nos hacen mucho esta pregunta! Y con raz\u00f3n. Vemos este tipo de manipulaciones todo el tiempo, pero, curiosamente, por lo general estos juegos no se hacen por s\u00ed, no se est\u00e1n haciendo para inflar las puntuaciones o la posici\u00f3n de nadie. En cambio esto es una consecuencia de c\u00f3mo los spammers<\/i> trabajan en la Web<\/i> o en las redes sociales: para hacer que sus cuentos parezcan leg\u00edtimos ellos replican el contenido de las cuentas al azar y, a veces, esas cuentas pertenecen a los cient\u00edficos.<\/b><\/p>\n

A veces escuchamos las cr\u00edticas se\u00f1alando que se puede pedir a diez amigos tuitear su art\u00edculo para obtener mejor altmetr\u00eda – no estamos en absoluto preocupados con este tipo de cosas, en la medida que a m\u00ed respecta eso es atenci\u00f3n leg\u00edtima.<\/b><\/p>\n

M\u00e1s all\u00e1 de esa escala nosotros (y el resto de la comunidad de altmetr\u00eda ) tomamos las cosas m\u00e1s en serio. Utilizamos una combinaci\u00f3n de m\u00e9todos automatizados y manuales para marcar y luego hacer frente a la manipulaci\u00f3n. Una de las cosas buenas de tener una gran base de datos y el espectro de las diferentes fuentes de datos, es que podemos construir una buena visi\u00f3n de los tipos de patrones de atenci\u00f3n que se esperan y cu\u00e1les son inusuales en alguna manera.<\/b><\/p>\n

10. Un art\u00edculo publicado en el n\u00famero del 9 de agosto de la revista Science<\/i> concluye que los sistemas de clasificaci\u00f3n est\u00e1n influenciados socialmente en el sentido de que las nuevas calificaciones son influenciadas por las anteriores, por lo que las m\u00e9tricas relacionadas pueden estar sesgadas. \u00bfCu\u00e1l es su opini\u00f3n sobre este informe?<\/p>\n

Creo que es un gran estudio, y sospecho que el hallazgo es cierto en muchos otros \u00e1mbitos. Simplemente est\u00e1 buscando a Reddit<\/i> (o algo muy parecido a Reddit<\/i>), aunque es dif\u00edcil generalizar.<\/b><\/p>\n

La motivaci\u00f3n para votar var\u00eda mucho de un sitio a otro, de hecho, incluso dentro del mismo sitio. A veces las votaciones son p\u00fablicas, a veces privadas. A veces los usuarios se identifican fuertemente con otras personas o grupos en el sitio, a veces no lo hacen.<\/b><\/p>\n

En Reddit<\/i> quiz\u00e1 estoy votando para indicar que he encontrado un enlace interesante. En Twitter<\/i> si retuiteo a alguien podr\u00eda ser porque lo quiero compartir m\u00e1s ampliamente, o porque me hace ver bien de alguna manera (la gente tuitea cosas que no han le\u00eddo, al igual que citan documentos que no han le\u00eddo). Si destaco algo podr\u00eda ser porque me gust\u00f3, pero tambi\u00e9n porque quiero guardarlo para leer m\u00e1s tarde, o para dar a quien lo escribi\u00f3 una palmada de aprobaci\u00f3n virtual.<\/b><\/p>\n

Esta es la fuerza y \u200b\u200bla debilidad de la altmetr\u00eda… por un lado, tienes un mont\u00f3n de diferentes medidas para elegir y es indicativo de una amplia gama de diferentes tipos de atenci\u00f3n. La desventaja es que se necesita mucha informaci\u00f3n acerca de d\u00f3nde vienen los datos y lo que significan. Esto es en parte por qu\u00e9 nos aferramos a medir la atenci\u00f3n – que es bastante no controversial y f\u00e1cil de entender \u2013 el opuesto de la calidad.<\/b><\/p>\n

Notas:<\/h3>\n

<\/a>1<\/a>\u00a0Faculty of 1000 (F1000): publicaci\u00f3n online lanzada en 2002 para evaluar a cualidad de los art\u00edculos cient\u00edficos en la \u00e1rea Biom\u00e9dica con base en la opini\u00f3n de especialistas:\u00a0 http:\/\/f1000.com\/<\/a>.<\/p>\n

<\/a>2<\/a>\u00a0Biblioteca Cochrane: colecci\u00f3n de revisiones sistem\u00e1ticas de ensayos controlados aleatorios de intervenciones m\u00e9dicas, con el objetivo de divulgar sus resultados y conclusiones – http:\/\/cochrane.bireme.br\/portal\/php\/index.php<\/a>.<\/p>\n

<\/a>3<\/a>\u00a0eLife: revista\u00a0 cient\u00edfico revisada por pares, de acceso abierto, de las \u00e1reas de Ciencias Biom\u00e9dicas y de la Vida – http:\/\/www.elifesciences.org\/<\/a>.<\/p>\n

<\/a>4<\/a>\u00a0Reddit: Sitio de publicaciones sociales donde los usuarios pueden divulgar enlaces para contenidos en la Web – http:\/\/www.pt.reddit.com\/<\/a>.<\/p>\n","protected":false},"excerpt":{"rendered":"

No hay manera de ignorar la Altmetr\u00eda. Con base en el seguimiento de las redes sociales en l\u00ednea para monitorear el impacto de las publicaciones cient\u00edficas, este nuevo campo est\u00e1 experimentando un r\u00e1pido crecimiento. En entrevista exclusiva en el blog de SciELO en Perspectiva, los diferentes aspectos de la Altmetr\u00edaa son abordados por Euan Adie – CEO de la empresa altmetric.com y uno de los oradores en la Conferencia SciELO 15 A\u00f1os. …<\/span> Read More →<\/span><\/a><\/span><\/p>\n","protected":false},"author":5,"featured_media":405,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"om_disable_all_campaigns":false,"_monsterinsights_skip_tracking":false,"footnotes":"","_links_to":"","_links_to_target":""},"categories":[4],"tags":[30,8,19],"class_list":["post-404","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-entrevistas","tag-altmetria","tag-programa-scielo","tag-scielo-15-anos"],"aioseo_notices":[],"aioseo_head":"\n\t\t\n\t\n\t\n\t\n\t\n\t\n\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t\n\t\t