{"id":2613,"date":"2018-02-06T09:43:28","date_gmt":"2018-02-06T11:43:28","guid":{"rendered":"http:\/\/blog.scielo.org\/es\/?p=2613"},"modified":"2018-02-06T09:43:28","modified_gmt":"2018-02-06T11:43:28","slug":"el-sistema-qualis-una-perspectiva-desde-una-revista-multidisciplinaria-publicado-originalmente-en-el-editorial-del-vol-89-no-3-en-anais-da-academia-brasileira-de-ciencias","status":"publish","type":"post","link":"https:\/\/blog.scielo.org\/es\/2018\/02\/06\/el-sistema-qualis-una-perspectiva-desde-una-revista-multidisciplinaria-publicado-originalmente-en-el-editorial-del-vol-89-no-3-en-anais-da-academia-brasileira-de-ciencias\/","title":{"rendered":"El sistema Qualis: una perspectiva desde una revista multidisciplinaria [Publicado originalmente en el editorial del vol. 89 no. 3 en Anais da Academia Brasileira de Ci\u00eancias]"},"content":{"rendered":"

Por Alexander W.A. Kellner,\u00a0Laborat\u00f3rio de Sistem\u00e1tica e Tafonomia de Vertebrados F\u00f3sseis, Departamento de Geologia e Paleontologia, Museu Nacional<\/em>\/UFRJ, Rio de Janeiro, RJ, Brazil<\/strong>\"\"<\/a><\/p>\n

Hay una gran cantidad de literatura disponible sobre el sistema Qualis<\/em> y uno se pregunta qu\u00e9 puede escribir alguien sobre ese tema que no se haya discutido previamente. En este breve ensayo, mostrar\u00e9 la perspectiva de una revista multidisciplinaria que tiene que vivir (o sobrevivir) en el entorno muy complejo creado por Qualis<\/em> y los efectos secundarios nocivos para revistas con \u00e1mbitos amplios como el de los Anales de la Academia Brasile\u00f1a de Ciencias (AABC).<\/p>\n

El sistema Qualis<\/em> fue introducido en 1998 por CAPES (Coordena\u00e7\u00e3o de Aperfei\u00e7oamento de Pessoal de N\u00edvel Superior<\/em>), una agencia del gobierno brasile\u00f1o cuyo prop\u00f3sito es evaluar y fomentar los programas de postgrado brasile\u00f1os.<\/p>\n

Desde el mismo principio qued\u00f3 claro que uno de los principales aspectos de un programa de posgrado son las publicaciones tanto de investigadores como de estudiantes. Dado que la cantidad de art\u00edculos producidos es alta, se tuvo que desarrollar un sistema para discriminar esta producci\u00f3n. As\u00ed es como Qualis<\/em> entr\u00f3 en escena. Esencialmente este sistema clasifica las publicaciones en estratos que se usan posteriormente para evaluar un programa de graduaci\u00f3n en particular. Este sistema ha cambiado a lo largo de los a\u00f1os, y actualmente tiene ocho niveles: A1 y A2, los m\u00e1s altos; B1 a B5; y C, el m\u00e1s bajo que no agrega nada al proceso de evaluaci\u00f3n. Hasta aqu\u00ed todo bien, si no fuera por un peque\u00f1o detalle: el porcentaje de A1 + A2 no puede ser mayor al 25% de todas las publicaciones evaluadas. Adem\u00e1s, el porcentaje de A1 + A2 + B1 no puede ser m\u00e1s de la mitad de las revistas que se toman en consideraci\u00f3n en un a\u00f1o determinado. Volver\u00e9 sobre esto m\u00e1s tarde.<\/p>\n

Como es sabido, AABC es la \u00fanica revista producida en Brasil que puede considerarse verdaderamente multidisciplinaria, publicando art\u00edculos desde f\u00edsica y matem\u00e1ticas, hasta paleontolog\u00eda y cienciometr\u00eda, pasando por la descripci\u00f3n de nuevas especies (biodiversidad), investigaci\u00f3n de nuevos compuestos qu\u00edmicos, estudios que podr\u00edan conducir a la cura de enfermedades, y nuevas metodolog\u00edas aplicadas a la ingenier\u00eda, s\u00f3lo para citar algunas. No es de extra\u00f1ar que nuestra revista aparezca en varias \u00e1reas diferentes evaluadas por CAPES, que ahora son algo menos de 50. Desde 2010, AABCD figura en 28 (2011) hasta 39 (2016) \u00e1reas con bastante variaci\u00f3n con respecto a los estratos. Por ejemplo, en la \u00faltima lista Qualis (2016), la clasificaci\u00f3n de AABC fluct\u00faa desde A2 (p.ej: Antropolog\u00eda\/Arqueolog\u00eda; Ciencias Agrarias) a B5 (Ciencias Biol\u00f3gicas I y II). S\u00f3lo un recordatorio: B5 est\u00e1 cerca de la nada en el sistema de evaluaci\u00f3n presente.<\/p>\n

Cuando la clasificaci\u00f3n Qualis<\/em> comenz\u00f3 a enfocarse en el Factor de Impacto (FI) para clasificar revistas en los estratos respectivos, hubo una preocupaci\u00f3n inmediata de las revistas brasile\u00f1as que ten\u00edan pocas posibilidades de competir con otras en el extranjero. El temor era que las contribuciones con un impacto potencial m\u00e1s alto producidas por cient\u00edficos brasile\u00f1os se desvanecer\u00edan de la superficie editorial de las revistas producidas en el pa\u00eds. Consciente de ello CAPES permiti\u00f3 que cada \u00e1rea eligiera un peque\u00f1o n\u00famero de revistas nacionales consideradas relevantes para el \u00e1rea respectiva que se clasificar\u00eda en estratos superiores. Durante alg\u00fan tiempo, esto tambi\u00e9n fue seguido por un aumento sustancial en la financiaci\u00f3n, lo que ayud\u00f3 a varias revistas para crecer. Este m\u00e9todo inductivo fue muy bienvenido y atenu\u00f3 los problemas creados por el sistema Qualis<\/em>. Pero no para AABC.<\/p>\n

A lo largo de los a\u00f1os y con diferentes editores en jefe, AABC ha realizado grandes esfuerzos para mejorar la revista. Desde 2008, el objetivo principal fue crear las condiciones necesarias para aumentar la cantidad de manuscritos arbitrados de buena calidad, que pasaron de 61 en 2008 a 200 (sin incluir editoriales) en el \u00faltimo a\u00f1o (2016, Fig. 1a). Este n\u00famero a\u00fan es demasiado bajo cuando se compara con los m\u00e1s de 3.000 publicados por PNAS (Proceedings of the National Academy of Sciences of the United States of America) y actualmente estamos buscando alcanzar 500 en el futuro cercano. A pesar de los tiempos econ\u00f3micos dif\u00edciles, logramos introducir varias mejoras, tales como la posibilidad de publicar im\u00e1genes en color en la versi\u00f3n impresa a bajo costo (gratis para la versi\u00f3n en l\u00ednea), portadas a color, publicaciones antes de imprimir (ahead of print<\/em>), boletines informativos, vol\u00famenes especiales y, para todos, un nuevo sistema en l\u00ednea. Esto \u00faltimo fue puesto a disposici\u00f3n por SciELO en noviembre de 2012, lo que result\u00f3 en un dram\u00e1tico aumento de env\u00edos (Fig.1a).<\/p>\n

\"\"<\/a>Figura 1 \u2013 Gr\u00e1ficas mostrando el balance anual entre 2008 y 2016 por articulos recibidos, rechazados y publicados en AABC. a-valores totales para todas las seccioines de AABC; b-valores totales para Ciencias Fisicas; c-valores totales para Ciencias Biol\u00f3gicas; d\u2013valores totales para Ciencias Agrarias<\/strong><\/p>\n

La tasa de presentaci\u00f3n var\u00eda de campo a campo. Con mucho, el menor n\u00famero de art\u00edculos recibido por esta revista viene de las Ciencias F\u00edsicas. En los \u00faltimos ocho a\u00f1os, AABC ha recibido de uno a un m\u00e1ximo de cinco manuscritos por a\u00f1o (Fig. 1b). En 2011 y 2013 no publicamos un solo art\u00edculo en este campo b\u00e1sico de la ciencia. Proyectando a trav\u00e9s del sistema Qualis<\/em>, la mejor clasificaci\u00f3n de AABC en F\u00edsica (realmente Astronom\u00eda y F\u00edsica) fue B3, pero la mayor parte de las veces esta revista no fue listada, incluso cuando fueron publicados manuscritos. Honestamente, sigo pregunt\u00e1ndome cu\u00e1ndo se va a extinguir este \u00e1rea importante en nuestra revista.<\/p>\n

Es bien sabido que el sistema Qualis<\/em> afecta las tasas de env\u00edos, pero las publicaciones no proporcionan muchos datos emp\u00edricos. AABC tambi\u00e9n ha sentido esta efecto, que puede ser ejemplificado en dos \u00e1reas: Ciencias Biol\u00f3gicas y Ciencias Agrarias. La mayor\u00eda de los manuscritos que recibimos en las Ciencias Biol\u00f3gicas cae en lo que CAPES considera como Biodiversidad, que une \u00e1reas tales como la ecolog\u00eda, zoolog\u00eda y bot\u00e1nica. Esta \u00e1rea fue siempre una de las que ten\u00eda mayor n\u00famero de env\u00edos. Ya no. En 2013 AABC fue rebajada de A2 a B2. El efecto sobre la tasa de env\u00edos no fue inmediato, en particular porque ten\u00edamos un volumen especial en producci\u00f3n. Pero en 2016 el n\u00famero de manuscritos enviados descendi\u00f3 de 355 (recibidos el a\u00f1o anterior) a 274 (Fig. 1c). Hay indicios de que otra ca\u00edda se esperaria para este a\u00f1o.<\/p>\n

Por otra parte, el area de Ciencias Agrarias siempre fue bien clasificada en el sistema Qualis<\/em>. Est\u00e1n en el estrato superior (A2) y por eso los env\u00edos est\u00e1n aumentando al punto que el a\u00f1o pasado sobrepas\u00f3 a las Ciencias Biol\u00f3gicas (Fig.1d). Considerando la tasa hist\u00f3rica de env\u00edos de AABC, esto es un resultado altamente inesperado y parece haber pocas dudas de que el sistema Qualis<\/em> est\u00e9 detr\u00e1s de esto.<\/p>\n

Analicemos la rebaja que sufri\u00f3 AABC en Biodiversidad en 2013, de la que nunca se recuper\u00f3. \u00bfCu\u00e1l fue la raz\u00f3n para eso? El criterio principal para clasificar revistas en un cierto estrato era el FI (a pesar de los conocidos problemas de ese n\u00famero, vea la discusi\u00f3n en Casadevall et al. 20161<\/sup>). Con los altibajos habituales de este valor, AABC deber\u00eda haber ca\u00eddo del estrato A2 al B1 \u2013 \u00a1lo cual todav\u00eda es bastante atractivo para los autores en Brasil! Pero, dado que A1 + A2 + B1 no pueden superar el 50% del total de revistas evaluadas en ese a\u00f1o, el comit\u00e9 de evaluaci\u00f3n del \u00e1rea de Biodiversidad tuvo que hacer algunas \u201cdecisiones duras\u201d. Por eso, para producir menos \u201cda\u00f1o\u201d, las revistas donde menos investigadores del \u00e1rea hab\u00edan publicado art\u00edculos, fueron degradadas artificialmente para cumplir con la regla del 50% de CAPES. En otras palabras, aunque AABC ten\u00eda los n\u00fameros para una clasificaci\u00f3n mejor, esta revista hab\u00eda publicado menos art\u00edculos en Biodiversidad ese a\u00f1o comparado con otros, y fue \u201csacrificada\u201d por el \u201cbien general\u201d del \u00e1rea. Naturalmente, AABC siendo una revista multidisciplinaria, \u00a1no podr\u00eda jam\u00e1s publicar la misma cantidad de art\u00edculos que revistas con un enfoque m\u00e1s espec\u00edfico! En otra situaci\u00f3n he sido testigo de que suced\u00eda algo similar cuando estaba en el comit\u00e9 de evaluaci\u00f3n de CAPES \u2013 ni qu\u00e9 decir tengo de la mala sensaci\u00f3n que esto me caus\u00f3.<\/p>\n

Las reglas del 25% y del 50% de CAPES han sido cuestionadas seriamente por alg\u00fan tiempo, pero todav\u00eda se aplican. Las tentativas para mitigar los problemas no deseados causados por el sistema Qualis<\/em> nunca han llegado a AABC. Es comprensible, cada vez que un \u00e1rea tiene la posibilidad de seleccionar revistas para su beneficio, siempre seleccionar\u00e1 aquellas que publican m\u00e1s art\u00edculos en esa \u00e1rea espec\u00edfica. De ninguna manera AABC puede competir.<\/p>\n

En la vista publicada por Barata (2016)2<\/sup>, presentamos algunas cr\u00edticas del mal uso del sistema Qualis<\/em>. Sin embargo, deber\u00eda considerarse ingenuo no haber previsto que esto suceder\u00eda en varias circunstancias, incluyendo promociones. Por ejemplo, Barata (2016)2<\/sup> critica a los editores por el uso del r\u00e1nking Qualis<\/em> para obtener m\u00e1s financiaci\u00f3n para sus revistas. Sin embargo, el \u00faltimo anuncio de posibilidades de subvenci\u00f3n para revistas tanto del Conselho Nacional de Desenvolvimento Cient\u00edfico e Tecnol\u00f3gico<\/em> (CNPq) (Chamada<\/em> MCTIC\/CNPq N\u00ba 25\/2016) y CAPES (Edital<\/em> N\u00b0 13\/2016), claramente establecen que, para estar habilitada para aplicar, la revista debe estar por lo menos clasificada en el nivel B2 de la lista Qualis<\/em>. Tales contradicciones muestran la complejidad de la situaci\u00f3n.<\/p>\n

Aunque hay un reconocimiento general de las dificultades impuestas por el sistema Qualis<\/em> a las revistas multidisciplinarias, nada se ha hecho hasta ahora. Debido a su naturaleza y tama\u00f1o, AABC no ofrece competencia a ninguna revista publicada en Brasil, dado que nunca ser\u00edamos capaces de publicar todos los buenos trabajos que un \u00e1rea espec\u00edfica produce. Por eso, deber\u00eda tomarse una acci\u00f3n afirmativa en el caso de AABC en lo que respecta al sistema Qualis<\/em>.<\/p>\n

Esta es la \u00fanica manera por la que el pa\u00eds, que sufre de \u201cQualisitis<\/em>\u201d (= obsesi\u00f3n en el uso del sistema Qualis<\/em> para varias evaluaciones, induciendo la decisi\u00f3n de los autores sobre d\u00f3nde enviar sus manuscritos) podr\u00eda aspirar a publicar una revista multidisciplinaria m\u00e1s s\u00f3lida. Si no se realiza tal acci\u00f3n para fomentar a la revista de la Academia Brasile\u00f1a de Ciencias, entonces \u00bfpara qu\u00e9 otra?<\/p>\n

Notes<\/h3>\n

1. CASADEVALL, A., et al<\/em>. ASM journals eliminate Impact Factor information from journal websites. J Clin Microbiol<\/em> [online]. 2016, vol. 54, no. 9, pp. 2216-2217 [viewed 30 September 2017]. DOI: 10.1128\/JCM.01418-16<\/a>. Available from: http:\/\/jcm.asm.org\/content\/54\/9\/2216.full<\/a><\/p>\n

2. BARATA, R.C.B. Dez coisas que voc\u00ea deveria saber sobre o Qualis. Revista Brasileira de P\u00f3s-Gradua\u00e7\u00e3o <\/em>[online]. 2016, vol. 13, no. 30, pp. 13-40, ISSN: 2358-2332 [viewed 30 September 2017]. DOI: 10.21713\/2358-2332.2016.v13.947<\/a>. Available from: http:\/\/ojs.rbpg.capes.gov.br\/index.php\/rbpg\/article\/view\/947<\/a><\/p>\n

References<\/h3>\n

ANDRADE, J.B. and GALEMBECK, F. Qualis: Quo Vadis? Qu\u00edm. Nova<\/em> [online]. 2009, vol. 32, no. 1, pp. 5. ISSN: 1678-7064 [viewed 30 September 2017]. DOI: 10.1590\/S0100-40422009000100001<\/a>. Available from: http:\/\/ref.scielo.org\/syf44r<\/a><\/p>\n

BARATA, R.C.B. Dez coisas que voc\u00ea deveria saber sobre o Qualis. Revista Brasileira de P\u00f3s-Gradua\u00e7\u00e3o <\/em>[online]. 2016, vol. 13, no. 30, pp. 13-40, ISSN: 2358-2332 [viewed 30 September 2017]. DOI: 10.21713\/2358-2332.2016.v13.947<\/a>. Available from: http:\/\/ojs.rbpg.capes.gov.br\/index.php\/rbpg\/article\/view\/947<\/a><\/p>\n

CABRAL FILHO, J.E. The CAPES Qualis and beyond. Rev. Bras. Sa\u00fade Matern. Infant<\/em>. [online]. 2010, vol. 10, no. 4, pp. 403-406, ISSN: 1806-9304 [viewed 30 September 2017]. DOI: 10.1590\/S1519-38292010000400001<\/a>. Available from: http:\/\/ref.scielo.org\/j5y4mc<\/a><\/p>\n

CASADEVALL, A., et al<\/em>. ASM journals eliminate Impact Factor information from journal websites. J Clin Microbiol<\/em> [online]. 2016, vol. 54, no. 9, pp. 2216-2217 [viewed 30 September 2017]. DOI: 10.1128\/JCM.01418-16<\/a>. Available from: http:\/\/jcm.asm.org\/content\/54\/9\/2216.full<\/a><\/p>\n

FERREIRA, R.C., ANTONELI, F. and BRIONES, M.R.S. The hidden factors in impact factors: a perspective from Brazilian science. Frontiers in Genetics<\/em> [online]. 2013, vol. 4, ISSN: 1664-8021 [viewed 30 September 2017]. DOI: 10.3389\/fgene.2013.00130<\/a>. Available from: https:\/\/www.frontiersin.org\/articles\/10.3389\/fgene.2013.00130\/full<\/a><\/p>\n

ROCHA-E-SILVA, M. O novo Qualis, que n\u00e3o tem nada a ver com a ci\u00eancia do Brasil. Carta aberta ao presidente da CAPES. Clinics<\/em> [online]. 2009, vol. 64, no. 8, pp. 721-724, ISSN: 1980-5322 [viewed 30 September 2017]. DOI: 10.1590\/S1807-59322009000800002<\/a>. Available from: http:\/\/ref.scielo.org\/2wq6qy<\/a><\/p>\n

SANTOS, M.A. Paid\u00e9ia consagra-se como revista A1 no Qualis Peri\u00f3dico CAPES. Paid\u00e9ia<\/em> [online]. 2012, vol. 22, no. 51, pp. 1-4, ISSN: 0103-863X [viewed 30 September 2017]. DOI: 10.1590\/S0103-863X2012000100001<\/a>. Available from: http:\/\/ref.scielo.org\/cktm5g<\/a><\/p>\n

Para leer el editorial, vaya a:<\/h3>\n

KELLNER, A.W.A. The Qualis system: a perspective from a multidisciplinary journal. An. Acad. Bras. Ci\u00eanc.<\/em> [online]. 2017, vol<\/span>. 89, no. 3, pp. 1339-1342, ISSN: 1678-2690. DOI: 10.1590\/0001-37652017893<\/a>. Available from: http:\/\/ref.scielo.org\/p5h8w5<\/a><\/p>\n

 <\/p>\n

Sobre Alexander W.A. Kellner\"\"<\/a><\/h3>\n

Profesor Titular y miembro de la Academia Brasilera de Ci\u00eancias<\/em>, es editor jefe de los AABC. Realiz\u00f3 el doctorado en la Columbia University<\/em> (Nueva York) y act\u00faa en el Museu Nacional<\/em>\/UFRJ, para el cual fue elegido director (2018-2022). Desarrolla investigaciones en el \u00e1rea de paleontolog\u00eda, en especial la evoluci\u00f3n y diversificaci\u00f3n de reptiles f\u00f3siles, sobre todo dinosaurios y pterosaurios (vertebrados alados). Adem\u00e1s de diferentes regiones brasile\u00f1as, realiz\u00f3 actividades de campo en pa\u00edses como Ant\u00e1rtida, Ir\u00e1n, China, Argentina y Chile.<\/p>\n

 <\/p>\n

\n

Traducido del original en\u00a0ingl\u00e9s\u00a0por Ernesto Spinak.<\/p>\n<\/div>\n","protected":false},"excerpt":{"rendered":"

El sistema Qualis<\/i> de evaluaci\u00f3n de revistas de CAPES penaliza el desarrollo de revistas multidisciplinares como los Anais da Academia Brasileira de Ci\u00eancia<\/i> (AABC). Presente en 39 de las casi 40 \u00e1reas de evaluaci\u00f3n, el ranking de los Anais<\/i> var\u00eda del estrato A2 a B5. Cuando el Qualis<\/i> rebaja el ranking de los Anais<\/i> en una determinada disciplina ocurre inmediatamente una disminuci\u00f3n en los env\u00edos recibidos, afectando la evoluci\u00f3n de la revista y la gesti\u00f3n editorial a medio y largo plazo. En el editorial, el editor jefe de los AABC reivindica acciones afirmativas para calificar la investigaci\u00f3n de Brasil con una revista multidisciplinar de calidad. …<\/span> Read More →<\/span><\/a><\/span><\/p>\n","protected":false},"author":5,"featured_media":2616,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":"standard","meta":{"om_disable_all_campaigns":false,"_monsterinsights_skip_tracking":false,"_monsterinsights_sitenote_active":false,"_monsterinsights_sitenote_note":"","_monsterinsights_sitenote_category":0,"footnotes":"","_links_to":"","_links_to_target":""},"categories":[3],"tags":[28,7,32,41],"class_list":["post-2613","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-analisis","tag-agencia-de-apoyo-a-la-investigacion","tag-comunicacion-cientifica","tag-politica-de-apoyo-a-la-investigacion","tag-politicas-publicas"],"aioseo_notices":[],"_links":{"self":[{"href":"https:\/\/blog.scielo.org\/es\/wp-json\/wp\/v2\/posts\/2613","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/blog.scielo.org\/es\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/blog.scielo.org\/es\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/blog.scielo.org\/es\/wp-json\/wp\/v2\/users\/5"}],"replies":[{"embeddable":true,"href":"https:\/\/blog.scielo.org\/es\/wp-json\/wp\/v2\/comments?post=2613"}],"version-history":[{"count":6,"href":"https:\/\/blog.scielo.org\/es\/wp-json\/wp\/v2\/posts\/2613\/revisions"}],"predecessor-version":[{"id":2624,"href":"https:\/\/blog.scielo.org\/es\/wp-json\/wp\/v2\/posts\/2613\/revisions\/2624"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/blog.scielo.org\/es\/wp-json\/wp\/v2\/media\/2616"}],"wp:attachment":[{"href":"https:\/\/blog.scielo.org\/es\/wp-json\/wp\/v2\/media?parent=2613"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/blog.scielo.org\/es\/wp-json\/wp\/v2\/categories?post=2613"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/blog.scielo.org\/es\/wp-json\/wp\/v2\/tags?post=2613"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}