JCR, Kafka e MAI!

Por Alexander W.A. Kellner

O que você faria se, na posição de editor de um periódico científico, descobrisse que quase um quarto dos artigos de um determinado fascículo simplesmente sumiu da plataforma do Jornal Citation Reports (JCR), no ano que sai o novo fator de impacto (IF, Impact Factor)?

Foi exatamente isso que aconteceu durante um levantamento que estávamos fazendo sobre a contribuição das Ciências Agrárias nos índices bibliométricos dos Anais da Academia Brasileira de Ciências (AABC). Como é de conhecimento geral, os AABC formam a única revista científica editada no Brasil considerada multidisciplinar no sentido mais amplo do termo, publicando desde descobertas de novas espécies atuais e extintas até estudos sobre questões sociais de populações indígenas, passando por artigos de ciências matemáticas, químicas e biomédicas – para destacar algumas áreas. Em um determinado momento, houve um aumento muito grande na submissão de manuscritos voltados às Ciências Agrárias nos AABC, talvez uma consequência da “Qualisites” (essa já é outra história, veja a nota editorial The Qualis system: a perspective from a multidisciplinary journal¹) e a ideia era fazer uma análise de como esse aumento se refletiu nos índices da revista, a partir de um volume que reuniu de forma aleatória artigos da área.

Qual foi a nossa surpresa ao descobrir que, dos 64 artigos publicados, 15 simplesmente não estavam listados no JCR de 2019, que acaba de ser publicado. E o pior: esses 15 também não se encontravam no Web of Science (WoS). Essa é a segunda vez que isso ocorre com os AABC. Quando artigos “somem” do JCR, isso significa que eles não são computados no cálculo do IF da revista. Mas quando somem do WoS, eles também deixam de contar para a performance dos autores, tal como o índice h! Na ocasião anterior, depois de muita reclamação, conseguimos que os artigos aparecessem no WoS, mas não no JCR, penalizando o periódico (A closer look at the Impact Factor (JCR 2012): problems, concerns and actions needed²). Um sentimento kafkiano no sentido mais puro da expressão para qualquer editor…

Porém, no mundo do “bakery effect“, em que os índices vieram para ficar (por exemplo, Compendium of Bibliometric Science Indicators³), editores têm que se adaptar. Assim, criamos um novo índice – MAI, Missing Article Index –, que procura avaliar o efeito da não-citação para um periódico científico. Não era algo que havia sido planejado, mas o ponto é que a exclusão de artigos no JCR é real, tem efeitos negativos para a performance do periódico e deve ser investigado mais a fundo (Development of Agrarian Sciences at the AABC with comments on impact and performance evaluations⁴).

Na análise⁴ são apresentados alguns procedimentos que podem auxiliar na avaliação da contribuição de temas ou volumes específicos para os índices bibliométricos de um determinado periódico.

Notas

1. KELLNER, A.W.A. The Qualis system: a perspective from a multidisciplinary journal. An Acad Bras Cienc [online]. 2017, vol. 89, no. 3, pp. 1339-1342, ISSN: 1678-2690 [viewed 5 August 2020]. DOI: 10.1590/0001-37652017893. Available from: http://ref.scielo.org/dk3vt5

2. KELLNER, A.W.A. and AZEVEDO, R.A. A closer look at the Impact Factor (JCR 2012): problems, concerns and actions needed. An Acad Bras Cienc [online]. 2013, vol. 85, no. 3, pp. 859-862, ISSN: 1678-2690 [viewed 5 August 2020]. DOI: 10.1590/S0001-37652013000300001. Available from: http://ref.scielo.org/28yhx6

3. OECD and SCIMAGO RESEARCH GROUP (CSIC). Compendium of Bibliometric Science Indicators [online]. OEC. 2016 [viewed 5 August 2020]. Available from: http://www.oecd.org/sti/inno/Bibliometrics-Compendium.pdf

4. KELLNER, A.W.A. Development of Agrarian Sciences at the AABC with comments on impact and performance evaluations. An Acad Bras Cienc [online]. 2020, vol. 92, suppl. 1, e202092S1, ISSN: 1678-2690 [viewed 5 August 2020]. DOI: 10.1590/0001-3765202092S1. Available from: http://ref.scielo.org/8md682

Referências

KELLNER, A.W.A. and AZEVEDO, R.A. A closer look at the Impact Factor (JCR 2012): problems, concerns and actions needed. An Acad Bras Cienc [online]. 2013, vol. 85, no. 3, pp. 859-862, ISSN: 1678-2690 [viewed 5 August 2020]. DOI: 10.1590/S0001-37652013000300001. Available from: http://ref.scielo.org/28yhx6

KELLNER, A.W.A. and PONCIANO, L.C.M.O. H-index in the Brazilian Academy of Sciences – comments and concerns. An Acad Bras Cienc [online]. 2008, vol. 80, no. 4, pp. 771-781, ISSN: 1678-2690 [viewed 5 August 2020]. DOI: 10.1590/S0001-37652008000400016. Available from: http://ref.scielo.org/3m8xzr

KELLNER, A.W.A. Development of Agrarian Sciences at the AABC with comments on impact and performance evaluations. An Acad Bras Cienc [online]. 2020, vol. 92, suppl. 1, e202092S1, ISSN: 1678-2690 [viewed 5 August 2020]. DOI: 10.1590/0001-3765202092S1. Available from: http://ref.scielo.org/8md682

KELLNER, A.W.A. The Qualis system: a perspective from a multidisciplinary journal. An Acad Bras Cienc [online]. 2017, vol. 89, no. 3, pp. 1339-1342, ISSN: 1678-2690 [viewed 5 August 2020]. DOI: 10.1590/0001-37652017893. Available from: http://ref.scielo.org/dk3vt5

OECD and SCIMAGO RESEARCH GROUP (CSIC). Compendium of Bibliometric Science Indicators [online]. OEC. 2016 [viewed 5 August 2020]. Available from: http://www.oecd.org/sti/inno/Bibliometrics-Compendium.pdf

Links externos

Anais da Academia Brasileira de Ciências – AABC <http://www.scielo.br/aabc>

Sobre Alexander W.A. Kellner

Professor Titular e membro da Academia Brasileira de Ciências, é editor-chefe dos AABC. Realizou doutorado na Columbia University (Nova York) e atua no Museu Nacional/UFRJ, para qual foi eleito diretor (2018-2022). Desenvolve pesquisas na área de paleontologia, em especial a evolução e diversificação de répteis fósseis, sobretudo dinossauros e pterossauros (vertebrados alados). Além de diferentes regiões brasileiras, realizou atividades de campo em países como Antártica, Irã, China, Argentina e Chile.