O aplicativo ChatGPT-3 é consultado sobre quatro tópicos em discussão para a produção de textos acadêmicos aceitáveis para editores de periódicos científicos. Cada pergunta é seguida pela resposta dada pelo próprio aplicativo do OpenAI e, em seguida, por nossa avaliação, consultando fontes recentes publicadas na Internet. Por fim, são apresentadas algumas reflexões (humanas) que, como todas as coisas, estão sujeitas a discussão ou mudanças provocadas pelo avanço da tecnologia. … Read More →
ChatGPT e outras IAs transformarão toda a pesquisa científica: reflexões iniciais sobre usos e consequências – parte 2
Nesta segunda parte do ensaio, buscamos apresentar riscos que surgem em especial na utilização da IA generativa no campo científico e no fazer acadêmico. Embora todos os problemas não estejam sequer completamente mapeados, buscamos oferecer reflexões iniciais para subsidiar e fomentar o debate. … Read More →
ChatGPT e outras IAs transformarão toda a pesquisa científica: reflexões iniciais sobre usos e consequências – parte 1
Discutimos algumas possíveis consequências, riscos e paradoxos no uso de IAs para a pesquisa, tais como potencial deterioração da integridade da pesquisa, possíveis modificações nas dinâmicas de produção de conhecimento e nas relações centro-periferia no ambiente acadêmico. Concluímos demandando por um diálogo aprofundado sobre regulação e criação de tecnologias adaptadas às nossas necessidades. … Read More →
Inteligência Artificial e a comunicação da pesquisa
Chatbots são realmente autores de artigos científicos? Podem ser legalmente responsáveis, tomar decisões éticas? O que dizem as sociedades científicas, editores de periódicos, universidades? Seus resultados podem ser incluídos em artigos científicos originais? Com base na contribuição que hoje apresentamos, publicaremos posts que tentarão responder a estas questões e às novas que surgirem. … Read More →
GPT, tradução automática e o quão bons eles são: uma avaliação abrangente
Os modelos de inteligência artificial generativa demonstraram capacidades notáveis para geração de linguagem natural, mas seu desempenho para tradução automática não foi investigado minuciosamente. Apresenta-se uma avaliação abrangente dos modelos GPT para tradução, em comparação com os sistemas comerciais e de pesquisa mais avançados, incluindo NMT, testada com textos em 18 idiomas. … Read More →
Artigos não citados e a dispersão de citações na literatura científica
Questionando a lei de Bradford, cuja interpretação em bibliometria reza que a maioria das citações se concentra em poucos periódicos e artigos, um estudo recente evidencia a importância dos artigos não citados e sua influência na concentração de citações. Para os autores, artigos não citados devem ser incluídos na análise para fornecer uma compreensão mais abrangente dos padrões de citação através do tempo, disciplinas e regiões geográficas. … Read More →
Reprodução e replicação na pesquisa científica – parte 3
Reprodutibilidade e replicabilidade são questões centrais quando se discute a confiabilidade da pesquisa científica. A tentativa de um segundo pesquisador de replicar um estudo anterior é um esforço para determinar se a aplicação dos mesmos métodos à mesma questão científica produz resultados semelhantes. Nas ciências sociais e humanas, no entanto, não se trata dos mesmos paradigmas. … Read More →
Reprodução e replicação na pesquisa científica – parte 2
Nesta segunda nota sobre o assunto, abordaremos as diretrizes propostas em 2019 pela NASEM. Analisaremos como a replicabilidade é entendida em diferentes disciplinas científicas, principalmente nas ciências experimentais, com base em um paradigma computacional. Da mesma forma, veremos opiniões de outras disciplinas relacionadas às ciências sociais e à medicina, que não participam dos mesmos paradigmas epistemológicos. … Read More →
Reprodução e replicação na pesquisa científica – parte 1
A replicabilidade é uma questão central quando se discute a confiabilidade da pesquisa científica que se renova na promoção da ciência aberta. A tentativa de um segundo pesquisador de replicar um estudo anterior é um esforço para determinar se a aplicação dos mesmos métodos à mesma questão científica produz resultados semelhantes. … Read More →
Mapeamento da produção em análise de conteúdo no SciELO Brasil indica uma técnica que parou no tempo
Uma revisão cientométrica sobre o uso da análise de conteúdo no SciELO-Brasil demonstrou uma notável concentração de citações do manual de Laurence Bardin, cujo uso se mantém crescente. Como a obra não teve atualizações nas últimas duas décadas, podemos dizer que o uso da técnica pode estar parado no tempo. … Read More →
É preciso um corpo para entender o mundo – por que o ChatGPT e outras IAs de linguagem não sabem o que dizem [Publicado originalmente no The Conversation em abril/2023]
Os grandes modelos de linguagem não conseguem entender a linguagem da mesma forma que os humanos, porque não conseguem perceber e dar sentido ao mundo. … Read More →
Reformular a avaliação por pares para torná-la sustentável
Um artigo publicado recentemente discute a necessidade de profunda reformulação da avaliação por pares, pois o atual modelo demonstra não ser mais sustentável. Editores de periódicos têm dificuldades para encontrar pareceristas dispostos a revisar artigos submetidos, pesquisadores discutem maior reconhecimento ou até mesmo remuneração para atuar como pareceristas. Entre as inúmeras alternativas propostas, a abertura da avaliação por pares se apresenta como a alternativa mais factível. … Read More →
Como a avaliação por pares de preprints pode fazer parte de programas de doutorado e pós-doutorado
Considerando o significativo crescimento do uso de preprints em comunicação científica, bem como o surgimento de servidores de preprints em todas as áreas do conhecimento, Richard Sever, diretor assistente do CSHL Press, propõe que a avaliação (pós-publicação) de preprints seja utilizada para complementar a formação de doutores e pós-doutores em instituições acadêmicas. … Read More →
A falta de planos de sustentabilidade para serviços de preprints põe em risco o seu potencial para aprimorar a ciência [Publicado originalmente no LSE Impact Blog em março/2023]
Durante a pandemia da COVID-19, os servidores de preprints se tornaram um mecanismo vital para o rápido compartilhamento e avaliação de pesquisa essencial. Contudo, ao discutir as conclusões de um recente informe, Naomi Penfold descobre que grande parte da infraestrutura de apoio à publicação não comercial de preprints é gerida precariamente e corre o risco de ser adquirida por publishers comerciais. … Read More →
Embaralhe as cartas e distribua novamente
A pesquisa deve ser bem planejada, realizada corretamente e relatada de forma clara e transparente, pois a confiabilidade dos resultados depende do rigor do desenho experimental. No entanto, nos informes publicados parece haver um descompromisso dos responsáveis por avaliar a qualidade da pesquisa. Especialistas apontaram que as atuais estruturas de incentivo nas instituições de pesquisa não incentivam suficientemente os pesquisadores a investir em solidez e transparência, ao invés, os incentivam a otimizar sua aptidão na luta por publicações e financiamentos. Na última década, estudos de replicação em larga escala mostraram que a reprodutibilidade está longe de ser favorável em vários campos científicos, e práticas de pesquisa questionáveis estão se tornando mais prevalentes. Claramente algo não está funcionando no empreendimento científico. … Read More →
Últimos comentários