Diálogos com literatura científica alimentados por IA: uma nova abordagem para análise de risco de viés usando ROB 2 em artigos em PDF
Tipo de documento
Resumo
Descrição
Resumo apresentado na conferência anual da Global Evidence Summit (GEN)
Fonte
GES
Ano de publicação
2024
Referência (Vancouver)
Pedrosa MR, Silva AA, Maruyama EK, Facundo de Matos Alves WE, Sugino RG, Souza GG, et al. AI-Powered Dialogues with Scientific Literature: A Novel Approach to Risk of Bias Analysis Using ROB 2 in PDF Articles. In: Abstracts of the 2nd Global Evidence Summit; 2024 Sep 10-13; Prague, Czech Republic. Cochrane Database Syst Rev. 2024;(1 Suppl 1):P126.
AI-Powered Dialogues with Scientific Literature: A Novel Approach to Risk of Bias Analysis Using ROB 2 in PDF Articles
Document type
Abstract
Description
Abstract presented at the Global Evidence Summit (GEN) annual conference
Source
GES
Publication year
2024
Reference (Vancouver)
Pedrosa MR, Silva AA, Maruyama EK, Facundo de Matos Alves WE, Sugino RG, Souza GG, et al. AI-Powered Dialogues with Scientific Literature: A Novel Approach to Risk of Bias Analysis Using ROB 2 in PDF Articles. In: Abstracts of the 2nd Global Evidence Summit; 2024 Sep 10-13; Prague, Czech Republic. Cochrane Database Syst Rev. 2024;(1 Suppl 1):P126.
Métodos: Nossa pesquisa abrange o desenvolvimento de um sistema de diálogo interativo orientado por IA projetado para analisar autonomamente documentos PDF, identificar e extrair dados críticos e articular respostas a consultas do RoB 2 em linguagem natural. O sistema expande ainda mais os usuários ao permitir o envio de feedback, fazer perguntas para esclarecimento e solicitar explicações sobre suas respostas geradas. Resultados: a eficácia de nossa solução orientada por IA proposta foi rigorosamente avaliada aplicando-a a uma tarefa específica e comparando seu desempenho com o de um sistema convencional baseado em metodologias de busca por palavras-chave primárias. A análise comparativa, completamente documentada na tabela anexa, incorpora insights de uma referência crítica da Cochrane, Exercício físico para pessoas com doença de Parkinson: uma revisão sistemática e meta-análise de rede (Revisão). Nossa avaliação baseia-se em descobertas de um artigo pertinente, "Exercício de caminhada rápida e equilíbrio baseado na comunidade de seis meses alivia sintomas motores e promove funções em pessoas com doença de Parkinson: ensaio clínico randomizado" por Margaret KY Mak e Irene SK Wong-Yu. Esta inclusão não apenas enriquece nossa análise, mas também situa nossa abordagem aprimorada por IA dentro do contexto de pesquisas existentes de alta qualidade sobre a doença de Parkinson, demonstrando seu potencial para agilizar e aumentar a precisão das avaliações de risco de viés. Conclusão: métricas de desempenho, incluindo precisão, integridade, coerência de respostas, satisfação do usuário e utilidade percebida, foram empregadas para avaliar a eficácia de ambos os sistemas. As descobertas revelam que o sistema de diálogo aprimorado por IA supera o modelo tradicional baseado em palavras-chave em todos os parâmetros avaliados. Os resultados ressaltam o potencial transformador dos diálogos facilitados por IA na condução da análise RoB, alavancando a estrutura RoB 2, estabelecendo assim um novo precedente para eficiência e precisão na avaliação de pesquisa científica.
Notas
O registro foi originalmente publicado em inglês. A versão em português foi traduzida com o apoio de inteligência artificial.
Abstract
Methods: Our research encompasses the development of an AI-driven interactive dialogue system designed to autonomously parse PDF documents, identify, and extract critical data, and articulate responses to RoB 2 inquiries in natural language. system further users by allowing feedback submission, posing questions for clarification, and soliciting explanations regarding its generated responses. Results: efficacy of our proposed AI-driven solution was rigorously evaluated by applying it to a specific task and comparing its performance with that of a conventional system grounded in primary keyword search methodologies. comparative analysis, thoroughly documented in accompanying table, incorporates insights from a critical Cochrane reference, Physical exercise for people with Parkinson’s disease: a systematic review and network meta-analysis (Review). our evaluation draws upon findings from a pertinent article, ""Six-Month Community-Based Brisk Walking and Balance Exercise Alleviates Motor Symptoms and Promotes Functions in People with Parkinson’s Disease: Randomized Controlled Trial,"" by Margaret K.Y. Mak and Irene S.K. Wong-Yu. This inclusion not only enriches our analysis but also situates our AI-enhanced approach within the context of existing, high-quality research on Parkinson’s disease, demonstrating its potential to streamline and enhance the accuracy of risk of bias assessments. Conclusion: performance metrics, including accuracy, completeness, coherence of responses, user satisfaction and perceived utility, were employed to gauge the effectiveness of both systems. findings reveal that the AI-enhanced dialogue system surpasses traditional keyword-based model across all evaluated parameters. results underscore the transformative potential of AI-facilitated dialogues in conducting RoB analysis, leveraging the RoB 2 framework, thereby setting a new precedent for efficiency and precision in scientific research evaluation.
Notes
The record was originally published in English. The Portuguese version was translated with the support of artificial intelligence.
