-
A Transparência como Condição para o Uso de Inteligência Artificial na Avaliação de Tecnologias em Saúde: uma revisão de escopo
- Voltar
Título
A Transparência como Condição para o Uso de Inteligência Artificial na Avaliação de Tecnologias em Saúde: uma revisão de escopo
Tipo de documento
Resumo
Descrição
Documento publicado na Rebrats (Rede Brasileira de Avaliação de Tecnologias em Saúde) que sintetiza informações, evidências e resultados de estudos ou avaliações em saúde, facilitando a compreensão e o acesso ao conhecimento científico.
Fonte
Rebrats
Ano de publicação
2023
Referência (Vancouver)
Komoda DS, Cardoso MMAC, Fernandes BD, Visacri MB, Correa CRS. A Transparência como Condição para o Uso de Inteligência Artificial na Avaliação de Tecnologias em Saúde: uma revisão de escopo. J Assist Farmac Farmacoecon. 2024;9(Suppl. 1).
DOI
10.22563/2525-7323.2024.v9.s1.p.84
Identificador
2023REB060
Title
Transparency as a Requirement for Using Artificial Intelligence in Health Technology Assessment: A Scoping Review
Document type
Summary
Description
A document published by Rebrats (Brazilian Network for Health Technology Assessment) that synthesizes information, evidence, and results from health studies or assessments, facilitating understanding of and access to scientific knowledge.
Source
Rebrats
Year of publication
2023
Reference (Vancouver)
Komoda DS, Cardoso MMAC, Fernandes BD, Visacri MB, Correa CRS. A Transparência como Condição para o Uso de Inteligência Artificial na Avaliação de Tecnologias em Saúde: uma revisão de escopo. J Assist Farmac Farmacoecon. 2024;9(Suppl. 1).
DOI
10.22563/2525-7323.2024.v9.s1.p.84
Identifier
2023REB060
Resumo
Introdução: Nos últimos anos, o uso da Inteligência Artificial (IA) vem se expandindo para todos os campos do conhecimento, incluindo a Avaliação de Tecnologias em Saúde (ATS), com destaque para a síntese de evidências. Entre os possíveis benefícios do uso da IA em ATS encontram-se, grosso modo, a aceleração dos processos, e a otimização de recursos humanos especializados, dois dos desafios da ATS apontados por O’Rourke et al. em 2019. No entanto, como aponta Zemplényi et al. 2023 é necessário que se estruture a confiança em modelos de IA, a do desenvolvimento de modelos com métodos trans-parentes e acessíveis, a fim de garantir rigor metodológico e confiabilidade nos resultados. Esta revisão de escopo tem como objetivo mapear a literatura científica sobre o uso IA aplicada à ATS, apresentar os modelos e algoritmos utilizados, e discutir suas implicações metodológicas.Métodos: Em maio de 2023 foi realizada uma estratégia de busca associando-se os termos “Health Technology Assessment” e “Artificial Intelligence”, e termos equivalentes, em nove bases de dados. Os critérios de inclusão, conforme o acrônimo PCC foram publicação relacionada à saúde humana (Popu-lação), em que a IA (Conceito) foi utilizada em ATS (Contexto), sem restrições de data e língua. Foram excluídos artigos em que a IA foi empregada como ferramenta assistencial, como por exemplo, cirurgia robótica e diagnóstico por imagens. Foram extraídas características das publicações, das técnicas dos modelos e das fases de ATS. A seleção e a extração foram realizadas por pares independentes. Os dados foram sintetizados por meio de análises de frequência sobre as fases ATS em que a IA foi utilizada e sobre os aspectos técnicos da IA.Resultados: A estratégia de busca gerou 1326 registros, dos quais 78 correspondiam aos critérios de inclusão. Destes, 57 (73%) estudos avaliaram a performance de modelos. Quanto aos processos de ATS, 41 (65%) tratavam da fase de seleção de artigos, oito da avaliação de risco de viés, e sete da extração de dados. Apenas um estudo abordou fases não relacionadas à síntese de evidências (moni-toramento pós implementação). Não foram encontrados artigos sobre outros processos envolvidos na avaliação econômica ou na tomada de decisão. Em relação aos aspectos técnicos da IA, modelos mais simples baseados em algoritmos de ML como “support vector machine” e “árvores de decisão” foram os mais utilizados, além do modelo “bag of words” para o pré-processamento dos dados. Quanto à acessibilidade, apenas quatro modelos apresentavam código aberto.Discussão e conclusões: A literatura atual mostra que o uso da IA na ATS se concentra na síntese de evidências, principalmente seleção de artigos, possivelmente pela menor complexidade que esta fase exige, o que possibilita o uso de modelos mais simples e acessíveis, tanto no pré-processamento de textos quanto na etapa de classificação. Já a avaliação de risco de viés, cujo pré-processamento dos textos apresenta maior complexidade, foi menos explorada. Podemos assim observar que a necessidade de transparência nos métodos em ATS é um dos grandes desafios para a aplicação da IA em etapas como avaliação econômica e monitoramento de horizonte tecnológico, cujos métodos e particularidades exigiriam modelos de aprendizagem mais autônomos, como “neural network” e “deep learning”, mas que intrinsecamente apresentam menor transparência. Por fim, salienta-se que a confidencialidade dos códigos algorítmicos é contrária ao rigor metodológico necessário à ATS.
Palavras-chave
Avaliação de tecnologias em saúde | Inteligência Artificial | Síntese de Eviências
Observações
O registro foi originalmente publicado no idioma nativo em Português. As traduções foram geradas por inteligência artificial para o idioma Inglês.
Abstract
Introduction: In recent years, the use of Artificial Intelligence (AI) has been expanding to all fields of knowledge, including Health Technology Assessment (HTA), with an emphasis on evidence synthesis. Among the possible benefits of using AI in HTA are, broadly speaking, the acceleration of processes and the optimization of specialized human resources, two of the HTA challenges highlighted by O'Rourke et al. in 2019. However, as pointed out by Zemplényi et al. 2023, it is necessary to structure trust in AI models, the development of models with transparent and accessible methods, in order to ensure methodological rigor and reliability in the results. This scoping review aims to map the scientific literature on the use of AI applied to HTA, present the models and algorithms used, and discuss their methodological implications. Methods: In May 2023, a search strategy was carried out associating the terms “Health Technology Assessment” and “Artificial Intelligence”, and equivalent terms, in nine databases. The inclusion criteria, according to the acronym PCC, were publications related to human health (Population), in which AI (Concept) was used in HTA (Context), without date and language restrictions. Articles in which AI was used as an assistance tool, such as robotic surgery and imaging diagnosis, were excluded. Characteristics of the publications, model techniques, and HTA phases were extracted. Selection and extraction were performed by independent pairs. The data were synthesized through frequency analyses of the HTA phases in which AI was used and of the technical aspects of AI. Results: The search strategy generated 1,326 records, of which 78 met the inclusion criteria. Of these, 57 (73%) studies evaluated model performance. Regarding HTA processes, 41 (65%) dealt with the article selection phase, eight with the risk of bias assessment, and seven with data extraction. Only one study addressed phases unrelated to evidence synthesis (post-implementation monitoring). No articles were found on other processes involved in economic evaluation or decision-making. Regarding the technical aspects of AI, simpler models based on ML algorithms such as “support vector machine” and “decision trees” were the most used, in addition to the “bag of words” model for data preprocessing. Regarding accessibility, only four models were open source. Discussion and conclusions: Current literature shows that the use of AI in HTA focuses on evidence synthesis, mainly article selection, possibly due to the lower complexity required by this phase, which allows the use of simpler and more accessible models, both in text preprocessing and in the classification stage. The assessment of risk of bias, whose text preprocessing is more complex, was less explored. We can thus observe that the need for transparency in HTA methods is one of the major challenges for the application of AI in stages such as economic assessment and technological horizon monitoring, whose methods and particularities would require more autonomous learning models, such as “neural networks” and “deep learning”, but which intrinsically present less transparency. Finally, it is emphasized that the confidentiality of algorithmic codes is contrary to the methodological rigor necessary for HTA.
Observation
The record was originally published in its native language, Portuguese. The translations were generated by artificial intelligence into English.