Otimização da auditoria interna de prontuários cirúrgicos: uma abordagem com IA
DOI:
https://doi.org/10.59681/2175-4411.v17.2025.1478Palavras-chave:
Auditoria hospitalar, Inteligência Artificial, Aprendizado de máquinaResumo
Objetivo: O objetivo foi desenvolver um assistente de auditoria hospitalar baseado em Inteligência Artificial Generativa, capaz de analisar e classificar informações dos prontuários cirúrgicos, para apoiar os procedimentos de auditoria interna no Hospital das Clínicas da Universidade Federal de Pernambuco (HC-UFPE). Métodos: A metodologia envolveu o treinamento de um modelo amplo de linguagem (LLM) com dados validados por especialistas, seguido da avaliação do seu desempenho por meio de sensibilidade, especificidade, índice Kappa e Área sob a curva ROC. A base de dados utilizada foi o Aplicativo de Gestão para Hospitais Universitários (AGHU), de onde os dados foram extraídos em formato json, após pré-processamento e tratamento no software Metabase. Foi adotado o ecossistema da OpenAI através da personalização do ChatGPT, modelo GPT-4o. Foi utilizada a técnica de prompt engineering, seguido pela técnica de fine-tuning no processo de treinamento. Resultados: Os resultados obtidos no desenvolvimento do assistente virtual para auditoria hospitalar demonstraram sensibilidade de 96,8%, especificidade de aproximadamente 77%, índice Kappa de 0,78 e AUC ROC de 86,95%, indicando que o modelo é capaz de analisar prontuários com alta precisão. Os resultados demonstraram que o assistente consegue replicar eficazmente avaliações humanas, evidenciando potencial significativo para transformar a prática de auditoria hospitalar. Conclusão: conclui-se que o assistente de auditoria hospitalar pode otimizar processos do setor proposto, promovendo apoio, segurança, precisão e abrangência na auditoria de prontuários.
Downloads
Referências
Pinheiro MB, Campos RKGG, Maniva SJC de F, Rolim KMC, Bonfim IM. Tecnologias disponíveis para o processo de auditoria interna em classificação de risco: revisão integrativa. Rev Bras Pesqui Em SaúdeBrazilian J Health Res. 2023;25(4):81–8.
Jacomini LDS, Mangiavacchi BM. AUDITORIA HOSPITALAR COMO INSTRUMENTO NA PREVENÇÃO DE ERROS MEDICAMENTOSOS. Múltiplos Acessos. 9 de junho de 2021;6(1):199–207.
Ceretta JC, Seibert RM, Callegaro ARC. Gestão hospitalar: a auditoria operacional como ferramenta estratégica para o controle de desperdícios. Rev Gest E Secr. 1o de março de 2023;14(3):2663–75.
Pimentel LCL, Virginio JPA, Albernaz CB, Souza DP de, Jesus CAC de, Paranaguá TT de B, et al. Avaliação da qualidade dos registros do processo de enfermagem por meio de auditoria retrospectiva. Rev Enferm UERJ. 12 de dezembro de 2023;31:e77316–e77316.
Caixeta FDC, Silva AA, Ferreira MV, Sales RDCA. AUDITORIA EM SAÚDE: NÃO CONFORMIDADES EM REGISTROS DE PRONTUÁRIOS CIRÚRGICOS. Int J Health Sci. 30 de outubro de 2024;3(2):181–2.
White J, Fu Q, Hays S, Sandborn M, Olea C, Gilbert H, et al. A Prompt Pattern Catalog to Enhance Prompt Engineering with ChatGPT [Internet]. arXiv; 2023 [citado 25 de março de 2025]. Disponível em: http://arxiv.org/abs/2302.11382
Liu NF, Lin K, Hewitt J, Paranjape A, Bevilacqua M, Petroni F, et al. Lost in the Middle: How Language Models Use Long Contexts [Internet]. arXiv; 2023 [citado 25 de março de 2025]. Disponível em: http://arxiv.org/abs/2307.03172
An S, Ma Z, Lin Z, Zheng N, Lou JG. Make Your LLM Fully Utilize the Context [Internet]. arXiv; 2024 [citado 25 de março de 2025]. Disponível em: http://arxiv.org/abs/2404.16811
Baker GA, Raut A, Shaier S, Hunter LE, Wense K von der. Lost in the Middle, and In-Between: Enhancing Language Models’ Ability to Reason Over Long Contexts in Multi-Hop QA [Internet]. arXiv; 2024 [citado 25 de março de 2025]. Disponível em: http://arxiv.org/abs/2412.10079
Chang Y, Wang X, Wang J, Wu Y, Yang L, Zhu K, et al. A Survey on Evaluation of Large Language Models [Internet]. arXiv; 2023 [citado 25 de março de 2025]. Disponível em: http://arxiv.org/abs/2307.03109
Verspoor K. “Fighting fire with fire” - using LLMs to combat LLM hallucinations. Nature. junho de 2024;630(8017):569–70.
Publicado
Como Citar
Edição
Seção
Licença
Copyright (c) 2025 Rita de Cássia Almeida Sales, Isaura Romero Peixoto, Shirley da Silva Jacinto de Oliveira Cruz, Wellington Pinheiro dos Santos

Este trabalho está licenciado sob uma licença Creative Commons Attribution-NonCommercial-ShareAlike 4.0 International License.