Um estudo da Universidade de Flinders, na Austrália, mostra que assistentes de IA para registros médicos com funcionalidade visual podem melhorar significativamente a precisão dos prontuários dos pacientes e economizar tempo para os clínicos. A pesquisa, publicada no periódico npj Digital Medicine, descobriu que o desempenho do assistente de IA pode ser ainda mais otimizado quando equipado com um dispositivo de registro visual.
Os pesquisadores testaram um assistente de registro de IA visual que combina o modelo Gemini da Google com os óculos inteligentes Ray-Ban Meta em cenários de consulta entre farmacêuticos e pacientes. Os resultados indicam que esse sistema reduz erros e omissões nos registros clínicos, aumentando a precisão da documentação.
O autor do estudo, Bradley Menz, farmacêutico acadêmico da Faculdade de Medicina e Saúde Pública da Universidade de Flinders, afirmou: "Os assistentes de IA já ajudam os clínicos ouvindo as consultas, mas a assistência médica vai muito além da comunicação verbal. Uma grande quantidade de informações clinicamente importantes é visual, incluindo frascos de medicamentos, prescrições e dispositivos. Quando o sistema de IA pode processar tanto o que ouve quanto o que vê, ele consegue capturar mais detalhes cruciais para o cuidado do paciente."
No experimento, 10 farmacêuticos clínicos conduziram 110 entrevistas simuladas de histórico medicamentoso, envolvendo mais de 100 frascos de medicamentos diferentes. Os pesquisadores usaram os óculos Meta AI Ray-Ban para gravar vídeos das entrevistas, que foram então analisados pelo assistente de IA baseado no modelo Gemini da Google. Os resultados mostraram que o assistente de IA que analisava vídeo e áudio teve uma precisão de 98%, enquanto ao processar apenas áudio, a precisão foi de 81%. Na captura de detalhes-chave como a dosagem e a forma farmacêutica dos medicamentos, o assistente de IA com entrada de vídeo teve uma taxa de sucesso de 97%, caindo para 28% quando apenas o áudio foi registrado.
O Sr. Menz enfatizou: "Esta é uma ferramenta de aprimoramento, não um substituto para o julgamento clínico. Os clínicos ainda precisam revisar e assinar os documentos. O assistente de IA pode incluir etapas de verificação, como capturar imagens da embalagem do medicamento e gerar uma transcrição completa, fornecendo uma base para que os profissionais de saúde verifiquem o conteúdo gerado pela IA."
A autora sênior, professora associada Ashley Hopkins, destacou: "O assistente de IA alivia o fardo da documentação, dando aos clínicos mais tempo com os pacientes. Essas descobertas mostram que, quando o assistente de registro pode ver e ouvir, produz rascunhos mais precisos e completos, reduzindo o tempo de edição e aumentando o foco no cuidado ao paciente." O estudo também menciona que, com o desenvolvimento dos assistentes de IA visual, questões como privacidade, segurança de dados e integração no fluxo de trabalho precisam ser mais bem resolvidas. Esta pesquisa pode indicar a direção para a próxima fase da aplicação de IA na área da saúde.
Detalhes da publicação: Autores: Flinders University; Título: The next leap for AI scribes provides eyes in the clinic; Publicado em: npj Digital Medicine (2026).









