Google publica o modelo que usa para avaliar precisão, segurança e utilidade de seus modelos de IA em saúde
Um white paper feito com Elizabeth McGlynn e Dana Gelb Safran combina testes de perguntas fechadas, avaliadores automáticos e revisão de especialistas; o Google não divulga novas notas de seus modelos.
Por que importa
Perguntas de saúde estão entre os principais usos de chatbots, mas não há forma acordada de testar se as respostas são seguras. O artigo do Google liga a avaliação às fases de vida de um produto, do modelo base ao monitoramento após o lançamento, e a três domínios: precisão, segurança e utilidade. É um método, não uma tabela de resultados, então não permite comparar seus modelos com os de rivais. Resta ver se sistemas de saúde, compradores ou reguladores o adotam, objetivo declarado dos autores.
Fatos principais
- Três domínios: precisão, segurança, utilidade
- Métodos: perguntas fechadas, avaliadores automáticos, revisão de especialistas
- Com Elizabeth McGlynn e Dana Gelb Safran
- Artigo no arXiv em 3 nov 2026