Aurora ordena sugestões de classificação e mede escolhas no uso real
O módulo Inferência do Aurora passa a aceitar listas Top-k ordenadas por score e a registrar sugestões apresentadas, escolhidas ou ignoradas, com métricas Top-1 e Top-5 no painel.
O Aurora passou a organizar as sugestões de seus classificadores por nível de confiança e a registrar o que acontece depois que elas são exibidas. A mudança está no módulo Inferência e interessa a gestores públicos de saúde, hospitais e equipes de TI que acompanham o uso de inteligência artificial em aplicações de saúde pública.
No endpoint de classificação, o parâmetro `top_k` permite solicitar de uma a 50 previsões. A resposta inclui as sugestões em ordem decrescente de score, identificadas pelos rótulos cadastrados no vocabulário do próprio endpoint. Quando o parâmetro não é enviado, a resposta original é preservada, mantendo o contrato usado por clientes existentes.
Na prática, o integrador pode receber, por exemplo, as cinco classificações mais prováveis sem precisar ordenar no próprio sistema. O painel do Aurora também passou a exibir as barras de classificação nessa ordem e inclui exemplos de uso com `curl` e SDK.
A segunda parte da mudança registra três momentos da interação: quando uma lista é apresentada, quando uma sugestão é selecionada e quando ela é ignorada ou substituída. Esses eventos são associados a uma referência opaca de interação e podem ser consultados em um resumo de 30 dias no painel.
O desenho limita o conteúdo aceito nessa etapa. Os rótulos precisam pertencer ao vocabulário do endpoint, e o registro não possui campo para texto livre. Com isso, a métrica é formada a partir de categorias já definidas para o classificador, e não de relatos ou outros textos clínicos.
O sistema também exige que uma seleção corresponda a uma lista apresentada anteriormente — inclusive quando os dois eventos chegam no mesmo lote — e recusa posições que estejam fora da lista. O painel informa a quantidade de sugestões apresentadas, aceitas e ignoradas, além das taxas Top-1 e Top-5, que mostram, respectivamente, a frequência com que a primeira sugestão ou uma das cinco primeiras foi escolhida.