Analisando o recall de modelos (Studio)
Sobre a análise do recall de modelos
Uma das maneiras de avaliar a eficácia de um modelo de categorização é medir sua recuperação. Recall é a porcentagem de documentos que foram categorizados em um modelo específico.
Para analisar a recuperação do modelo, você deve comparar a porcentagem de documentos categorizados no modelo com o número de documentos não categorizados. Para fazer isso, você pode criar duas métricas: uma para dados categorizados e outra para dados não categorizados.
Criação de uma métrica categorizada por porcentagem
- Crie uma métrica.
- Selecionar Filtrados métrica.
- Em Baseado em, selecione % Total.
- Em Condições, selecione o modelo da categoria em que você está interessado.
- Selecione categorizado.
- Salve sua métrica.
Criação de uma métrica de porcentagem sem categoria
- Crie uma métrica.
- Selecionar Personalizado métrica.
- Na caixa de equação, digite 1.
- Clique no sinal de menos ( – )
- Use o menu suspenso Métrica para selecionar a métrica Percentual Categorizado que você criou anteriormente.
- Vá para a guia Format.
- Adicione % como sufixo.
- Defina a conversão para X100.
- Salve sua métrica.
Exibição dos Resultados
Depois de criar suas métricas, você pode exibi-las em widgets como qualquer outra métrica (por exemplo, exibir 1 valor em um widget de métrica ou exibir ambos os valores em um widget de pizza) . Essas métricas podem ser usadas de forma intercambiável, dependendo de sua análise.