Trabalhando com resultados de driver (Studio)

Sobre como trabalhar com resultados de driver

Depois de criar um driver e executá-lo para encontrar os drivers em seus dados, você pode acessar e visualizar resultados do driver, visualizar medidas estatísticas para avaliar a qualidade do seu modelo de previsão, definir um volume mínimo para drivers e ocultar e exibir drivers.

Acesso aos resultados do driver

Depois de criar um driver e encontrar os drivers em seus dados, você pode acessar os resultados do driver para seus dados na janela Resultados do driver.

1. Clique no menu Espaços.
   
2. Clique em Drivers.
3. Selecione o projeto do fornecedor de conteúdo a ser utilizado.
   
4. Se você tiver acesso a mais de uma conta, selecione a conta relevante.
5. Se você tiver acesso a mais de um projeto, selecione o projeto relevante.
6. Localize o driver que você deseja visualizar.
   Qdica: você pode inserir o nome do driver na caixa Encontrar drivers para encontrá-lo.
7. Clique no link Exibir drivers na coluna Resultados ao lado do driver.
   
8. Em seguida, você pode usar as guias Motivadores, Desempenho, Estatísticas e Ocultos na janela Resultados do driver para acessar as informações necessárias.
   

Visualização dos resultados do driver

Depois de acessar os resultados do driver, você pode visualizar os resultados dele na aba Drivers na janela Resultados do driver. Você também pode detalhar o feedback relacionado no explorador de documentos, visualizar drivers inversos, explorar drivers em um dashboard e ocultar e exibir drivers.

Você pode visualizar as seguintes informações na ficha Motoristas:

1. Resultado: um subconjunto de dados cujas causas você está procurando.
   
2. Escopo: um período de tempo e quaisquer outros filtros aplicados à investigação.
3. Motivadores: atributos e tópicos que levaram ao resultado.
   Qdica: Clique no nome do driver para visualizar o feedback por trás dele no explorador de documentos.
4. Classificação do Impacto: A classificação do piloto entre outros pilotos de acordo com a pontuação do Impacto. Quanto maior a posição, maior o impacto em relação a outros motoristas. Para mais informações, consulte a seção Classificação de impacto abaixo.
   Qdica: passe o mouse sobre o número na coluna Classificação do impacto para ver a pontuação de impacto.
5. Volume: o número de documentos relacionados a um motorista no escopo da investigação.
6. Você pode clicar em Explorar drivers no dashboard para adicionar um widget de dispersão agrupado por motivadores a qualquer um dos seus dashboards ou a um novo dashboard. Para mais informações, consulte a seção Explorando drivers em um dashboard abaixo.
7. Para visualizar drivers inversos, clique no link Mostrar drivers inversos na parte inferior da aba Drivers.
   
   Qdica: Motivadores inversos preveem o binário oposto do resultado definido. Quando estímulos inversos ocorrem, seu resultado original é menos provável de acontecer. Quando você está explorando um resultado negativo, os motivadores são coisas que você deve evitar, enquanto os impulsionadores inversos são coisas que você deve procurar.
8. Clique em Fechar para fechar a janela Resultados do driver.

Classificação do impacto

A classificação de impacto é o número de classificação de todos os motivadores classificados por pontuação de impacto. A classificação de impacto prioriza os motivadores pela capacidade de prever o resultado definido. Um motorista com uma classificação de 1 tem mais potência indicativa do que um motorista com uma classificação de 2 ou mais.

A classificação de impacto deriva da pontuação de impacto, uma métrica que mede o poder de um motorista na previsão do resultado escolhido. A pontuação de impacto é um produto de um modelo de aprendizagem de máquina único gerado para os drivers.

A pontuação de impacto é normalizada, o que significa que é relativa a outros drivers na mesma execução de busca de drivers. Os valores da pontuação de impacto estão mais comumente entre –1 e 1.

Dicas de pontuação de impacto

Ao analisar motivadores pela pontuação de impacto, siga estas dicas:

• Não fixar nos valores decimais da pontuação de impacto: a intenção principal dos valores decimais da pontuação de impacto é classificar e diferenciar motivadores mais fortes dos mais fracos. Os valores decimais não fornecem significância estatística por si só.
• Preste atenção aos Motivadores com pontuação de Impacto próxima ou acima de 1: Motivadores com um valor de classificação de impacto próximo ou acima de 1 são preditores mais fortes de seu resultado.
• Igualmente importante, preste atenção aos Motivadores com uma pontuação de impacto próxima ou abaixo de –1 (Drivers inversos): Motivadores com valor de pontuação de impacto próximo ou abaixo de –1 são preditores mais fortes do binário oposto de seu resultado. Estes são chamados drivers inversos. Por exemplo, se você estivesse procurando motoristas de avaliações de detrator, um valor negativo forte seria um motorista para não detrator, ou passivos e promotores.
• Tratar a pontuação de impacto como uma métrica não linear: por exemplo, uma pontuação de impacto de 0,4 é mais do que o dobro da pontuação de impacto de 0,2.
• Lembre-se de que a pontuação de impacto é normalizada: o impacto da normalização é que a remoção de resultados de novos cálculos subsequentes de drivers provavelmente resultará em um aumento ou redução nos valores de pontuação de impacto de outros estímulos. Por exemplo, remover um estímulo muito forte significa que as previsões devem ser feitas com os dados restantes, o que pode fazer com que outros drivers se tornem mais ou menos importantes.
• Diferenciar motivadores por uma segunda métrica, como % Total, Opinião ou Esforço: por exemplo, se dois motivadores diferentes tiverem a mesma pontuação de impacto, mas taxas totais de % muito diferentes, você provavelmente deseja concentrar a exploração no estímulo mais prevalente.

Explorando drivers em um dashboard

Você pode adicionar um widget de dispersão agrupado por motivadores a qualquer um dos seus dashboards ou a um novo dashboard.

1. Navegue para a ficha Drivers na janela Resultados do driver.
2. Clique em Explorar drivers no dashboard na parte superior da guia Drivers.
   
3. Na lista pesquisável de painéis disponíveis, clique no nome do painel ao qual você deseja adicionar o widget de dispersão.
   
   Qdica: para adicionar um widget de dispersão a um novo painel, clique em Novo painel na parte superior da lista.
   
4. Isso adiciona automaticamente um widget de dispersão com as seguintes configurações:

• Intervalo de datas: o mesmo que no escopo da investigação
• Filtros: sincronizados com o driver
• Cálculo do eixo vertical: pontuação de impacto
• Cálculo do eixo horizontal: volume
• Agrupar por: Motivadores

Ocultação e ocultação de drivers em resultados de drivers

Depois de acessar os resultados do driver, você pode visualizar os resultados do driver e ocultar drivers que não são úteis para sua análise.

1. Navegue para a ficha Drivers na janela Resultados do driver.
2. Passe o mouse sobre o nome do driver que deseja ocultar.
   
3. Clique no ícone ( x ) que aparece ao lado do driver.
   Qdica: os drivers ocultos não aparecem na guia Motivadores e nos widgets em que você usa esses motivadores ocultos. Você pode visualizar uma lista de motivadores que foram ocultados manualmente na guia Ocultos.
4. Para exibir um driver, clique na guia Oculto.
   
5. Passe o mouse sobre o driver que você deseja exibir na coluna Drivers ocultos manualmente.
6. Clique no ícone mais ( + ) que aparece ao lado do driver.
7. Clique em Salvar. O driver será exibido na guia Motivadores e nos widgets.
   

Avaliação do desempenho do modelo

Depois de acessar os resultados do driver, você pode visualizar medidas estatísticas para avaliar a qualidade do seu modelo de previsão na guia Desempenho da janela Resultados do driver:

1. ROC AUC (área sob a curva da curva operacional do receptor): Quanto mais próximo de 1 melhor, com um valor superior a 0,5 preferido. Se o seu resultado ocorrer uma porcentagem muito baixa ou muito alta do tempo, considere AUC PRC.
   
2. AUC PRC (Área sob a curva da curva Precision-Recall): Quanto mais próximo de 1, melhor, com um valor superior a 0,5 preferido. Se o seu resultado ocorrer uma porcentagem muito baixa ou muito alta do tempo, esta é uma métrica melhor do que a ROC AUC porque é responsável pela taxa de prevalência original.

Visualizando resultados do driver no formato JSON

Depois de acessar os resultados do driver, você pode visualizar os resultados do driver em formato JSON na guia Estatísticas na janela Resultados do driver. Isso é útil para fins de solução de problemas.

Definindo o volume mínimo para drivers

Depois de acessar os resultados do driver, você pode definir o número mínimo de documentos que qualificariam cada motivador potencial para avaliação.
A análise de drivers mostrará os milhões de documentos até 50.000 documentos aleatórios e, em seguida, usará essa amostra para encontrar drivers. Se o seu escopo contiver menos de 50.000 documentos, não ocorre nenhuma retirada de amostra. Isso significa que, se o escopo for superior a 50.000 documentos, você pode obter drivers ligeiramente diferentes na segunda vez que o executar (sendo todos iguais) devido a essa amostragem. No entanto, isso normalmente afeta mais os itens de menor volume, que são indiscutivelmente os menos valiosos.

Potenciais drivers com volumes muito baixos podem estar sub-representados ou sobre-representados nos conjuntos de dados amostrados. Recomendamos filtrar esses drivers de gráficos usando um limite mínimo de volume. Tenha em mente, no entanto, que esses drivers de pequeno volume podem ser úteis para identificar pequenos grupos de clientes que precisam de respostas táticas.

Você também pode ver pequenas variações nas pontuações de impacto devido a variações naturais de amostragem. Outra possível causa disso é o carregamento ou a remoção de dados do projeto dentro do

1. Clique na guia Oculto na janela Resultados do driver.
   
2. Clique nas setas para cima e para baixo para definir o limite mínimo de volume na Volume mínimo do driver.
   
   Qdica: Como alternativa, você pode digitar um número na caixa.
3. Clique em Fechar para aplicar o limite na próxima vez que abrir a janela Resultados do driver.