ドライバ結果の操作 (Studio)

ドライバ結果の使用について

ドライバを作成してデータ内のドライバを検索した後、ドライバ結果にアクセスして表示したり、統計メジャーを表示して予測モデルの品質を評価したり、ドライバの最小ボリュームを設定したり、ドライバの表示/非表示を切り替えたりすることができます。

ドライバ結果へのアクセス

ドライバを作成し、データでドライバを検索した後、ドライバ結果ウィンドウでデータのドライバ結果にアクセスできます。

1. 領域メニューをクリックします。
   
2. ドライバをクリックします。
3. 使用するコンテンツプロバイダのプロジェクトを選択します。
   
4. 複数のアカウントにアクセスできる場合は、関連するアカウントを選択します。
5. 複数のプロジェクトにアクセスできる場合は、関連するプロジェクトを選択します。
6. 表示するドライバを見つけます。
   ヒント：［ドライバーを検索］ボックスにドライバーの名前を入力して見つけることができます。
7. ドライバの横にある結果列のドライバの表示リンクをクリックします。
   
8. ドライバ結果ウィンドウのドライバ、 パフォーマンス、統計、および非表示タブを使用して、必要な情報にアクセスすることができます。
   

ドライバ結果の表示

ドライバ結果にアクセスした後、ドライバ結果ウィンドウのドライバタブでドライバ結果を表示することができます。また、ドキュメントエクスプローラで関連するフィードバックにドリルしたり、逆方向のドライバを表示したり、ダッシュボードでドライバを探索したり、ドライバの表示/非表示を切り替えたりすることもできます。

ドライバタブでは、以下の情報を表示することができます。

1. 結果: 探している原因を示すデータのサブセット。
   
2. 範囲: 調査に適用される期間およびその他のフィルタ。
3. ドライバー：結果につながる属性とトピック。
   ヒント：ドライバーの名前をクリックすると、背後にあるフィードバックがドキュメントエクスプローラーに表示されます。
4. インパクトランク: 影響度スコアに基づくドライバのランク。ポジションが高いほど、他のドライバに対する影響が大きくなります。詳細については、以下の影響度ランクセクションを参照してください。
   ヒント：影響度ランク列の数値にマウスポインタを合わせると、影響度スコアが表示されます。
5. ボリューム: 調査範囲内のドライバに関連する文書の数。
6. ［ダッシュボードでドライバーを探す］をクリックすると、ドライバー別にグループ化された散布ウィジェットを任意のダッシュボードまたは新しいダッシュボードに追加できます。詳細については、以下の「ダッシュボードでのドライバーの探索」セクションを参照してください。
7. 逆ドライバを表示するには、ドライバタブの下部にある逆ドライバを表示リンクをクリックします。
   
   ヒント：逆方向のドライバーは、定義された結果の反対側のバイナリを予測します。逆方向のドライバが発生すると、元の結果が得られにくくなります。否定的な結果を探す場合、ドライバーは避けるべきことであり、逆方向の推進要因はあなたが求めるべきことです。
8. 閉じるをクリックして、ドライバ結果ウィンドウを閉じます。

インパクトランク

インパクトランクは、影響度スコアでソートされたすべてのドライバのランク番号です。インパクトランクでは、定義された結果を予測する機能によってドライバが優先されます。ランクが 1 のドライバは、ランクが 2 以上のドライバよりも表示力が高くなります。

影響度のランクは、影響度スコアから誘導されます。影響度スコアは、選択した結果を予測する際にドライバーの力を測定する指標です。影響度スコアは、ドライバに対して生成される一意の機械学習モデルの製品です。

影響度スコアは正規化されます。つまり、同じドライバ検索実行の他のドライバに関連します。影響度スコアの値は、最も一般的には -1 から 1 の間になります。

インパクトスコアのヒント

インパクトスコア別にドライバを分析する場合は、以下のヒントに従ってください。

• 影響度スコアの小数に固定しない: 影響度スコアの小数値の主な目的は、より弱いドライバよりも強いドライバをランク付けして区別することです。小数値では、統計的な有意性は示されません。
• インパクトスコアが 1 以下のドライバに注意してください。影響度のランク値が 1 に近いか、それより上位のドライバは、より強力な結果の予測変数です。
• 同じように重要です。インパクトスコアが -1 に近いか、それ以下のドライバ (逆方向のドライバ) に注意してください。インパクトスコアの値が -1 に近いか、それより小さいドライバは、結果とは反対のバイナリのより強い予測変数です。これらは逆ドライバと呼ばれます。たとえば、批判者評価のドライバーを探していた場合、強い負の値は、非批判者、または中立者やプロモーターのドライバーになります。
• 影響度スコアを非線形メトリクスとして扱います。たとえば、影響度スコア 0.4 は 0.2 の影響度スコアの 2 倍以上の強度です。
• 影響度スコアは正規化されていることに注意してください。正規化による影響は、ドライバの後続の再計算から結果を削除すると、他のドライバの影響スコア値が増加または減少する可能性があることです。たとえば、非常に強いドライバを 1 つ削除すると、残りのデータを使用して予測を行う必要があるため、他のドライバの重要性が増減する可能性があります。
• 2 番目の指標（ % Total、Sentiment、Effort）でドライバーを差別化：たとえば、2つの異なるドライバーの影響スコアが同じでも合計率が非常に異なる場合、より一般的なドライバーに調査を集中できます。

ダッシュボードでのドライバの探索

ドライバー別にグループ化された散布ウィジェットは、任意のダッシュボードまたは新しいダッシュボードに追加できます。

1. ドライバ結果ウィンドウのドライバタブにナビゲートします。
2. ドライバタブの上部にあるダッシュボード内のドライバの検索をクリックします。
   
3. 検索可能なダッシュボードの一覧で、散布図ウィジェットを追加するダッシュボードの名前をクリックします。
   
   ヒント：新しいダッシュボードに散布図ウィジェットを追加するには、リストの上部にある［新しいダッシュボード］をクリックします。
   
4. これにより、以下の設定を含む散布図ウィジェットが自動的に追加されます。

• 日付範囲: 調査範囲と同じ
• フィルタ: ドライバと同期済
• 垂直軸計算: 影響度スコア
• 水平軸計算: 容積
• グループ化基準: ドライバ

ドライバ結果のドライバの表示/非表示

ドライバ結果にアクセスした後、ドライバ結果を表示し、分析に有用でないドライバを非表示にすることができます。

1. ドライバ結果ウィンドウのドライバタブにナビゲートします。
2. 非表示にするドライバの名前にカーソルを合わせます。
   
3. ドライバの横に表示される ( x ) アイコンをクリックします。
   ヒント：非表示のドライバーは、［ドライバー］タブと、これらの非表示ドライバーを使用するウィジェットには表示されません。非表示タブでは、マニュアルで非表示にされたドライバの一覧を表示することができます。
4. ドライバを再表示するには、[非表示] タブをクリックします。
   
5. [手動で非表示にしたドライバ] 列で、表示するドライバの上にマウスポインタを合わせます。
6. ドライバの横に表示されるプラス (+) アイコンをクリックします。
7. [保存] をクリックします。ドライバは、[ドライバ] タブとウィジェットに表示されます。
   

モデルパフォーマンスの評価

ドライバ結果にアクセスした後、ドライバ結果ウィンドウのパフォーマンスタブで、予測モデルの品質を評価するための統計メジャーを表示することができます。

1. AUC ROC (レシーバ作業曲線の曲線下面積): 1 に近いほど良く、0.5 より大きい値が推奨されます。結果が時間に対して非常に低いまたは非常に高い割合で発生する場合は、代わりに AUC PRC を考慮してください。
   
2. AUC PRC (Precision-Recall Curve の曲線下面積): 1 に近いほど良く、0.5 より大きい値が優先されます。結果の割合が非常に低い、または非常に高い場合、これは元の普及率を表すため、AUC ROC よりも優れた指標です。

JSON 形式でのドライバ結果の表示

ドライバ結果にアクセスした後、ドライバ結果ウィンドウの統計タブでドライバ結果を JSON 形式で表示することができます。これは、トラブルシューティングの目的で役立ちます。

ドライバの最小ボリュームの設定

ドライバ結果にアクセスした後、評価対象の各ドライバを選定する伝票の最小数を定義することができます。
ドライバ分析では、100 万件のドキュメントが 50,000 個のランダムドキュメントまでサンプルされ、そのサンプルを使用してドライバが検索されます。範囲に含まれる文書数が 50,000 未満の場合、サンプリングは行われません。つまり、範囲が 50,000 文書を超える場合、そのサンプリングによって 2 回目の実行 (その他はすべて等しい) 時に、ドライバが若干異なる可能性があります。ただし、これは通常、最も少ない量のアイテムに影響し、最も価値が低い可能性があります。

ボリュームが非常に少ない潜在的なドライバは、サンプリングされたデータセットで過少表示または過大表示される可能性があります。最小容積しきい値を使用して、これらのドライバをグラフからフィルタリングすることをお奨めします。ただし、これらの少量ドライバは、戦術的な応答を必要とする少数の顧客グループを特定するのに役立つ場合があることに注意してください。

自然サンプリングのバリエーションにより、インパクトスコアに小さな変化が見られる場合もあります。このほかにも考えられる原因の 1 つは、指定されたプロジェクト内でのデータのロードまたは削除です。

1. ドライバ結果ウィンドウの非表示タブをクリックします。
   
2. 上向き矢印と下向き矢印をクリックして、 最小ドライバボリューム。
   
   ヒント：または、ボックスに数値を入力することもできます。
3. [閉じる] をクリックすると、ドライバ結果ウィンドウを次回開いたときにしきい値が適用されます。