Signifikanztests in Dashboard

Informationen zu Signifikanztests in Dashboard

Mithilfe von Dashboards verstehen Sie die Unterschiede besser, die in bestimmten Zeiträumen oder zwischen verschiedenen Gruppen sichtbar werden. Sind die Daten statistisch relevant, können wichtige Geschäftsentscheidungen nötig werden. Sie haben sich beispielsweise folgende Frage gestellt:

• Ist der NPS in diesem Monat wirklich gestiegen, oder handelt es sich um eine kleine Änderung, die nur ein Rauschen in den Daten ist?
• Hat die Gruppe Mittlerer Westen tatsächlich höhere Zufriedenheitswerte als die Gruppe West?
• Welche meiner 5 Segmente hatten höhere oder niedrigere Bewertungen für diese Kennzahl?

Mit Signifikanztests können Sie herausfinden, welche Datenänderungen am wichtigsten sind.

Verfügbare Widgets und Metriken

Signifikanztests sind derzeit in den folgenden Widgets mit den folgenden Parametern verfügbar. Diese werden in den folgenden Abschnitten näher erläutert.

Widgets

• Horizontale Linien
• Vertikale Linien
• Balken
• Tabellen

Kennzahlen

• Durchschnitt
• NPS
• Obere/Untere Kästchen
• Verhältnis Teilmenge
  Tipp: Um den Signifikanztest durchzuführen, muss der Zähler eine Teilmenge der für den Nenner ausgewählten Werte sein. Außerdem muss das Verhältnis kleiner als eins sein.
• Benutzerdefinierte Metriken

Tipp: Nur proportionale benutzerdefinierte Kennzahlen mit einem einzelnen Feld als Divisor können für Signifikanztests verwendet werden. Proportionale benutzerdefinierte Kennzahlen folgen dem allgemeinen Format von (A + B) / C, wobei A, B und C unterschiedliche Datenfelder sind. A / B funktioniert auch, da es nur ein einziges Feld als Divisor gibt. Beim Anlegen benutzerdefinierter Kennzahlen zu diesem Zweck können Sie nur Zählungen verwenden, wie unten dargestellt. Die Gleichung kann keine statische Zahl enthalten, z.B. (A + 5) / B funktioniert nicht.

Einrichten von Linien- und Balkendiagrammen

1. hinzufügen Liniendiagramm, horizontaler Balken oder vertikales Widget.
2. Weiter Metriken, wählen Sie Hinzufügen.
   
3. Wählen Sie eine der folgenden Optionen: Zulässige Metriken.
4. Wählen Sie ein Feld für Ihre Metrik aus.
5. Weiter X-Achse, wählen Sie Hinzufügen.
   
6. Fügen Sie ein Feld Ihrer Antwortmöglichkeit.
   Tipp: Wenn Sie zwei Zeiträume vergleichen möchten, wählen Sie eine Datumsfeld. Wenn Sie zwei Werte vergleichen möchten, wählen Sie ein Nicht-Datumsfeld aus.
7. Klicken Sie auf Ihre Metrik.
   
8. Aktivieren Signifikanztests.

Details zu den einzelnen Optionen finden Sie unter. Signifikanztests konfigurieren.

Tabellen einrichten

1. hinzufügen Tabelle Widget.
2. Weiter Metriken, wählen Sie Hinzufügen.
   
3. Wählen Sie eine der folgenden Optionen: Zulässige Metriken.
4. Weiter Zeilen, wählen Sie Hinzufügen.
5. Fügen Sie ein Feld Ihrer Antwortmöglichkeit.
   
   Tipp: Wenn Sie zwei Zeiträume vergleichen möchten, wählen Sie eine Datumsfeld. Wenn Sie zwei Werte vergleichen möchten, wählen Sie ein Nicht-Datumsfeld aus.
6. Klicken Sie auf Ihre Metrik.
7. Aktivieren Signifikanztests.

Details zu den einzelnen Optionen finden Sie unter. Signifikanztests konfigurieren.

Signifikanztests konfigurieren

Nachdem Sie Ihr Liniendiagramm, Balkendiagramm oder Ihre Tabelle eingerichtet und aktiviert haben Signifikanztestshaben Sie einige Optionen zur Auswahl.

1. Entscheiden Sie, wie die Signifikanz ermittelt werden soll.
   • Aktuelle Periode mit einer vorherigen Periode vergleichen: Jeder Zeitraum wird mit jedem vorherigen Zeitraum verglichen, wenn die Signifikanz einer Änderung ermittelt wird. Um diese Option verwenden zu können, muss Ihre x-Achsendimension oder -zeile ein Datumsfeld.
     Beispiel: Ist die Gesamtpunktzahl dieses Monats höher als die des letzten Monats? Ist die Punktzahl dieses Monats höher als dieses Mal im letzten Jahr?
   • Identifizieren Sie besonders hohe oder niedrige Werte: Häufigste Auswahl für Daten, die keine Uhrzeiten oder Datumsangaben enthalten.
     Beispiel: Ist Brasiliens Punktzahl höher als andere südamerikanische Länder?
   • Aktuellen Wert mit einem anderen Wert vergleichen: Jeder Wert wird bei der Bestimmung der Signifikanz einer Änderung miteinander verglichen. Um diese Option verwenden zu können, muss die X-Achsendimension ein Nicht-Datumsfeld sein.
     Beispiel: Ist Brasiliens Punktzahl höher als Venezuelas Punktzahl? Ist Brasiliens Punktzahl höher als die von Kolumbien? Ist Venezuela höher als Kolumbiens?
2. Wenn Sie Aktuelle Periode mit einer vorherigen Periode vergleichenwählen Sie ein Offset aus. Diese Option wirkt sich darauf aus, welche Zeiträume zur Ermittlung der Signifikanz verwendet werden. Folgende Optionen stehen zur Verfügung:
   • Vorperiode: Vergleicht jeden Zeitraum mit dem vorherigen Zeitraum.
   • 1 Jahr: Vergleicht jeden Zeitraum mit dem Zeitraum ein Jahr zuvor.
   Beispiel: Dieses Widget zeigt die durchschnittliche CSAT gruppiert nach Quartal mit einem Offset von 1 Jahr an. Der Pfeil zeigt an, dass die Wertsteigerung von Q1 2019 auf Q1 2020 statistisch signifikant war.
   
3. Bestimmen Sie Ihr Konfidenzintervall. Siehe Signifikanztests verstehen für weitere Informationen zu Konfidenzintervallen.

Signifikanz über mehrere Dimensionen hinweg vergleichen

Sie können Signifikanz über mehrere Dimensionen hinweg vergleichen, indem Sie eine Metrik, x-Achse, und Datenreihe. Damit dies funktioniert, müssen Sie Folgendes sicherstellen:

• Das X-Achsenfeld ist ein Datumsfeld.
• Das Datenreihenfeld ist ein Nicht-Datum Feld.

Beispiel: Dieses Widget zeigt die durchschnittliche CSAT für verschiedene Abteilungen pro Jahr an. Die Metrik ist Durchschnittliche CSAT, die X-Achse ist das Datum und die Datenreihe ist die Abteilung.

Auswahl Aktuelle Periode mit einer vorherigen Periode vergleichen vergleicht die Signifikanz über Zeiträume hinweg für jede einzelne Abteilung.

Aktuellen Wert mit einem anderen Wert vergleichen kann auch ausgewählt werden, um die Signifikanz abteilungsübergreifend innerhalb jedes einzelnen Zeitraums zu vergleichen.

Signifikanztests verstehen

Das Konfidenzintervall gibt an, wie zuversichtlich Sie sein können, dass die durch die Analyse generierten Ergebnisse auf die allgemeine Bevölkerung übertragbar sind. Höhere Konfidenzebenen erhöhen den Schwellenwert für eine Differenz, die als statistisch bedeutsam einzustufen ist. Dies bedeutet, dass nur die eindeutigsten Unterschiede entsprechend gekennzeichnet werden.

Sobald Sie Signifikanztests aktiviert haben, bemerken Sie möglicherweise Pfeile nach oben und unten in Ihrem Widget. Diese Pfeile zeigen statistisch signifikante Werte an.

Sie können den Mauszeiger über einen Pfeil bewegen, um zu ermitteln, warum der Wert als signifikant betrachtet wird und wie das Konfidenzintervall dieses Tests war.

Technische Hinweise zu Signifikanztests

Beim Vergleich eines NPS mit einem anderen wird unabhängig vom Diagrammtyp oder Vergleich (z.B. im Laufe der Zeit) der folgende Prozess verwendet:

1. Legen Sie eine neue Datenspalte an, die NPS wie folgt umkodiert:
   • Promoter = 100
   • Neutrals = 0
   • Detraktoren = -100
2. Führen Sie einen 2-Tailed Welch’s unabhängigen Proben t-Test durch.

Beim Vergleich einer Punktzahl der oberen Box mit einer anderen wird unabhängig vom Diagrammtyp oder Vergleich (z.B. im Laufe der Zeit) der folgende Prozess verwendet:

1. Legen Sie eine neue Datenspalte an, die rohe Scores in TRUE oder FALSE umkodiert, je nachdem, ob sie die Kriterien des oberen Felds erfüllen.
2. Führen Sie einen 2-Tailed-Z-Test für Unterschiede in 2 Proportionen durch.