A/B-Tests in Website-/App-Analysen
Über A/B-Tests in Website-/App-Analysen
A/B Testing ist ein klassisches Forschungsformat, das disziplinenübergreifend verwendet wird. In dieser Testmethode vergleichen Sie eine Kontrollbedingung mit einer Bedingung, in der eine Behandlung angewendet wird, sodass Sie dann analysieren können, ob es einen signifikanten Unterschied zwischen dem Verhalten der Teilnehmer in der Behandlung und dem Kontrollgrundwert gibt. A/B-Tests können in der Webentwicklung nützlich sein, da Sie damit 2 Versionen eines Designs oder einer Werbung vergleichen können, um zu ermitteln, welche von Ihren Kunden bevorzugt wird.
Auf dieser Seite erklären wir, wie Sie zwei verschiedene Versionen derselben Website / App Insights Creative für randomisierte Teilmengen von Website-Besuchern testen können, um zu sehen, was besser abschneidet.
Etablierung der zu testenden Creatives
Creatives sind das visuelle Element eines Website-/App-Insights-Projekts. Der erste Schritt beim A/B-Testen von Creatives besteht natürlich darin, die zu testenden Creatives zu erstellen.
Egal, ob Sie verschiedene Anzeigen, Banner oder eingebettete Inhalte ausprobieren, Sie können A/B nur über jedes Kreative testen. Um Ihnen den Einstieg zu erleichtern, finden Sie hier eine Liste aller Creatives, die Sie in Qualtrics treffen können:
- Responsive-Dialogfeld
- Feedback-Schaltfläche
- Eingebettetes Feedback
- Pop-over
- Infoleiste
- Eingebetteter Link
- Slider
- Pop-under
- Benutzerdefiniertes eingebettetes Feedback
Creatives publizieren
Wenn Sie fertig sind, stellen Sie sicher, dass Sie veröffentlichen Ihre Creatives, damit sie in den Live-Code verschoben werden. Nur Änderungen, die veröffentlicht werden, werden auf Ihrer Website angezeigt, sobald Sie den Code auf Ihrer Website hinterlegt haben.
Wenn Sie ein Creative bearbeiten, den Code auf Ihrer Website bereitstellen lassen und Ihre Änderungen nicht live an Website-Besucher übertragen möchten, klicken Sie stattdessen auf Speichern.
Intercepts einrichten
Sobald die Creatives erstellt wurden, ist es an der Zeit, zu den Intercepts zu wechseln. Intercepts sind die Regeln, die festlegen, wann und wie Ihre Creatives auf Ihrer Website angezeigt werden.
Jedes Intercept besteht aus mindestens 1 Aktionssatz. Ein Aktionssatz bestimmt, was auf Ihrer Website geschieht, wenn bestimmte Bedingungen erfüllt sind. Wenn Sie mehrere Aktionssätze einrichten, können Sie damit beginnen, komplexere Dinge zu erledigen, z.B. ein völlig anderes Creative für verschiedene Gruppen von Website-Besuchern zu präsentieren.
- Erstellen Sie ein Intercept.
Tipp: Für Benutzer des alten Ablaufs siehe diese Schritte. Informationen zu Benutzern im neuen Ablauf finden Sie in diesen Schritten.
- Legen Sie einen Aktionssatz für jedes Creative an, das Sie testen möchten.
- Fügen Sie nach Bedarf eine Logik hinzu. Verwenden Sie für Logik, die für beide Creatives gelten soll, die Intercept-Targeting-Logik. Wenn es sich um eine kreative-spezifische Logik handelt, verwenden Sie die Aktionssatzlogik.
Beispiel: Egal, welche randomisierte Teilmenge mein Banner sieht, ich möchte, dass es nur auf meinen Supportseiten erscheint. Ich gebe an, dass die URL “/support/” in der Intercept-Logik enthalten muss.
- Wechseln Sie zu Ihren Intercept-Optionen, und wählen Sie Aktionssatz randomisieren.
- Stellen Sie sicher, dass die Anzeige der Beispielrate 100 % beträgt.
Eingebettete Daten
Dieser Schritt ist optional, kann jedoch ändern, wie dynamisch Sie die Ergebnisse Ihres A/B-Tests melden können. Wenn Sie bestimmte Informationen an Ihre Website übergeben, CX-Dashboards verwenden oder erweiterte Berichte in einer Zielumfrage einrichten möchten, müssen Sie Ihrem Intercept eingebettete Daten hinzufügen.
Eingebettete Daten sind benutzerdefinierte Variablen, die benannt und auf beliebige Werte gesetzt werden können. Für die Zwecke von A/B-Tests bedeutet dies, dass Sie Informationen verfolgen können, die sich darauf beziehen, welcher Behandlung/Version eines Creatives Ihr Website-Besucher ausgesetzt war.
- Wählen Sie für Ihren ersten Aktionssatz Optionen.
- Wählen Sie Eingebettete Daten.
- Nennen Sie Ihr Feld – etwas Einfaches wie „Bedingung“ funktioniert.
- Wählen Sie Statischer Wert.
- Vergeben Sie für diese Bedingung eine eindeutige Bezeichnung.
Tipp: Sie können Ihre Bedingungen einfach nummerieren oder aussagekräftigere Namen wählen. Was auch immer Ihrer Meinung nach am meisten davon profitieren wird, wenn Sie diese Daten melden.
- Speichern Sie Ihre Änderungen.
- Wählen Sie für Ihren zweiten Aktionssatz Optionen.
- Wählen Sie Eingebettete Daten.
- Verwenden Sie genau denselben Feldnamen wie in Schritt 3, z.B. „Bedingung“
. - Wählen Sie Statischer Wert.
- Vergeben Sie für diese Bedingung eine eindeutige Bezeichnung. Er muss sich von dem unterscheiden, was Sie in Schritt 5 geschrieben haben.
Beispiel: Wenn Ihr anderer Aktionssatz „Version 1“ ist, könnte dieser Aktionssatz „Version 2“ sein.
- Speichern Sie Ihre Änderungen.
- Wiederholen Sie dies bei Bedarf, wenn Sie weitere Aktionssätze haben.
Sobald Ihre verschiedenen Bedingungen markiert sind, können Sie zusätzliche eingebettete Daten erstellen, die Ihnen dabei helfen, zuverlässige Berichte zur Performance Ihrer Creatives zu erstellen. Sie können beispielsweise erfassen, wie lange der Besucher auf der Website verbracht hat, wie viele Seiten er besucht hat, die URL, auf der er das Kreative gesehen hat, usw. Im Abschnitt Eingebettete Datenwerttypen des Abschnitts Eingebettete Daten in Website-/App-Analysen finden Sie Ihre Optionen.
Tipp: Beachten Sie, dass Sie für alle zusätzlichen eingebetteten Daten, die Sie erfassen, sicherstellen müssen, dass sie beiden Aktionssätzen hinzugefügt werden, da Sie sonst nur diese Daten für eine Ihrer Bedingungen haben. Im Folgenden sehen Sie, wie die oben gezeigten eingebetteten Daten für Ihre zweite Bedingung aussehen würden:
Tipp: Wenn Sie Ziele für Ihre Aktionssätze ausgewählt haben, vergessen Sie nicht, die entsprechenden Abfragezeichenfolgen hinzuzufügen. Im Allgemeinen fügen Sie jedem Creative dasselbe Ziel hinzu. Sie möchten jedoch sicherstellen, dass die Werte in Ihrer Abfragezeichenfolge bei Bedarf abweichen.
Zusätzliche Intercept-Anpassung
Die restlichen Optionen und Anpassungen, die Sie Ihrem Intercept hinzufügen, hängen von den Anforderungen Ihres Programms ab.
Wenn Sie ein Intercept bearbeiten, überlegen Sie, wie sich dieser bestimmte Touchpoint gegenüber Website-Besuchern verhalten soll. Weitere Informationen zu den verfügbaren Optionen finden Sie unter:
- Einrichten Ihres Intercepts: Eine einführende Seite, die Informationen zur obersten Ebene zu Intercepts und den Arten von Bearbeitungen enthält, die Sie vornehmen möchten.
- Bearbeiten von Intercepts: Schritt-für-Schritt-Anleitung für alle Grundlagen, um die Bearbeitung abzufangen, von Zielen bis zu den Regeln, unter denen sie angezeigt werden (Logik), und mehr.
Zusätzliche Ressourcen und erweiterte Optionen:
- Mehrere Aktionssätze: Wir haben dies in den obigen Schritten erläutert, aber auf dieser Seite erfahren Sie, wie Sie mehrere Aktionssätze in Ihrem Intercept anlegen und optimal nutzen können.
- Eingebettete Daten in Website-/App-Insights:Wir haben dies in den obigen Schritten ein wenig behandelt, aber diese Seite geht detaillierter darauf ein, wie eingebettete Daten in Website-/App-Insights-Projekten verwendet werden können.
Tipp: Seien Sie vorsichtig beim Bearbeiten der vorkonfigurierten eingebetteten Daten. Wenn Sie Felder entfernen oder umbenennen, erfassen Sie nicht die gewünschten Informationen.
- Intercept-Optionen: Auf dieser Seite werden zusätzliche Einstellungen vorgenommen, die das Verhalten Ihres Intercepts verbessern können. Viele dieser Einstellungen steuern, wie oft Besucher auf Ihrer Website das Intercept sehen.
Bereitstellung auf einer Website
Die Implementierung für A/B-Tests ist die gleiche wie für jedes andere Website-/App-Insights-Projekt.
Intercepts testen und aktivieren
Versuchen Sie, das Intercept auf Ihrer Website zu testen, bevor Sie etwas bereitstellen.
Wenn Sie die Bearbeitung Ihrer Intercepts abgeschlossen haben, veröffentlichen werden.
Wenn Sie bereit sind, Ihre Änderungen live auf Ihrer Website durchzuführen, aktivieren Ihre Intercepts.
Bereitstellungscode für Ihre Entwickler abrufen
Ressourcen für Entwicklungsteams
Wir haben ein paar Ressourcen, die Deinem Entwicklungsteam helfen können, sobald es über den Code verfügt:
Ergebnisse analysieren
Jedes Kreative, das Sie erstellt haben, wird mit einer Statistikseite geliefert. Hier erhalten Sie eine Vorstellung davon, wie viele Klicks und Impressionen Ihr Creative in einem bestimmten Zeitraum generiert hat, und sogar 2 Kreative miteinander vergleichen. Sie können diese Daten sogar in eine Tabellenkalkulation herunterladen.
Eingebettete Daten
Wenn Sie Ihren Intercepts eingebettete Daten hinzugefügt haben, eröffnet dies eine Welt von Möglichkeiten in Bezug auf das Reporting.
Eingebettete Daten, die über eine Qualtrics-Umfrage gesammelt werden, können genauso wie alle anderen Umfragedaten gemeldet werden. Das bedeutet, dass es in Umfrageberichte und CX-Dashboards integriert werden kann und eine größere Story mit allen in Ihrem Programm gesammelten Daten erzählt.
Im Folgenden finden Sie einige Seiten, auf denen Sie beginnen können:
- Eingebettete Daten
- Ergebnisse vs. Berichte
- Erste Schritte mit CX-Dashboards
Tipp: CX Dashboards sind nur mit CX-Lizenzen verfügbar. Wenn Sie keinen Zugriff auf CX-Dashboards haben und mehr erfahren möchten, wenden Sie sich an Ihren Account Executive oder XM Success Manager.
Beispiel: Wir haben zwei verschiedene Feedback-Intercepts getestet. Diese nebeneinander angezeigten Zahlendiagramm-Widgets vergleichen, wie viele Antworten jede Version gesammelt hat.
Beispiel: Ein einfaches Diagramm-Widget, das einen Vergleich der auf der Website aufgewendeten Zeit nach der Bereitstellung einer Version des Creatives mit einer anderen anzeigt.
Beispiel: Ein Balkendiagramm, in dem die Antworten für jede Version des Creatives verglichen werden.