Erstellen und Ausführen eines A/B-Tests

Diese Seite behandelt den klassischen A/B-Test-Workflow.

Für die Anleitung zur neuen UI siehe Verwendung der neuen UI für A/B Tests.

Neuen A/B-Test erstellen

1. Öffnen Weitere Einstellungen… in der linken Navigation.
2. Öffnen A/B Tests.

1. Wählen Sie den Kanal in der oberen Leiste aus.
2. Machen Sie den Kanal bearbeitbar.

Sie können A/B Tests in bearbeitbaren untergeordneten Kanälen und bearbeitbaren nicht-hierarchischen Kanälen erstellen.

Sie können sie nicht in übergeordneten Kanälen erstellen.

1. Klicken NEUEN TEST ERSTELLEN +.

A/B-Test konfigurieren

1. Geben Sie dem Test einen aussagekräftigen Namen.
2. Wählen Sie BIS ZIELWIRKUNG ERREICHT IST wenn Sie statistisch zuverlässige Ergebnisse benötigen.

Vermeiden Sie ein festes Enddatum, sofern statistische Signifikanz für diesen Test nicht wichtig ist.

1. Legen Sie das Startdatum und die Startzeit fest.

Legen Sie den Start weit genug in der Zukunft fest, um Ihre Änderungen an Variante B abzuschließen.

Nachdem die konfigurierte Startzeit verstrichen ist, können Sie Variante B nicht mehr ändern.

1. Belassen Sie die anderen Werte auf ihren Standardwerten, sofern Sie keine spezielle Konfiguration benötigen.
2. Klicken TEST ERSTELLEN.
3. Speichern Sie die Transaktion.

Verwenden Sie um die Transaktion zu speichern und zu schließen.

Ein Backup-Kommentar wird angefordert, damit Sie das Backup später identifizieren können.

Verwenden Sie um die Änderungen zu verwerfen und die Transaktion zu schließen.

1. Aktualisieren Sie Ihre Shop-Daten.

Variante B bearbeiten

1. Wählen Sie die B-Variante Ihres A/B-Tests aus.
2. Machen Sie sie bearbeitbar.
3. Ändern Sie nur die Einstellungen, die Sie messen möchten.

Diese Änderungen gelten nur für Variante B.

Sie wirken sich nicht auf die Basiskonfiguration aus.

Halten Sie den Umfang klein.

Das macht die Ergebnisse leichter interpretierbar.

Für die Liste der unterstützten Funktionen siehe A/B-Test.

Um zur Basiskonfiguration zurückzukehren, wählen Sie Basiskonfiguration im A/B-Test-Auswahlfeld.

A/B-Test ausführen

1. Öffnen Sie die Testaktionen mit .
2. Auswählen Test starten.
3. Speichern Sie die Konfiguration.

Es ist unbedenklich, den Test vor der geplanten Zeit zu starten.

Der Test wartet weiterhin auf die konfigurierte Startzeit.

1. Aktualisieren Sie Ihre Daten.

Der A/B-Test startet zur konfigurierten Startzeit.

Wenn er endet, zeigt der Status abgeschlossen und Vor ... beendet.

Vermeiden Sie, mehrere A/B Tests gleichzeitig im selben Kanal auszuführen.

A/B-Testergebnisse analysieren

1. Wählen Sie den Kanal aus, der den abgeschlossenen A/B-Test enthält.
2. Machen Sie den Kanal bearbeitbar.
3. Überprüfen Sie die Ergebnisse.

Wichtige Kennzahlen:

• Suchanzahl
• Klickrate %
• Konversionsrate %
• Umsatz pro Suche ∅

Öffnen Sie die Kopfzeile einer Kennzahl für weitere Details.

Vergleichen Sie die Baseline und Variante B.

In der Regel deuten höhere Werte auf eine bessere Leistung hin.

Im obigen Beispiel schneidet Variante B bei Klickrate und Konversionsrate besser ab.

Variante A schneidet bei Umsatz pro Suche besser ab.

Auswählen Analyse starten für ein detaillierteres Ergebnis.

A/B-Test abschließen

1. Wählen Sie den Kanal aus, der den abgeschlossenen A/B-Test enthält.
2. Machen Sie den Kanal bei Bedarf bearbeitbar.
3. Wählen Sie die Endaktion:

• Klicken Variante B anwenden um die getestete Konfiguration auszurollen.
• Klicken Variante A beibehalten um die Baseline beizubehalten.

Wenn die Zuverlässigkeit unklar ist, behalten Sie die Baseline bei und wiederholen Sie den Test.

Verwenden Sie BIS ZIELWIRKUNG ERREICHT IST anstelle eines festen Enddatums, wenn statistische Gültigkeit wichtig ist.

1. Speichern Sie die Änderungen am Kanal.