Erstellen und Ausführen eines A/B-Tests

Diese Seite behandelt den klassischen A/B-Test-Workflow.

Für die Anleitung zur neuen Benutzeroberfläche siehe Verwenden der neuen A/B-Tests-Benutzeroberfläche.

Neuen A/B-Test erstellen

1. Öffnen Weitere Einstellungen… in der linken Navigation.

2. Öffnen A/B-Tests.

1. Wählen Sie den Kanal in der oberen Leiste aus.

2. Machen Sie den Kanal bearbeitbar.

Sie können A/B-Tests in bearbeitbaren untergeordneten Kanälen und bearbeitbaren nicht-hierarchischen Kanälen erstellen.

In übergeordneten Kanälen können Sie sie nicht erstellen.

1. Klicken Sie auf NEUEN TEST ERSTELLEN +.

A/B-Test konfigurieren

1. Geben Sie dem Test einen aussagekräftigen Namen.

2. Wählen Sie BIS ZIELWIRKUNG ERREICHT wenn Sie statistisch zuverlässige Ergebnisse benötigen.

Vermeiden Sie ein festes Enddatum, es sei denn, statistische Signifikanz ist für diesen Test nicht wichtig.

1. Legen Sie das Startdatum und die Startzeit fest.

Legen Sie den Start so weit in der Zukunft fest, dass Sie Ihre Änderungen an Variante B abschließen können.

Nachdem die konfigurierte Startzeit verstrichen ist, können Sie Variante B nicht mehr ändern.

1. Belassen Sie die anderen Werte auf ihren Standardwerten, es sei denn, Sie benötigen ein bestimmtes Setup.

2. Klicken Sie auf TEST ERSTELLEN.

3. Speichern Sie die Transaktion.

Verwenden Sie um die Transaktion zu speichern und zu schließen.

Ein Backup-Kommentar wird angefordert, damit Sie das Backup später identifizieren können.

Verwenden Sie um die Änderungen zu verwerfen und die Transaktion zu schließen.

1. Aktualisieren Sie Ihre Shop-Daten.

Variante B bearbeiten

1. Wählen Sie die B-Variante Ihres A/B-Tests aus.

2. Machen Sie sie bearbeitbar.

3. Ändern Sie nur die Einstellungen, die Sie messen möchten.

Diese Änderungen gelten nur für Variante B.

Sie wirken sich nicht auf die Basiskonfiguration aus.

Halten Sie den Umfang klein.

Das macht die Ergebnisse leichter interpretierbar.

Für die Liste der unterstützten Funktionen siehe A/B-Test.

Um zur Basiskonfiguration zurückzukehren, wählen Sie Basiskonfiguration im A/B-Test-Selektor aus.

A/B-Test ausführen

1. Öffnen Sie die Testaktionen mit .

2. Wählen Sie Test beginnen.

3. Speichern Sie die Konfiguration.

Es ist sicher, den Test vor der geplanten Zeit zu starten.

Der Test wartet weiterhin auf die konfigurierte Startzeit.

1. Aktualisieren Sie Ihre Daten.

Der A/B-Test startet zur konfigurierten Startzeit.

Wenn er endet, zeigt der Status abgeschlossen und vor ... beendet.

Vermeiden Sie es, mehrere A/B-Tests gleichzeitig im selben Kanal auszuführen.

A/B-Test-Ergebnisse analysieren

1. Wählen Sie den Kanal aus, der den abgeschlossenen A/B-Test enthält.

2. Machen Sie den Kanal bearbeitbar.

3. Überprüfen Sie die Ergebnisse.

Wichtige Kennzahlen:

• Anzahl der Suchanfragen

• Klickrate %

• Conversion %

• Umsatz pro Suche ∅

Öffnen Sie einen Kennzahlenkopf für weitere Details.

Vergleichen Sie die Basislinie und Variante B.

In der Regel deuten höhere Werte auf eine bessere Leistung hin.

Im obigen Beispiel erzielt Variante B bessere Werte bei Klickrate und Conversion.

Variante A erzielt bessere Werte beim Umsatz pro Suche.

Wählen Sie Analyse starten für ein detaillierteres Ergebnis.

A/B-Test abschließen

1. Wählen Sie den Kanal aus, der den abgeschlossenen A/B-Test enthält.

2. Machen Sie den Kanal bei Bedarf bearbeitbar.

3. Wählen Sie die endgültige Aktion:

• Klicken Sie auf Variante B anwenden um die getestete Konfiguration auszurollen.

• Klicken Sie auf Variante A beibehalten um die Basis beizubehalten.

Wenn die Zuverlässigkeit unklar ist, behalten Sie die Basis bei und wiederholen Sie den Test.

Verwenden Sie BIS ZIELWIRKUNG ERREICHT anstelle eines festen Enddatums, wenn statistische Gültigkeit wichtig ist.

1. Speichern Sie die Änderungen am Kanal.