A/B-Test-Ergebnisse und Berichterstattung
Der integrierte A/B-Test von ShopGuide teilt den Datenverkehr auf Varianten auf und bindet das Ergebnis an echte Shopify-Bestellungen. Hier ist genau das, was in den Ergebnissen enthalten ist.
Wie Besucher zugewiesen werden
Ein Test hat einen Namen, ein Start- und ein Enddatum sowie eine Traffic-Verteilung auf bis zu drei Varianten – beispielsweiseKontrolle,ChatundHighlights–, wobei jede Variante einen Zielprozentsatz hat. Für jeden Besucher zeichnet ShopGuide auf, in welcher Variante sie gelandet sind, ob sie das Chat-Widget aufgerufen haben und ob sie damit interagiert haben.
Was die Ergebnisse tatsächlich enthalten
Für jede Variante:
-Nutzer– den ihm zugewiesenen eindeutigen Besucher
-Chat-Aufrufe/Chat-Interaktionen– wie viele Personen haben das Widget geöffnet und wie viele haben tatsächlich eine Nachricht gesendet?
-Bestellungen und Einnahmen-direkt aus Shopify-Bestellungen mit der Variante (über ein ab_test_variant-Bestell attribut) abgerufen, auf Ihren Online-Vertriebs kanal und den Daten bereich des Tests gefiltert
-Konversionsrate– Anzahl der Bestellungen geteilt durch die Anzahl der Nutzer
-Durchschnittlicher Bestellwert– Gesamterlös der Variante dividiert durch die Anzahl der Bestellungen der Variante
Sie können die Ergebnisse bereits während der Ausführung eines Tests ablesen, wobei das aktuelle Datum als Endzeitpunkt des Zeitfensters verwendet wird, oder nach Abschluss des Tests unter Verwendung des konfigurierten Enddatums.
Was nicht berechnet wird
Keine p-Werte, keine Konfidenzintervalle, kein Test auf statistische Signifikanz. Wenn ein Unterschied zwischen Varianten real aussieht, ist dies ein Urteils spruch, den Sie machen, und keine Behauptung, die ShopGuide für Sie aufstellt-behandeln Sie die Zahlen als richtungs weisend, insbesondere bei einer geringen Anzahl von Nutzern oder Bestellungen in einer der Varianten, und führen Sie bei Bedarf eigene Signifikanztests durch, um vor einer Entscheidung sichergehen zu können. Es gibt außerdem keine geografische Segmentierung der Ergebnisse und kein automatisiertes, schrittweises Rollout.