A/B Resultados de los ensayos y informes
ShopGuideEstá incorporado . A/B El ensayo divide el tráfico entre variantes y vincula el resultado con el real Shopify Aquí está exactamente lo que hay en los resultados.
Cómo se asignan los visitantes
Una prueba tiene un nombre, una fecha de inicio y final, y un tráfico dividido en hasta tres variantes digamos, control, charla, y Las principales cada uno con un porcentaje objetivo. ShopGuide registros de qué variante aterrizaron, si vieron el widget de chat y si interactuaron con él.
Lo que los resultados contienen realmente
Para cada variante:
- Los usuarios visitantes únicos asignados a ella
- Vistas de chat / interacciones de chat ¿Cuántos abrieron el widget y cuántos enviaron un mensaje?
- Pedidos y ingresos extraído directamente de Shopify las órdenes etiquetadas con la variante (a través de un
ab_test_variantel atributo de pedido), filtrado en su canal de ventas en línea y el rango de fechas de la prueba - Taja de conversión pedidos divididos por usuarios
- Valor promedio del pedido Total de ingresos por variantes divididos por número de órdenes de variantes
Puede leer los resultados mientras se está ejecutando una prueba, usando la fecha actual como final de la ventana, o después de que esté terminada, usando la fecha de final configurada.
Lo que no se calcula
No hay valores p, no hay intervalos de confianza, no hay prueba de significancia estadística. si la diferencia entre las variantes parece real, eso es una decisión de juicio que estás haciendo, no una reclamación ShopGuide trata los números como direccionales, especialmente con un pequeño número de usuarios o órdenes en cualquiera de las variantes, y aplica tu propia prueba de significado si necesitas estar seguro antes de actuar.