The smallest lift the test has a good chance of detecting if it exists, with 80% power and a 5% risk. The smaller it is, the more visitors you need: aiming for an effect half as large takes about four times as many visitors.
Autre nom : MDE
Le Revenue per visitor de l’originale vaut €24.58, avec un écart type de €58.28 par visiteur: la plupart des visiteurs n’achètent rien, quelques-uns achètent beaucoup. Avec 58,900 visiteurs prévus, l’effet détectable minimal est de 5.5%, à 80% de puissance et 5% de risque.
Lu une seule fois, un test qui vise 5.5% demande 28,958 visiteurs par version. Pour viser 2.8%, il en faudrait 115,831: 4.0 fois plus, car l’effectif croît comme l’inverse du carré de l’effet visé.
Chiffres calculés par le moteur de Probant sur la boutique de démonstration, Maison Lune, fictive : ouvrir la démo.
The probability of detecting the target effect if it really exists. Probant plans at 80% power: a real effect of the target size goes unnoticed 20% of the time.
The number of visitors set by the test plan before launch, based on the target effect and the area’s traffic. Until it’s reached, only a boundary crossed at a checkpoint allows a decision.
The probability of declaring a winner when the two versions perform the same. Probant holds it at 5% over the whole test, checkpoints included. Reading a test every day at the usual threshold pushes it far higher.
Create your workspace, or explore the demo first with data from a fictional store.