Avant le test : taille d’échantillon par variante, durée en semaines et plus petit uplift détectable avec votre trafic. Après le test : significativité, p-value, uplift et intervalle de confiance.
Avant le test : saisissez votre taux de conversion actuel, le plus petit uplift relatif qui vaut la peine d’être détecté, le trafic quotidien du test, le nombre de variantes, et vos niveaux de confiance et de puissance. Après le test : saisissez visiteurs et conversions du contrôle (A) et de la variante (B).
« Significatif » dit seulement que l’uplift n’est probablement pas nul. Un résultat de +17 % avec un intervalle de +2 % à +32 % signifie qu’il faut prévoir sur la borne basse. La plupart des calculateurs répondent oui ou non ; celui-ci donne la fourchette sur laquelle parier.
Si le test demande plus de huit semaines, la saisonnalité et la perte de cookies fragilisent le résultat. Testez des changements plus forts, testez plus haut dans l’entonnoir où les volumes sont plus grands, ou regroupez des pages similaires. Le calculateur indique le plus petit uplift détectable en quatre semaines avec votre trafic actuel.
Fixez la taille d’échantillon et la date de fin avant le lancement, et n’arrêtez pas le test dès qu’il passe au vert : regarder en cours de route multiplie les faux positifs.
Accédez aux playbooks et aux retours de ceux qui façonnent la prochaine vague du marketing et de l'IA.
