Hypothèse CRO

Définition

Une hypothèse d’expérimentation relie un constat empirique, un changement, une métrique primaire, une ampleur attendue, et un moyen de mesure. « On devrait mettre le bouton en plus gros » n’est pas une hypothèse. « Le CTA sous la ligne de flottaison n’est cliqué que par 4 % des sessions ; le remonter au-dessus du fold devrait lever le CVR de 0,3 à 0,4 point, mesuré sur 2 semaines, utilisateurs uniques » en est une.

Les scores ICE / PXL aident à prioriser une file. Ils ne remplacent pas le calcul de valeur attendue ni le MDE : une hypothèse « impact 8/10 » que le trafic ne peut pas détecter est de la fiction.

Quand ça compte

Avant chaque test, à l’écrit, partagée. C’est le contrat qui empêche de changer de métrique primaire à J+4. C’est aussi l’entrée du plan de marquage : si l’événement n’existe pas, l’hypothèse n’est pas testable.

En revue de résultats, on relit l’hypothèse, pas le dashboard. Un effet significatif sur une métrique secondaire n’« confirme » pas une hypothèse écrite sur une autre.

Pièges

Empiler trois changements dans une variante (« on en profite »). Prévoir un lift de +30 % parce que le sprint doit « valoir le coup ». Recaser l’hypothèse après coup pour coller au winner. Utiliser ICE comme excuse pour ne pas estimer le n.

Termes liés

• Conversion
• MDE
• Lift

Outil associé

Trafic, lift espéré, valeur d’une conversion, coût d’implémentation : prioriser sur des euros : Ouvrir valeur attendue d’un test.