Shamalo example
concevoir-une-experience
Shamalo example: scoping an experiment before building it (hypothesis, metric, MDE, n, duration, SRM).
MIT
Concevoir une expérience
Exemple Shamalo pour enseigner le format SKILL.md. Ce n’est pas une skill officielle.
Quand l’activer
Un test sans métrique, sans MDE et sans date de fin n’est pas un test. C’est un peeking organisé.
Faire, dans cet ordre
- Écrire l’hypothèse en une phrase (
si X, alors Y bouge de Z parce que…). - Nommer une métrique primaire. Le reste est secondaire.
- Fixer le MDE (effet minimum qui justifie le chantier).
- Calculer le n par variante, puis la durée calendaire.
- Vérifier le SRM dès le premier jour. Un split cassé invalide la suite.
Ne pas faire
- Ajouter une variante « pour voir ».
- Changer la métrique primaire en cours de route.
- Lire un p-value avant la fin prévue.
Suite
Les calculs vivent dans le centre de ressources (taille-echantillon, mde, duree-test, srm). Ce skill dit seulement dans quel ordre les enchaîner.
--- name: concevoir-une-experience description: Cadre une expérience A/B avant de la coder — hypothèse, métrique primaire, MDE, n et durée. À utiliser quand quelqu’un veut « juste lancer un test » sans plan. license: MIT metadata: author: shamalo origin: teaching-example --- # Concevoir une expérience Exemple Shamalo pour enseigner le format SKILL.md. Ce n’est pas une skill officielle. ## Quand l’activer Un test sans métrique, sans MDE et sans date de fin n’est pas un test. C’est un peeking organisé. ## Faire, dans cet ordre 1. Écrire l’hypothèse en une phrase (`si X, alors Y bouge de Z parce que…`). 2. Nommer **une** métrique primaire. Le reste est secondaire. 3. Fixer le MDE (effet minimum qui justifie le chantier). 4. Calculer le n par variante, puis la durée calendaire. 5. Vérifier le SRM dès le premier jour. Un split cassé invalide la suite. ## Ne pas faire - Ajouter une variante « pour voir ». - Changer la métrique primaire en cours de route. - Lire un p-value avant la fin prévue. ## Suite Les calculs vivent dans le centre de ressources (`taille-echantillon`, `mde`, `duree-test`, `srm`). Ce skill dit seulement **dans quel ordre** les enchaîner.