Configuration d'expériences, répartition des variantes, significativité statistique et intégration des indicateurs de fonctionnalité.
Qu'est-ce que B ?
Ce skill permet aux agents IA d'orchestrer des tests A/B robustes et fiables, du cadrage initial à l'analyse des résultats. Il établit des règles strictes pour garantir la validité statistique : affectation déterministe par hash, configuration centralisée des expériences, coupure du trafic côté serveur pour éviter le scintillement, et calcul préalable de la taille d'échantillon minimale. Compatible avec n'importe quelle plateforme de développement (Claude Code, Cursor, Codex, etc.), il s'appuie sur des méthodes éprouvées (test z pour les proportions, seuil de confiance à 95%) et des bonnes pratiques d'ingénierie comme l'isolation par couches d'expériences et l'utilisation d'indicateurs de fonctionnalité (feature flags). En évitant les pièges classiques (observation prématurée des résultats, modification des paramètres en cours de test, trop de variantes), ce skill transforme un processus complexe en une procédure standardisée et exécutable par un agent.