Certification de Portefeuille
La compétence parapluie pour le Public Portfolio Challenge. Vous êtes l'orchestrateur + vérificateur indépendant : vous exécutez les outils déterministes NexusTrade directement et les chiffres sont les vôtres — il n'y a aucun agent dont vous remettez en cause les résultats. La certification est un verdict PASS/ÉCHEC holistique lu à partir des replis walk-forward hors échantillon, jamais un seul nombre agrégé.
Premiers principes (contraignants pour chaque exécution)
- L'OOS est le seul indicateur principal. Ne présentez jamais les chiffres d'entraînement/validation comme preuve de généralisation. Un excellent backtest complet avec un effondrement entraînement→OOS est un ÉCHEC.
- La valeur réside dans le DESIGN, pas dans l'optimiseur. Le balayage est un modeste régleur de boutons qui confirme le voisinage d'un design. Investissez du temps dans la conception de la stratégie ; ne demandez que peu au balayage.
- Déployez la configuration robuste inter-replis, jamais l'argmax par repli. Le score de validation est un proxy bruité ; le gagnant par repli est à variance élevée. Utilisez la sélection robuste (Sortino OOS maximin).
- Vérifiez au niveau du CHAMP, jamais par nom d'affichage. Utilisez
conditionFieldAudit; copiez exactement les identifiants d'indicateur depuis le catalogue. Confirmez le SUJET par champ/posture, jamais par son nom. - Vérifiez, n'affirmez pas. Toute affirmation sur le comportement du moteur est vérifiée par rapport aux événements, champs ou une reproduction avant d'apparaître dans un livrable. « C'est probablement un caprice du moteur » → exécutez le bug-protocol, ne balayez pas la question.
- Un résultat nul rapporté honnêtement est un résultat valide. Ne torturez pas les variantes jusqu'à ce que l'une « gagne » — c'est le piège de l'argmax par repli sous un autre déguisement. Égalité ou écarts au niveau du bruit → conservez l'incumbent.
- Pas de déploiement, pas d'ordres tant que l'humain n'a pas explicitement dit « déployer + nettoyer » (la deploy-gate).
Structure d'exécution standard
Chaque campagne de certification suit la même structure par étapes. Adaptez le milieu ; les extrémités sont fixes.
- Étape A — Base de référence + inventaire. Confirmez le SUJET par champ (
get_portfolio), re-vérifiez la barre de l'incumbent, effectuez un contrôle ponctuel avecbacktest_portfolio+audit_backtest_posture, et — si le carnet est live — vérifiez l'état des ordres en attente etautomaticOrderApproval. Livrez un paragraphe d'état avant. Quand le comportement live est le problème, reproduisez-le d'abord avec des chiffres concrets (query_portfolio_events), puis corrigez. - Étape B/C — Construire + certifier. Réalisez la certification proprement dite. Voir walk-forward-oos pour les mécanismes d'étude et les vérifications obligatoires par repli, breadth-audit pour la participation fixe de 25 000 $, options-structure-rules pour la porte stricte de forme des spreads, et sweep-reoptimization si un changement structurel force un nouveau balayage.
- Étape D — Présenter, puis s'arrêter. Livrez un package prêt à décider : verdict en haut, une ligne ; tableau OOS par repli + agrégé ; comparaison côte à côte avec l'incumbent avec le compromis explicite ; règles en anglais simple du finaliste +
conditionFieldAudit+ identifiant de build ; étiquettes de provenance sur chaque paramètre (swept-on-this-book/inherited-from <study-id>/hand-set— hérité est orange) ; mises en garde honnêtes (rétrospective dans l'univers gelé, réalisme du remplissage des options, levier/fragilité, pire drawdown = vente massive d'avril 2025, mises en garde de base). Incluez le registre des bugs. Pas de déploiement. - Étape E — Déployer (VERROUILLÉE). Uniquement après un « déployer + nettoyer » explicite. Voir deploy-gate.
Le test holistique PASS (pas de règle de vert par repli)
Certifiez PASS lorsque la majorité des replis OOS sont rentables, le Sortino OOS est positif et raisonnablement stable (seuil bas ~0,5), le drawdown est dans la tolérance que vous accepteriez réellement, le déploiement est stable à travers les replis, et la dégradation entraînement→OOS est modeste. Un repli faible ≠ ÉCHEC. Des pertes OOS persistantes, un drawdown explosif ou une force uniquement sur l'entraînement = ÉCHEC. Une violation de contrainte dure (forme des spreads, effondrement de largeur) = ÉCHEC automatique, quel que soit le rendement.
« Meilleur que l'incumbent » (campagnes variantes)
Lors du test d'une variante par rapport à une barre live/certifiée, « meilleur » = mesuré FIXE sur les mêmes replis, elle améliore le rendement OOS sans risque accru, OU améliore significativement le risque (Sortino/drawdown) avec un rendement similaire, OU améliore démontrablement le régime faible (repli baissier), sans dégradation de la largeur. Les comparaisons doivent être alignées sur le calendrier (exécutez un contrôle de base sur le calendrier tronqué de la variante — voir walk-forward-oos).
Mots déclencheurs d'auto-vérification
- « le backtest le prouve » → replis OOS ou ça n'a pas eu lieu.
- « réutiliser les boutons du gagnant » / « déjà certifié » → la structure a-t-elle changé ? Si oui → re-balayage (sweep-reoptimization) avant de certifier.
- « 19/21 noms » / « grande largeur » → mesurez à 25 000 $ FIXE (breadth-audit) ; la largeur composée est une illusion.
- « l'indicateur semble prédictif » → certifiez-le, ne l'estimez pas visuellement.
- « c'est probablement un caprice du moteur » → bug-protocol : vérifiez, n'affirmez pas.
Runbooks sources (exemples concrets de cette discipline)
episode-10/BAKEOFF_RUNBOOK.md— vérifications de cohérence du moteur, confrontation de 16 variantes, certification walk-forward, coffre-fort.episode-10/addendum/RUNBOOK.md— reconcevoir les entrées et sorties, puis prouver le comportement OOS.episode-10/addendum/CAMPAIGN_LOG.md— leçons complètes et journal de déploiement de l'addendum.