Certification Walk-Forward OOS
Le moteur déterministe hors échantillon. Walk-forward, mode validation, ancré, 5 folds, 2022→aujourd'hui — les folds OOS sont le verdict, pas un seul backtest.
L'appel d'étude
mcp__nexustrade__run_walk_forward_study (les outils sont différés — charger via ToolSearch). Toujours exécuter
preview_only: true D'ABORD pour voir le calendrier des folds + le coût, confirmer qu'il couvre 2022→aujourd'hui (doit inclure
à la fois le marché baissier de 2022 et la vente d'avril 2025 — le drawdown le plus profond de ce livre est un événement
d'avril 2025, donc les folds doivent le couvrir), puis basculer à false et enregistrer le study_id.
{
"portfolio_id": "<SUJET ou un clone propre>",
"global_start_date": "2022-01-01",
"global_end_date": "<AUJOURD'HUI>",
"fold_count": 5,
"walk_forward_mode": "anchored",
"mode": "validation", // OOS indépendant par fold
"oos_width_days": 252,
"embargo_days": 14,
"interval": "Day",
"inner_mode": "backtest_only", // certifier le livre FIXE — pas d'optimiseur par fold
"preview_only": true // basculer à false pour réellement exécuter
}
- Certifier un livre fixe :
inner_mode: "backtest_only"(engine_kind ga/default — un sweep est rejeté pour une certification de configuration fixe). - Réoptimiser (uniquement sur ÉCHEC ou un changement structurel) :
engine_kind: "sweep",inner_mode: "optimize",certification: true, plusgene_intents. GA surajuste et est rejeté pour la certification de déploiement — sweep est le chemin certifié. Voir réoptimisation-sweep. certification: trueapplique la politique de plancher d'activité +percentChange ≥ 0+sortino ≥ 0.5et définitvalidation_percentpar défaut à 50.
Pré-vol avant de certifier un livre en direct
get_portfolio— capturer l'ensemble des stratégies, leconditionFieldAuditet l'échelle de sortie.- Retirer le LaunchAgent. Une stratégie LaunchAgent ne peut pas s'exécuter historiquement — elle se déclenche une fois et enregistre
des milliers d'événements
cooldownSkip, contaminant les folds. Certifier un clone sans LaunchAgent (règles de rééquilibrage + de clôture uniquement) et mentionner l'avoir fait. - Vérification de la forme des spreads des structures en direct (voir règles-de-structure-options). Un spread vertical à longue échéance est une violation stricte → le livre ne peut pas être certifié en l'état ; aller directement à la réopt.
- Piège du plafond de convexité : si plusieurs prises de bénéfices "toujours" existent (par ex. P/L ≥ 20 % / 50 % / 200 %), la plus basse s'applique en premier et plafonne chaque gagnant à environ +20 %, annulant la logique d'achat pur. Le signaler — c'est la raison la plus probable pour laquelle les rendements sont inférieurs à un livre laissant courir les gagnants.
Surveiller l'étude
Interroger list_walk_forward_studies / get_walk_forward_study_results <study_id> jusqu'à l'état terminal
(COMPLETE / ERROR / CANCELLED). Analyser avec jq — les charges utiles sont volumineuses, ne pas les décharger. Surveiller
les modes d'échec connus et les signaler (ne pas les masquer — c'est un déclencheur protocole-bogue) :
- Échec silencieux / ERROR — aucune statistique de fold /
validationAggregatevide. Le signaler ; ne pas inventer un verdict. - Fenêtre erronée — le calendrier des folds ne commence pas le 2022-01-01 / saute le marché baissier.
- Contamination du backtest — LaunchAgent se déclenchant dans les folds (aurait dû être retiré lors du pré-vol).
- Folds sans trade / NaN — corruption du marquage de position en amont ; signaler quels folds, ne jamais moyenner sur des NaN.
- Une étude réellement bloquée au-delà de son coût/temps estimé → arrêter, résumer, attendre l'humain (le moteur peut être en réparation dans un autre onglet).
Les vérifications obligatoires par fold (ce SONT le verdict)
- Tableau OOS par fold — pour chaque fold : fenêtre d'entraînement, fenêtre OOS, rendement OOS, maxDD OOS, Sortino
OOS, déploiement médian, sous-jacents distincts, participation. Plus le
validationAggregate. - Vérification ponctuelle par re-backtest indépendant —
backtest_portfolio(25 000 $) sur le cycle complet (2022-01-01→aujourd'hui), le marché baissier de 2022 (2022-01-01→2023-01-01) et les 12 derniers mois ;audit_backtest_posturel'exécution du cycle complet. Les folds d'étude doivent concorder avec un nouveau backtest autonome. La référence ≠ SPY pour un livre d'options — utiliser un sous-jacent matériel ou un univers B&H équipondéré, et le noter. - Dégradation — entraînement vs OOS par fold. Un effondrement important entraînement→OOS = surajustement, même si le backtest du cycle complet semble excellent.
- Honneteté du drawdown — maxDD OOS à côté du rendement OOS par fold ; commencer par le risque. À ce levier, un fold peut afficher un rendement énorme et un drawdown de 50 à 77 %.
- Porte de largeur à 25 000 $ FIXE (audit-largeur).
- Reproductibilité / audit des champs —
conditionFieldAuditcorrespond aux réglages prévus ;compare_backtests {tolerance_bps: 0}sur une réexécution. Vérifier par champ, jamais par nom d'affichage. - Conformité de la forme des spreads (règles-de-structure-options) — rejet strict en cas de violation.
Alignement calendaire (variante vs base)
Le moteur walk-forward ajuste le calendrier des folds à la couverture de l'indicateur/des données, donc
l'étude d'une variante peut obtenir silencieusement des folds différents de ceux de la base. Toujours exécuter un CONTROLE de base avec la
même global_end_date que le calendrier ajusté de la variante et comparer fold par fold. Signaler
la couverture du signal par fold à côté du OOS par fold. Une variante qui ne gagne que là où le signal existe est
une observation, pas une triche — mais le dire.