Certificación Walk-Forward Fuera de Muestra
El motor determinista fuera de muestra. Walk-forward, modo de validación, anclado, 5 pliegues, 2022→hoy — los pliegues OOS son el veredicto, no un único backtest.
La llamada al estudio
mcp__nexustrade__run_walk_forward_study (las herramientas se cargan de forma diferida — usa ToolSearch). Siempre ejecuta
preview_only: true PRIMERO para ver el calendario de pliegues + el costo, confirma que abarca de 2022→hoy (debe incluir
tanto el bear market de 2022 como la venta masiva de abril de 2025 — la mayor caída de este libro es un evento de abril de 2025,
por lo que los pliegues deben cubrirlo), luego cambia a false y registra el study_id.
{
"portfolio_id": "<SUJETO o un clon limpio>",
"global_start_date": "2022-01-01",
"global_end_date": "<HOY>",
"fold_count": 5,
"walk_forward_mode": "anchored",
"mode": "validation", // OOS independiente por pliegue
"oos_width_days": 252,
"embargo_days": 14,
"interval": "Day",
"inner_mode": "backtest_only", // certifica el libro FIJO — sin optimizador por pliegue
"preview_only": true // cambia a false para ejecutar realmente
}
- Certificar un libro fijo:
inner_mode: "backtest_only"(engine_kind ga/default — un sweep es rechazado para una certificación de configuración fija). - Reoptimizar (solo en caso de FALLO o un cambio estructural):
engine_kind: "sweep",inner_mode: "optimize",certification: true, másgene_intents. GA sobreajusta y es rechazado para la certificación de despliegue — sweep es la ruta certificada. Ver sweep-reoptimization. certification: trueaplica la política de piso de actividad +percentChange ≥ 0+sortino ≥ 0.5y establecevalidation_percenten 50 de forma predeterminada.
Pre-vuelo antes de certificar un libro en vivo
get_portfolio— captura el conjunto de estrategias,conditionFieldAudity la escalera de salida.- Elimina el LaunchAgent. Una estrategia LaunchAgent no puede ejecutarse históricamente — se dispara una vez y registra
miles de eventos
cooldownSkip, contaminando los pliegues. Certifica un clon sin LaunchAgent (solo reglas de rebalanceo y cierre) e indica que lo hiciste. - Verificación de forma de spread de las estructuras en vivo (ver options-structure-rules). Un spread vertical de largo plazo es una violación grave → el libro no puede certificarse tal cual; ve directamente a reopt.
- Footgun del límite de convexidad: si existen múltiples cierres de toma de ganancias "siempre" (por ejemplo, P/L ≥ 20% / 50% / 200%), el más bajo se aplica primero y limita cada ganador a aproximadamente +20%, anulando la lógica de las opciones de compra directas. Señálalo: es la razón más probable por la que los rendimientos van por detrás de un libro que deja correr las ganancias.
Monitorear el estudio
Consulta list_walk_forward_studies / get_walk_forward_study_results <study_id> hasta que esté en estado
terminal (COMPLETE / ERROR / CANCELLED). Analiza con jq — los payloads son grandes, no los vuelques. Presta atención a
modos de fallo conocidos y muéstralos (no los ocultes; eso es un desencadenante del bug-protocol):
- Fallo silencioso / ERROR — sin estadísticas de pliegues /
validationAggregatevacío. Repórtalo; no inventes un veredicto. - Ventana incorrecta — el calendario de pliegues no comienza en 2022-01-01 / se salta el bear market.
- Contaminación del backtest — LaunchAgent disparándose en los pliegues (debería haberse eliminado en el pre-vuelo).
- Pliegues sin operaciones / NaN — corrupción en el marcado de posiciones upstream; reporta qué pliegues, nunca promedies sobre NaN.
- Un estudio realmente atascado más allá de su costo/tiempo estimado → detente, resume, espera al humano (el motor puede estar en reparación en otra pestaña).
Las verificaciones obligatorias por pliegue (estas SON el veredicto)
- Tabla OOS por pliegue — para cada pliegue: ventana de entrenamiento, ventana OOS, retorno OOS, maxDD OOS, Sortino OOS,
despliegue mediano, subyacentes distintos, participación. Además del
validationAggregate. - Verificación puntual con backtest independiente —
backtest_portfolio($25k) en el ciclo completo (2022-01-01→hoy), el bear market de 2022 (2022-01-01→2023-01-01), y los últimos 12 meses;audit_backtest_posturepara la ejecución del ciclo completo. Los pliegues del estudio deben coincidir con un backtest independiente nuevo. La línea base no es SPY para un libro de opciones — usa un subyacente material o un universo B&H de igual ponderación, y menciónalo. - Degradación — entrenamiento vs OOS por pliegue. Una gran caída de entrenamiento→OOS = sobreajuste, incluso si el backtest del ciclo completo se ve bien.
- Honestidad en el drawdown — maxDD OOS junto al retorno OOS por pliegue; lidera con el riesgo. Con este apalancamiento, un pliegue puede mostrar un retorno enorme y un drawdown del 50–77%.
- Puerta de amplitud a $25k FIJOS (breadth-audit).
- Reproducibilidad / auditoría de campo —
conditionFieldAuditcoincide con los controles previstos;compare_backtests {tolerance_bps: 0}en una re-ejecución. Verifica por campo, nunca por nombre mostrado. - Cumplimiento de forma de spread (options-structure-rules) — rechazo absoluto ante violación.
Alineación de calendarios (variante vs base)
El motor walk-forward recorta el calendario de pliegues para que coincida con la cobertura del indicador/los datos, por lo que
el estudio de una variante puede obtener pliegues diferentes silenciosamente a los de la base. Siempre ejecuta un CONTROL base con el
mismo global_end_date que el calendario recortado de la variante y compara pliegue por pliegue. Reporta
la cobertura de señal por pliegue junto al OOS por pliegue. Una variante que solo gana donde existe la señal es un
hallazgo, no un truco, pero menciónalo.