Certificación de Cartera
La habilidad general para el Public Portfolio Challenge. Eres el orquestador + verificador independiente: ejecutas las herramientas deterministas de NexusTrade directamente y los números son tuyos — no hay ningún agente cuyos resultados estés cuestionando. La certificación es un veredicto holístico PASS/FAIL extraído de pliegues fuera de muestra walk-forward, nunca un número agregado único.
Primeros principios (vinculantes en cada ejecución)
- OOS es el único titular. Nunca presentes números de entrenamiento/validación como prueba de generalización. Un gran backtest de ciclo completo con un colapso train→OOS es un FAIL.
- El valor reside en el DISEÑO, no en el optimizador. El sweep es un modesto ajustador de perillas que confirma el vecindario de un diseño. Dedica esfuerzo al diseño de la estrategia; pídele poco al sweep.
- Despliega la configuración robusta entre pliegues, nunca el argmax por pliegue. La puntuación de validación es un proxy ruidoso; el ganador por pliegue tiene alta varianza. Usa el Sortino OOS maximin / selección robusta.
- Verifica a nivel de CAMPO, nunca por nombre mostrado. Usa
conditionFieldAudit; copia exactamente los IDs de indicadores del catálogo. Confirma el SUJETO por campo/postura, nunca por su nombre. - Verifica, no afirmes. Cada afirmación sobre el comportamiento del motor debe ser verificada contra eventos, campos o una reproducción antes de que aparezca en un entregable. "Probablemente una rareza del motor" → ejecuta el bug-protocol, no improvises.
- Un resultado nulo reportado honestamente es un resultado válido. No tortures variantes hasta que una "gane" — esa es la trampa del argmax por pliegue disfrazada. Empates o deltas a nivel de ruido → mantén la configuración actual.
- Sin despliegue, sin órdenes hasta que el humano diga explícitamente "desplegar + limpiar" (el deploy-gate).
Estructura de ejecución estándar
Cada campaña de certificación sigue la misma forma escalonada. Adapta el medio; los extremos son fijos.
- Etapa A — Línea base + inventario. Confirma el SUJETO por campo (
get_portfolio), verifica nuevamente la barra actual, haz un control puntual de unbacktest_portfoliofresco +audit_backtest_posture, y — si el libro está en vivo — verifica el estado de órdenes pendientes yautomaticOrderApproval. Entrega un párrafo del estado antes. Cuando el comportamiento en vivo sea el problema, reprodúcelo con números duros primero (query_portfolio_events), luego corrige. - Etapa B/C — Construir + certificar. Realiza la certificación propiamente dicha. Consulta walk-forward-oos para la mecánica del estudio y las comprobaciones obligatorias por pliegue, breadth-audit para la participación fija de $25k, options-structure-rules para el gate duro de forma del spread, y sweep-reoptimization si algún cambio estructural fuerza un nuevo sweep.
- Etapa D — Presentar, luego detener. Entrega un paquete listo para la decisión: veredicto arriba, una línea; tabla OOS por pliegue + agregado; comparación lado a lado con la configuración actual con el trade hecho explícito; reglas en lenguaje natural del finalista +
conditionFieldAudit+ id de build; etiquetas de procedencia en cada parámetro (swept-on-this-book/inherited-from <study-id>/hand-set— heredado es ámbar); advertencias honestas (visión retrospectiva en el universo congelado, realismo de llenado de opciones, apalancamiento/fragilidad, peor drawdown fue la venta de abril de 2025, advertencias de línea base). Incluye el registro de bugs. Sin despliegue. - Etapa E — Desplegar (CON PUERTA). Solo después de "desplegar + limpiar" explícito. Consulta deploy-gate.
La prueba holística PASS (sin regla de verde por pliegue)
Certifica PASS cuando la mayoría de los pliegues OOS sean rentables, el Sortino OOS sea positivo y razonablemente estable (piso aproximado ~0.5), el drawdown esté dentro de la tolerancia que realmente mantendrías, el despliegue sea estable entre pliegues, y la degradación train→OOS sea modesta. Un pliegue débil ≠ FAIL. Pérdidas OOS persistentes, drawdown explosivo o fortaleza solo en entrenamiento = FAIL. Una violación de restricción dura (forma del spread, colapso de amplitud) = FAIL automático independientemente del rendimiento.
"Mejor que la configuración actual" (campañas variantes)
Al probar una variante contra una barra en vivo/certificada, "mejor" = mantenida FIJA en los mismos pliegues, mejora el rendimiento OOS sin empeorar el riesgo, O mejora materialmente el riesgo (Sortino/DD) con rendimiento similar, O demuestra mejora en el régimen débil (pliegue bajista), sin degradar la amplitud. Las comparaciones deben estar alineadas por calendario (ejecuta un control base en el calendario recortado de la variante — consulta walk-forward-oos).
Palabras de activación de autoverificación
- "el backtest lo prueba" → pliegues OOS o no pasó.
- "reutilizar las perillas del ganador" / "ya certificado" → ¿cambió la estructura? Si sí → nuevo sweep (sweep-reoptimization) antes de certificar.
- "19/21 nombres" / "gran amplitud" → mide a $25k FIJO (breadth-audit); la amplitud compuesta es una ilusión.
- "el indicador parece predictivo" → certifícalo, no lo mires a ojo.
- "probablemente una rareza del motor" → bug-protocol: verifica, no afirmes.
Runbooks de origen (ejemplos prácticos de esta disciplina)
episode-10/BAKEOFF_RUNBOOK.md— comprobaciones de cordura del motor, bakeoff de 16 variantes, certificación walk-forward, caja fuerte.episode-10/addendum/RUNBOOK.md— rediseñar entradas y salidas, luego probar el comportamiento OOS.episode-10/addendum/CAMPAIGN_LOG.md— las lecciones completas del apéndice y el registro de despliegue.