Communitygithub.com

austin-starks/Public-Portfolio-Challenge

Lockbox de toque único — um holdout final contra overfitting, executado uma única vez, após congelamento do design, em uma janela mantida fora de todas as dobras, varreduras e buscas.

O que é Public-Portfolio-Challenge?

Esta skill define o protocolo de lockbox de toque único e as três linhas de base (A/B/C) para validação final de portfólios em sistemas de negociação algorítmica. O lockbox é uma janela final de ~6 meses que nenhuma dobra, varredura ou busca jamais toca, sendo executada exatamente uma vez após o congelamento do design (Estágio S2). As condições de aprovação incluem retorno OOS do lockbox ≥ pior retorno OOS de dobra individual, maxDD ≤ 55%, postura limpa e amplitude ≥ 9 nomes elegíveis. A skill também cobre as três linhas de base (A: buy&hold de ações, B: escada LEAP ingênua, C: barreira incumbente congelada) usadas como barras OOS no Estágio S1, e o mecanismo S1.5 de relaxamento automático de coerência de gate, que ajusta deterministicamente a Baseline B quando as restrições de postura e superação são conjuntamente insatisfatórias. É suportada por ferramentas como `create_portfolio`, `audit_backtest_posture` e `audit_backtest_breadth`, e é projetada para plataformas que realizam busca walk-forward com dobras OOS, como sistemas de backtesting quantitativos.

Funciona com~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/austin-starks/Public-Portfolio-Challenge/tree/HEAD/skills/lockbox-holdout

Perguntar na sua IA favorita

Abre um novo chat com esta habilidade de agente já pré-carregada.

Documentação

Lockbox de Toque Único & Linhas de Base

O lockbox é um holdout final que nenhuma dobra, varredura ou busca jamais toca — a última linha de defesa contra pressão de seleção por ajuste ao calendário. Ele é distinto das dobras OOS walk-forward (walk-forward-oos), que são usadas repetidamente durante a busca; o lockbox é tocado exatamente uma vez.

O lockbox

  • O que: o período walk-forward para lockbox_width_days = 126 (~6 meses) antes da data de execução. Essa janela final (data de execução − 126d) → data de execução é o lockbox — mantido fora de TODAS as dobras, TODAS as varreduras, TODA a busca.
  • Como: apenas o livro consolidado em formato de deploy que já passou por todos os gates no agregado walk-forward é executado sobre o lockbox, exatamente uma vez, após o congelamento do design (Estágio S2).
  • Condições de aprovação (congeladas em S0, não as mova após ver os resultados):
    • retorno OOS do lockbox ≥ pior retorno OOS de dobra walk-forward individual;
    • maxDD do lockbox ≤ 55%;
    • postura limpa (audit_backtest_posture, todas as quatro condições);
    • amplitude ≥ 9 nomes elegíveis (audit_backtest_breadth — veja breadth-audit).

Toque único é absoluto

Se você olhar para o lockbox e depois iterar o design, o lockbox está queimado — recue o período walk-forward e segure uma nova cauda antes de qualquer deploy. Uma falha do lockbox é tratada como pressão de seleção por ajuste ao calendário e significa nenhum deploy, exceto por uma substituição registrada do proprietário que nomeie explicitamente o lockbox.

As três linhas de base (A/B/C) como barras OOS (Estágio S1)

Carregadas de snapshots/*.json commitados via create_portfolio. Pontue A e B no motor atual; copie os números publicados congelados de C como a barreira a ser superada.

  • A — buy&hold de ações (universo completo). Uma barreira de retorno apenas, nunca uma barreira de Sortino — seu Sortino reflete uma suavidade de rali de ações que um livro com prêmio longo alavancado não pode igualar.
  • B — escada LEAP ingênua (especificação canônica: todos os nomes, sem classificação/filtro, cadência de 14 dias, 8% do portfólio por nome sob orçamento de 95%, estrutura = primeiro degrau acessível de [Δ0,50 call → Δ0,55/0,25 → Δ0,55/0,40 → Δ0,50/0,42 vertical], todos 180–365 DTE, saída única em DTE ≤ 45). Uma barreira de Sortino apenas em dobras com amplitude ≥ 9/20.
  • C — barreira incumbente congelada com números OOS por dobra publicados, copiados integralmente (não reexecute para "melhorá-los").

S1.5 — Relaxamento automático de coerência de gate (determinístico, sem ida e volta do proprietário)

Antes de projetar, verifique se "superar a Baseline B" e o limite de postura ≤55% são conjuntamente satisfatórios — B é um livro com ~95% de implantação, portanto um finalista com limite de postura não pode superá-lo em implantação. Se insatisfatório, RELAXAMENTO AUTOMÁTICO da Baseline B: reduza o totalBudget de B até que sua implantação média diária mediana ≤ 55%, reexecute sua pontuação S1 e registre o B original vs. o B ajustado por postura. Isso não é um relaxamento de gate e não é uma decisão do proprietário — apenas o benchmark é tornado comparável; os limites permanecem congelados.

Individual skills in this repo

This repo contains 11 individual skills — each has its own dedicated page.

austin-starks/Public-Portfolio-Challenge

Build alternative-data custom indicators on NexusTrade (Reddit/WSB mentions, congressional disclosures, insider filings, news-flow) and wire them into a certified book as a rank/tilt/filter signal. Use when adding alt-data to a strategy, building a CustomIndicator via compute sessions, auditing lookahead safety or per-ticker coverage, or deciding whether a data series is dense enough to drive a rank. Covers the compute-session workflow, the sparse-series rule, and source recipes (see references/). Invoke with the NexusTrade MCP connected.

austin-starks/Public-Portfolio-Challenge

Measure a NexusTrade options book's TRUE participation at a fixed cold-start capital base, defeating the compounded-NAV breadth illusion. Use whenever a book's headline \"holds N/21 names\" needs validating, when a live book collapses to a single name (the OSCR trap), when checking whether a SelectTop / per-name-allocation / total-budget change degraded simultaneous participation, or when a certification needs a breadth gate. Uses audit_backtest_breadth at held-fixed $25k.

austin-starks/Public-Portfolio-Challenge

The \"loudly declare\" protocol for platform, engine, or data bugs during a NexusTrade certification campaign — bugs are a first-class deliverable, not something to route around. Use whenever a NexusTrade tool errors, hangs, or returns numbers that contradict the config; whenever you're tempted to write \"probably an engine quirk\"; or when a discovered bug invalidates prior backtests and results must be quarantined. Includes the bug hand-off doc template (see references/BUG_TEMPLATE.md).

austin-starks/Public-Portfolio-Challenge

The GATED deploy + cleanup flow for a NexusTrade live book — clone the finalist, preview a delta reconcile, stage UNAPPROVED orders, verify fills. Use ONLY after the human explicitly says \"deploy + clean up\" and names a finalist. Covers the clone-before-reconcile ordering, the single-tick reconcile expectation, stale-pending-order hygiene, the signal-freshness gate, and why you can never approve orders yourself. Nothing here runs during certification.

austin-starks/Public-Portfolio-Challenge

The mandatory pre-flight contract checks (Stage S0) that must pass before trusting NexusTrade's certification engine for any strategy work. Use at the start of a bakeoff or certification campaign to prove the walk-forward engine runs end-to-end, windows don't leak, fold winners persist, and the engine doesn't fabricate values for dead/not-yet-listed names. Each check has a STOP-and-report failure mode; these runs do NOT count toward any certification minimum.

austin-starks/Public-Portfolio-Challenge

The hard structural constraints for the Public Portfolio Challenge momentum-LEAP options book — the spread-shape rule, the take-profit convexity-cap footgun, the affordability ladder, and the known losers not to re-test. Use whenever building or auditing an options strategy structure, checking spread-shape compliance before a certification, choosing DTE/strike rungs, or deciding whether a proposed structure change is even allowed. A violation is an automatic certification FAIL.

austin-starks/Public-Portfolio-Challenge

Orchestrate an out-of-sample certification of a NexusTrade trading strategy or live book — the master discipline behind the Public Portfolio Challenge. Use whenever you must decide PASS/FAIL on whether a portfolio holds up out of sample before deploying real money, replaying the Episode 10 runbooks, or running a \"certify my book\" / \"prove it out of sample\" / \"re-certify the fix\" task with the NexusTrade MCP connected. Pulls in walk-forward-oos, breadth-audit, sweep-reoptimization, options-structure-rules, bug-protocol, and deploy-gate.

austin-starks/Public-Portfolio-Challenge

The single entry point that executes a Public Portfolio Challenge episode or addendum runbook end-to-end, delegating each stage to the functional skills. Use when asked to run/execute/replay Episode 10, its bakeoff, or its addendum with the NexusTrade MCP connected. Reads the target runbook, pins its real artifacts (IDs, the incumbent bar), sequences the stages, and stops at the gated deploy. It orchestrates; the functional skills do the work.

austin-starks/Public-Portfolio-Challenge

Run a multi-family strategy bakeoff — the SEARCH→CERTIFY funnel that screens many candidate mechanisms down to a certified deploy winner without letting the cheap search layer issue a verdict. Use when replaying the Episode 10 bakeoff, when exploring several distinct strategy families before certifying, when deciding whether \"no deployable winner\" is even a legal conclusion, or when building the per-family certification ledger. Enforces verdict-integrity: only certification can end a campaign.

austin-starks/Public-Portfolio-Challenge

Re-optimize a NexusTrade strategy with a walk-forward SWEEP and label parameter provenance — the discipline that prevents deploying inherited knobs. Use whenever a structural change (sizing, rung depth, universe membership, DTE family, adding a rank signal) forces a re-sweep, when authoring gene_intents from get_sweep_surface, when choosing sweep over GA for a deploy cert, or when selecting the cross-fold-robust winner instead of the per-fold argmax. Invoke with the NexusTrade MCP connected.

austin-starks/Public-Portfolio-Challenge

Run and read a NexusTrade walk-forward out-of-sample study — the certification engine behind the Public Portfolio Challenge. Use when certifying a fixed portfolio (backtest_only) or re-optimizing one (sweep), when setting fold_count / anchored / validation / embargo params, when monitoring a run_walk_forward_study to completion, when reading per-fold OOS returns/Sortino/drawdown, or when a variant's fold calendar needs calendar-alignment against a base control. Invoke with the NexusTrade MCP connected.

Habilidades Relacionadas