Communitygithub.com

austin-starks/Certificação-de-Portfólio-Público

Orquestra uma certificação fora da amostra (out-of-sample) de uma estratégia de trading da NexusTrade ou de um livro ao vivo — a disciplina mestre por trás do Public Portfolio Challenge. Use sempre que precisar decidir APROVADO/REPROVADO se um portfólio se sustenta fora da amostra antes de colocar dinheiro real, reproduzir os runbooks do Episódio 10 ou executar uma tarefa de "certificar meu livro" / "provar fora da amostra" / "recertificar a correção" com o MCP da NexusTrade conectado. Integra walk-forward-oos, breadth-audit, sweep-reoptimization, options-structure-rules, bug-protocol e deploy-gate.

O que é Certificação-de-Portfólio-Público?

Esta skill define o processo de certificação de portfólios do Public Portfolio Challenge, atuando como orquestrador e verificador independente que executa ferramentas determinísticas da NexusTrade. A certificação é um veredito holístico APROVADO/REPROVADO baseado em dobras walk-forward fora da amostra (OOS), nunca em um único número agregado. Ela é essencial para garantir que uma estratégia só seja implantada com dinheiro real após passar por validação rigorosa OOS, evitando overfitting e colapsos de desempenho. A skill suporta plataformas como Claude Code, Cursor e Codex via MCP, e fornece runbooks detalhados para execução completa, incluindo verificações de amplitude, regras de estrutura de opções, reotimização por varredura e um portão de implantação que exige confirmação humana explícita.

Funciona com~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/austin-starks/Public-Portfolio-Challenge/tree/HEAD/skills/portfolio-certification

Perguntar na sua IA favorita

Abre um novo chat com esta habilidade de agente já pré-carregada.

Documentação

Certificação de Portfólio

A skill abrangente para o Public Portfolio Challenge. Você é o orquestrador + verificador independente: você executa as ferramentas determinísticas da NexusTrade diretamente e os números são seus — não há nenhum agente cujos resultados você esteja contestando. A certificação é um veredito holístico APROVADO/REPROVADO lido a partir de dobras walk-forward fora da amostra, nunca um único número agregado.

Primeiros princípios (vinculativos em toda execução)

  1. OOS é o único destaque. Nunca apresente números de treino/validação como evidência de generalização. Um ótimo backtest de ciclo completo com um colapso treino→OOS é REPROVADO.
  2. O valor está no DESIGN, não no otimizador. A varredura é um modesto ajustador de parâmetros que confirma a vizinhança de um design. Gaste esforço no design da estratégia; peça pouco à varredura.
  3. Implante a configuração robusta entre dobras, nunca o argmax por dobra. A pontuação de validação é um proxy ruidoso; o vencedor por dobra tem alta variância. Use Sortino OOS maximin / seleção robusta.
  4. Verifique no nível do CAMPO, nunca pelo nome de exibição. Use conditionFieldAudit; copie IDs de indicadores exatamente do catálogo. Confirme o ASSUNTO pelo campo/postura, nunca pelo nome.
  5. Verifique, não afirme. Toda afirmação sobre o comportamento do mecanismo é verificada contra eventos, campos ou uma reprodução antes de aparecer em uma entrega. "Provavelmente uma peculiaridade do mecanismo" → execute o bug-protocol, não faça suposições.
  6. Um resultado nulo honestamente relatado é um resultado válido. Não torture variantes até que uma "vença" — essa é a armadilha do argmax por dobra disfarçada. Empates ou deltas no nível de ruído → mantenha o atual.
  7. Nenhuma implantação, nenhuma ordem até que o humano diga explicitamente "implantar + limpar" (o deploy-gate).

Estrutura padrão de execução

Toda campanha de certificação segue a mesma forma em etapas. Adapte o meio; as extremidades são fixas.

  • Etapa A — Linha de base + inventário. Confirme o ASSUNTO pelo campo (get_portfolio), reverifique a barra atual, faça uma verificação pontual de um backtest_portfolio + audit_backtest_posture fresco e — se o livro estiver ao vivo — verifique o estado de ordens pendentes e automaticOrderApproval. Entregue um parágrafo do estado antes. Quando o comportamento ao vivo for o problema, reproduza-o com números concretos primeiro (query_portfolio_events) e depois corrija.
  • Etapa B/C — Construir + certificar. Execute a certificação propriamente dita. Consulte walk-forward-oos para a mecânica do estudo e as verificações obrigatórias por dobra, breadth-audit para participação fixa de $25k, options-structure-rules para o portão rígido de formato de spread, e sweep-reoptimization se qualquer mudança estrutural forçar uma nova varredura.
  • Etapa D — Apresentar e parar. Entregue um pacote pronto para decisão: veredito no topo, uma linha; tabela OOS por dobra + agregado; lado a lado com a barra atual com a troca explícita; regras do finalista em inglês simples + conditionFieldAudit + id da construção; rótulos de proveniência em cada parâmetro (swept-on-this-book / inherited-from <study-id> / hand-set — herdado é âmbar); ressalvas honestas (retrospectiva no universo congelado, realismo de preenchimento de opções, alavancagem/fragilidade, pior drawdown foi a liquidação de abril de 2025, ressalvas de linha de base). Inclua o registro de bugs. Nenhuma implantação.
  • Etapa E — Implantar (COM PORTÃO). Somente após "implantar + limpar" explícito. Consulte deploy-gate.

O teste holístico APROVADO (sem regra de verde por dobra)

Certifique APROVADO quando a maioria das dobras OOS é lucrativa, o Sortino OOS é positivo e razoavelmente estável (piso aproximado ~0,5), o drawdown está dentro da tolerância que você realmente suportaria, a implantação é estável entre dobras e a degradação treino→OOS é modesta. Uma dobra fraca ≠ REPROVADO. Perdas OOS persistentes, drawdown explosivo ou força apenas no treino = REPROVADO. Uma violação de restrição rígida (formato de spread, colapso de amplitude) = REPROVADO automático, independentemente do retorno.

"Melhor que a barra atual" (campanhas variantes)

Ao testar uma variante contra uma barra ao vivo/certificada, "melhor" = mantida FIXA nas mesmas dobras, melhora o retorno OOS sem piorar o risco, OU melhora materialmente o risco (Sortino/DD) com retorno semelhante, OU melhora comprovadamente o regime fraco (dobra de baixa), com amplitude não degradada. As comparações devem ser alinhadas ao calendário (execute um controle base no calendário reduzido da variante — consulte walk-forward-oos).

Palavras-gatilho de auto-verificação

  • "o backtest prova" → dobras OOS ou não aconteceu.
  • "reutilizar os parâmetros do vencedor" / "já certificado" → a estrutura mudou? Se sim → nova varredura (sweep-reoptimization) antes de certificar.
  • "19/21 nomes" / "ótima amplitude" → meça com $25k FIXO (breadth-audit); amplitude composta é uma ilusão.
  • "o indicador parece preditivo" → certifique-o, não avalie de olho.
  • "provavelmente uma peculiaridade do mecanismo" → bug-protocol: verifique, não afirme.

Runbooks de origem (exemplos práticos desta disciplina)

  • episode-10/BAKEOFF_RUNBOOK.md — verificações de sanidade do mecanismo, bakeoff de 16 variantes, certificação walk-forward, lockbox.
  • episode-10/addendum/RUNBOOK.md — redesenhe entradas e saídas, depois prove o comportamento OOS.
  • episode-10/addendum/CAMPAIGN_LOG.md — as lições completas do addendum e o registro de implantação.

Individual skills in this repo

This repo contains 11 individual skills — each has its own dedicated page.

austin-starks/Public-Portfolio-Challenge

Build alternative-data custom indicators on NexusTrade (Reddit/WSB mentions, congressional disclosures, insider filings, news-flow) and wire them into a certified book as a rank/tilt/filter signal. Use when adding alt-data to a strategy, building a CustomIndicator via compute sessions, auditing lookahead safety or per-ticker coverage, or deciding whether a data series is dense enough to drive a rank. Covers the compute-session workflow, the sparse-series rule, and source recipes (see references/). Invoke with the NexusTrade MCP connected.

austin-starks/Public-Portfolio-Challenge

Measure a NexusTrade options book's TRUE participation at a fixed cold-start capital base, defeating the compounded-NAV breadth illusion. Use whenever a book's headline \"holds N/21 names\" needs validating, when a live book collapses to a single name (the OSCR trap), when checking whether a SelectTop / per-name-allocation / total-budget change degraded simultaneous participation, or when a certification needs a breadth gate. Uses audit_backtest_breadth at held-fixed $25k.

austin-starks/Public-Portfolio-Challenge

The \"loudly declare\" protocol for platform, engine, or data bugs during a NexusTrade certification campaign — bugs are a first-class deliverable, not something to route around. Use whenever a NexusTrade tool errors, hangs, or returns numbers that contradict the config; whenever you're tempted to write \"probably an engine quirk\"; or when a discovered bug invalidates prior backtests and results must be quarantined. Includes the bug hand-off doc template (see references/BUG_TEMPLATE.md).

austin-starks/Public-Portfolio-Challenge

The GATED deploy + cleanup flow for a NexusTrade live book — clone the finalist, preview a delta reconcile, stage UNAPPROVED orders, verify fills. Use ONLY after the human explicitly says \"deploy + clean up\" and names a finalist. Covers the clone-before-reconcile ordering, the single-tick reconcile expectation, stale-pending-order hygiene, the signal-freshness gate, and why you can never approve orders yourself. Nothing here runs during certification.

austin-starks/Public-Portfolio-Challenge

The mandatory pre-flight contract checks (Stage S0) that must pass before trusting NexusTrade's certification engine for any strategy work. Use at the start of a bakeoff or certification campaign to prove the walk-forward engine runs end-to-end, windows don't leak, fold winners persist, and the engine doesn't fabricate values for dead/not-yet-listed names. Each check has a STOP-and-report failure mode; these runs do NOT count toward any certification minimum.

austin-starks/Public-Portfolio-Challenge

The single-touch lockbox — a final anti-overfitting holdout run once, after design freeze, on a window held out from every fold, sweep, and search. Use when finalizing a bakeoff winner before deploy, setting up the A/B/C baselines as OOS bars, or running the S1.5 gate-coherence auto-relax. Covers why looking at the lockbox twice burns it, the lockbox pass conditions, and the three baselines. The lockbox is distinct from the walk-forward OOS folds.

austin-starks/Public-Portfolio-Challenge

The hard structural constraints for the Public Portfolio Challenge momentum-LEAP options book — the spread-shape rule, the take-profit convexity-cap footgun, the affordability ladder, and the known losers not to re-test. Use whenever building or auditing an options strategy structure, checking spread-shape compliance before a certification, choosing DTE/strike rungs, or deciding whether a proposed structure change is even allowed. A violation is an automatic certification FAIL.

austin-starks/Public-Portfolio-Challenge

The single entry point that executes a Public Portfolio Challenge episode or addendum runbook end-to-end, delegating each stage to the functional skills. Use when asked to run/execute/replay Episode 10, its bakeoff, or its addendum with the NexusTrade MCP connected. Reads the target runbook, pins its real artifacts (IDs, the incumbent bar), sequences the stages, and stops at the gated deploy. It orchestrates; the functional skills do the work.

austin-starks/Public-Portfolio-Challenge

Run a multi-family strategy bakeoff — the SEARCH→CERTIFY funnel that screens many candidate mechanisms down to a certified deploy winner without letting the cheap search layer issue a verdict. Use when replaying the Episode 10 bakeoff, when exploring several distinct strategy families before certifying, when deciding whether \"no deployable winner\" is even a legal conclusion, or when building the per-family certification ledger. Enforces verdict-integrity: only certification can end a campaign.

austin-starks/Public-Portfolio-Challenge

Re-optimize a NexusTrade strategy with a walk-forward SWEEP and label parameter provenance — the discipline that prevents deploying inherited knobs. Use whenever a structural change (sizing, rung depth, universe membership, DTE family, adding a rank signal) forces a re-sweep, when authoring gene_intents from get_sweep_surface, when choosing sweep over GA for a deploy cert, or when selecting the cross-fold-robust winner instead of the per-fold argmax. Invoke with the NexusTrade MCP connected.

austin-starks/Public-Portfolio-Challenge

Run and read a NexusTrade walk-forward out-of-sample study — the certification engine behind the Public Portfolio Challenge. Use when certifying a fixed portfolio (backtest_only) or re-optimizing one (sweep), when setting fold_count / anchored / validation / embargo params, when monitoring a run_walk_forward_study to completion, when reading per-fold OOS returns/Sortino/drawdown, or when a variant's fold calendar needs calendar-alignment against a base control. Invoke with the NexusTrade MCP connected.

Habilidades Relacionadas