Communitygithub.com

austin-starks/Public-Portfolio-Challenge

Die obligatorischen vertraglichen Vorabprüfungen (Stufe S0), die bestanden werden müssen, bevor der Zertifizierungsengine von NexusTrade für Strategiearbeiten vertraut werden kann. Zu Beginn eines Bakeoffs oder einer Zertifizierungskampagne verwenden, um nachzuweisen, dass die Walk-Forward-Engine Ende-zu-Ende läuft, Fenster nicht undicht sind, Fold-Gewinner bestehen bleiben und die Engine keine Werte für tote/noch nicht notierte Namen erfindet. Jede Prüfung hat einen STOPP-und-melde-Fehlermodus; diese Läufe zählen NICHT zu einem Zertifizierungsminimum.

Was ist Public-Portfolio-Challenge?

Diese Fähigkeit führt vier obligatorische vertragliche Prüfungen (Stufe S0) durch, um die Vertrauenswürdigkeit der Zertifizierungsengine von NexusTrade sicherzustellen, bevor mit strategischen Arbeiten begonnen wird. Die Engine ist für die Erstellung von Walk-Forward-Studien, Backtest-Validierung und die Persistenz von Handelsergebnissen verantwortlich und unterstützt Plattformen wie Claude Code, Cursor und Codex. Die erste Prüfung validiert, dass die Engine mit einer trivialen Strategie Ende-zu-Ende läuft, die zweite stellt sicher, dass die Walk-Forward-Fenster korrekt sind und keine Datenlecks aufweisen, die dritte bestätigt, dass Fold-Gewinner als echte Objekte bestehen bleiben, und die vierte testet, ob die Engine keine Werte für Namen erfindet, die zum Zeitpunkt des Backtests noch nicht notiert waren. Jede Prüfung hat einen STOPP-und-melde-Fehlermodus; ein Fehler hier bedeutet, dass die Engine selbst defekt ist (Bug-Protokoll) und keine nachgelagerten Zahlen vertrauenswürdig sind. Diese S0-Läufe zählen ausdrücklich NICHT zum Zertifizierungsminimum – sie sind Vertragsprüfungen und Benchmarks, keine Kandidatenzertifizierungen.

Funktioniert mit~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/austin-starks/Public-Portfolio-Challenge/tree/HEAD/skills/engine-sanity

In Ihrer bevorzugten KI fragen

Öffnet einen neuen Chat, in dem dieser Agent-Skill bereits geladen ist.

Dokumentation

Engine-Sanity-Checks (Stufe S0)

VERPFLICHTEND; blockiert alles. Vier vertragliche Prüfungen, die belegen, dass die Zertifizierungsengine vertrauenswürdig ist, bevor mit Designarbeiten begonnen wird. Jede hat einen STOPP-und-melde-Fehlermodus – ein Fehler hier bedeutet, dass die Engine selbst defekt ist (Bug-Protokoll), und keine nachgelagerte Zahl kann vertrauenswürdig sein. Diese S0-Läufe (und die S1-Baseline-Bewertung) zählen ausdrücklich NICHT zum Zertifizierungsminimum – sie sind Vertragsprüfungen und Benchmarks, keine Kandidatenzertifizierungen.

Die vier Prüfungen

  1. Walk-Forward-Sweep-Smoke-Test. Erstelle mit create_portfolio ein triviales Buch (z.B. SPY > SMA50). Führe run_walk_forward_study mit mode:"validation", fold_count:2, engine_kind:"sweep", einem gene_intent × 3 Werten, certification:false aus. Es muss starten und mit pro-Fold OOS + aggregiert abschließen. Belegt: Die Zertifizierungsengine läuft tatsächlich Ende-zu-Ende.

  2. Window-Fidelity (ein Fold). Teste den materialisierten Fold-Gewinner auf seinen Validierungs- und OOS-Fenstern; die validationStatistics / oosStatistics des Folds müssen mit eigenständigen Backtests innerhalb von Rundungsfehlern übereinstimmen. Bestätige Disjunktheit: Training∩Validierung, Training∩OOS, Validierung∩OOS alle leer, und OOS beginnt nach dem Ende der Validierung. Belegt: Die Walk-Forward-Fenster sind nicht undicht.

  3. Persistenz. get_walk_forward_study_results gibt eine echte selectedChatPortfolioId für jeden abgeschlossenen Fold zurück. Belegt: Fold-Gewinner materialisieren sich als echte Objekte, die du inspizieren/einsetzen kannst.

  4. Dead-Name-Behandlung. Kleiner Backtest mit 2022-Fenster auf dem gesamten Universum, einschließlich eines zu diesem Zeitpunkt noch nicht notierten Namens (z.B. SNDK). Bestanden: Der Name fehlt oder erscheint in einer noch-nicht-notiert-Ablehnungsliste ohne erfundene Preis-/Indikatorwerte. Fehlgeschlagen: Die Engine gibt einen Fehler aus oder liefert einen nicht-null Wert für einen Namen, der nicht gehandelt wurde. Belegt: Die Engine erfindet keine Daten für noch nicht notierte Namen.

Im Fehlerfall

Jede fehlgeschlagene S0-Prüfung → STOPP, reiche das Bug-Protokoll-Übergabedokument ein und fahre nicht mit Designarbeiten fort. Eine defekte Engine macht alles Nachgelagerte ungültig; es ist sinnlos, Strategien darauf zu zertifizieren.

Individual skills in this repo

This repo contains 11 individual skills — each has its own dedicated page.

austin-starks/Public-Portfolio-Challenge

Build alternative-data custom indicators on NexusTrade (Reddit/WSB mentions, congressional disclosures, insider filings, news-flow) and wire them into a certified book as a rank/tilt/filter signal. Use when adding alt-data to a strategy, building a CustomIndicator via compute sessions, auditing lookahead safety or per-ticker coverage, or deciding whether a data series is dense enough to drive a rank. Covers the compute-session workflow, the sparse-series rule, and source recipes (see references/). Invoke with the NexusTrade MCP connected.

austin-starks/Public-Portfolio-Challenge

Measure a NexusTrade options book's TRUE participation at a fixed cold-start capital base, defeating the compounded-NAV breadth illusion. Use whenever a book's headline \"holds N/21 names\" needs validating, when a live book collapses to a single name (the OSCR trap), when checking whether a SelectTop / per-name-allocation / total-budget change degraded simultaneous participation, or when a certification needs a breadth gate. Uses audit_backtest_breadth at held-fixed $25k.

austin-starks/Public-Portfolio-Challenge

The \"loudly declare\" protocol for platform, engine, or data bugs during a NexusTrade certification campaign — bugs are a first-class deliverable, not something to route around. Use whenever a NexusTrade tool errors, hangs, or returns numbers that contradict the config; whenever you're tempted to write \"probably an engine quirk\"; or when a discovered bug invalidates prior backtests and results must be quarantined. Includes the bug hand-off doc template (see references/BUG_TEMPLATE.md).

austin-starks/Public-Portfolio-Challenge

The GATED deploy + cleanup flow for a NexusTrade live book — clone the finalist, preview a delta reconcile, stage UNAPPROVED orders, verify fills. Use ONLY after the human explicitly says \"deploy + clean up\" and names a finalist. Covers the clone-before-reconcile ordering, the single-tick reconcile expectation, stale-pending-order hygiene, the signal-freshness gate, and why you can never approve orders yourself. Nothing here runs during certification.

austin-starks/Public-Portfolio-Challenge

The single-touch lockbox — a final anti-overfitting holdout run once, after design freeze, on a window held out from every fold, sweep, and search. Use when finalizing a bakeoff winner before deploy, setting up the A/B/C baselines as OOS bars, or running the S1.5 gate-coherence auto-relax. Covers why looking at the lockbox twice burns it, the lockbox pass conditions, and the three baselines. The lockbox is distinct from the walk-forward OOS folds.

austin-starks/Public-Portfolio-Challenge

The hard structural constraints for the Public Portfolio Challenge momentum-LEAP options book — the spread-shape rule, the take-profit convexity-cap footgun, the affordability ladder, and the known losers not to re-test. Use whenever building or auditing an options strategy structure, checking spread-shape compliance before a certification, choosing DTE/strike rungs, or deciding whether a proposed structure change is even allowed. A violation is an automatic certification FAIL.

austin-starks/Public-Portfolio-Challenge

Orchestrate an out-of-sample certification of a NexusTrade trading strategy or live book — the master discipline behind the Public Portfolio Challenge. Use whenever you must decide PASS/FAIL on whether a portfolio holds up out of sample before deploying real money, replaying the Episode 10 runbooks, or running a \"certify my book\" / \"prove it out of sample\" / \"re-certify the fix\" task with the NexusTrade MCP connected. Pulls in walk-forward-oos, breadth-audit, sweep-reoptimization, options-structure-rules, bug-protocol, and deploy-gate.

austin-starks/Public-Portfolio-Challenge

The single entry point that executes a Public Portfolio Challenge episode or addendum runbook end-to-end, delegating each stage to the functional skills. Use when asked to run/execute/replay Episode 10, its bakeoff, or its addendum with the NexusTrade MCP connected. Reads the target runbook, pins its real artifacts (IDs, the incumbent bar), sequences the stages, and stops at the gated deploy. It orchestrates; the functional skills do the work.

austin-starks/Public-Portfolio-Challenge

Run a multi-family strategy bakeoff — the SEARCH→CERTIFY funnel that screens many candidate mechanisms down to a certified deploy winner without letting the cheap search layer issue a verdict. Use when replaying the Episode 10 bakeoff, when exploring several distinct strategy families before certifying, when deciding whether \"no deployable winner\" is even a legal conclusion, or when building the per-family certification ledger. Enforces verdict-integrity: only certification can end a campaign.

austin-starks/Public-Portfolio-Challenge

Re-optimize a NexusTrade strategy with a walk-forward SWEEP and label parameter provenance — the discipline that prevents deploying inherited knobs. Use whenever a structural change (sizing, rung depth, universe membership, DTE family, adding a rank signal) forces a re-sweep, when authoring gene_intents from get_sweep_surface, when choosing sweep over GA for a deploy cert, or when selecting the cross-fold-robust winner instead of the per-fold argmax. Invoke with the NexusTrade MCP connected.

austin-starks/Public-Portfolio-Challenge

Run and read a NexusTrade walk-forward out-of-sample study — the certification engine behind the Public Portfolio Challenge. Use when certifying a fixed portfolio (backtest_only) or re-optimizing one (sweep), when setting fold_count / anchored / validation / embargo params, when monitoring a run_walk_forward_study to completion, when reading per-fold OOS returns/Sortino/drawdown, or when a variant's fold calendar needs calendar-alignment against a base control. Invoke with the NexusTrade MCP connected.

Verwandte Skills