CommunityCodierung & Entwicklunggithub.com

qunliu031208-debug/spider-mind

SpiderMind – Ein dreistufiges, progressives Crawler-Reverse-Engineering-Framework, das komplette Crawling-Projekte von Grund auf liefert. Rohes Py-Erkunden → Umgebungserweiterung & Codeextraktion → jsreverser Deep-Reverse-Engineering, als Codex-Skill.

Was ist spider-mind?

SpiderMind ist ein speziell für KI-Agenten (wie Codex) entwickeltes Crawler-Reverse-Engineering-Framework, das einen dreistufigen progressiven Ansatz verfolgt. Die erste Stufe („Raw Py Probing“) nutzt einfache Python-Skripte, um die grundlegende Struktur und den Datenfluss einer Zielseite zu erkunden. In der zweiten Stufe wird die Browser-Umgebung nachgebaut („Environment Supplementation“), und relevanter JavaScript-Code wird extrahiert und angepasst. Die dritte Stufe („jsreverser Deep Reverse“) ermöglicht eine tiefgehende Analyse von JavaScript-Verschleierungen und Anti-Crawling-Mechanismen. Der Skill ist ideal für Entwickler, die komplexe Webseiten mit dynamischem Rendering und starkem Schutz automatisiert scrapen müssen. Er unterstützt nahtlos den gesamten Workflow von der ersten Analyse bis zur produktionsreifen Crawler-Implementierung und ist als Codex-Skill direkt in KI-gestützten Entwicklungsumgebungen nutzbar. Die modulare Architektur erlaubt es, jede Stufe unabhängig einzusetzen oder alle drei für maximale Effektivität zu kombinieren.

Funktioniert mit~Claude Code✓Codex CLI~Cursor
npx skills add qunliu031208-debug/spider-mind

Installed? Explore more Codierung & Entwicklung skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →

In Ihrer bevorzugten KI fragen

Öffnet einen neuen Chat, in dem dieser Agent-Skill bereits geladen ist.

Dokumentation

Was macht spider-mind?

SpiderMind - Ein dreistufiges, progressives Crawler-Reverse-Engineering-Framework, das komplette Crawling-Projekte von Grund auf liefert. Rohes Py-Erkunden → Umgebungserweiterung & Codeextraktion → jsreverser Deep-Reverse-Engineering, als Codex-Skill.

Verwandte Skills