Was macht robots-txt-checker?
Claude Skill zum Live-Check einer robots.txt gegen relevante Bots (Google, Bing, KI-Crawler, SEO-Tools, Scraper) via tamethebots MCP.
Claude Skill zum Live-Check einer robots.txt gegen relevante Bots (Google, Bing, KI-Crawler, SEO-Tools, Scraper) via tamethebots MCP.
Dieser Claude Skill ermöglicht es, eine robots.txt-Datei live gegen eine Reihe von relevanten Bots und Crawlern zu prüfen. Dazu gehören bekannte Suchmaschinen-Bots wie Google und Bing, aber auch KI-Crawler, SEO-Tools und potenzielle Scraper. Die Prüfung erfolgt über das tamethebots MCP (Model Context Protocol), das die Analyse der robots.txt-Regeln automatisiert und Ergebnisse in einer strukturierten Form zurückgibt. Der Skill ist besonders nützlich für Entwickler und SEO-Spezialisten, die sicherstellen möchten, dass ihre robots.txt korrekt konfiguriert ist, um unerwünschte Zugriffe zu blockieren oder bestimmte Crawler zuzulassen. Er unterstützt Claude Desktop und andere MCP-kompatible Umgebungen. Der Skill vereinfacht den Prozess des Testens von robots.txt-Dateien, indem er mehrere Abfragen gleichzeitig durchführt und klare Übersichten über die Erlaubnisse für verschiedene Benutzeragenten liefert.
npx skills add tmnh83/robots-txt-checkerInstalled? Explore more Recherche & Datenanalyse skills: affaan-m/uspto-database, affaan-m/scholar-evaluation, affaan-m/literature-review · View all 6 →
Claude Skill zum Live-Check einer robots.txt gegen relevante Bots (Google, Bing, KI-Crawler, SEO-Tools, Scraper) via tamethebots MCP.
USPTO patent and trademark data workflow for official record lookup, PatentSearch queries, TSDR checks, assignment data, and reproducible IP research logs.
Structured scholarly-work evaluation for papers, proposals, literature reviews, methods sections, evidence quality, citation support, and research-writing feedback.
Systematic literature-review workflow for academic, biomedical, technical, and scientific topics, including search planning, source screening, synthesis, citation checks, and evidence logging.
The agent harness performance optimization system. Skills, instincts, memory, security, and research-first development for Claude Code, Codex, Opencode, Cursor and beyond.
Agent skill repository discovered by 10x-chat research.
Review backend code for quality, security, maintainability, and best practices based on established checklist rules. Use when the user requests a review, analysis, or improvement of backend files (e.g., `.py`) under the `api/` directory. Do NOT use for frontend files (e.g., `.tsx`, `.ts`, `.js`). Supports pending-change review, code snippets review, and file-focused review.