CommunityPesquisa e Análise de Dadosgithub.com

tmnh83/robots-txt-checker

Habilidade Claude para verificar ao vivo um arquivo robots.txt contra bots relevantes (Google, Bing, crawlers de IA, ferramentas SEO, scrapers) via tamethebots MCP.

O que é robots-txt-checker?

Esta habilidade para Claude permite que você verifique em tempo real se um arquivo robots.txt está configurado corretamente para bloquear ou permitir acesso a bots específicos, como Googlebot, Bingbot, crawlers de inteligência artificial, ferramentas SEO e scrapers. Ela é útil para desenvolvedores e profissionais de SEO que precisam garantir que suas diretivas de rastreamento estejam funcionando como esperado, sem ter que testar manualmente cada bot. A habilidade utiliza o servidor MCP tamethebots para realizar as verificações dinâmicas, fornecendo resultados claros sobre permissões e bloqueios. Suporta a plataforma Claude Desktop e funciona bem com qualquer site que possua um arquivo robots.txt acessível.

Funciona com✓Claude Code~Codex CLI~Cursor
npx skills add tmnh83/robots-txt-checker

Installed? Explore more Pesquisa e Análise de Dados skills: affaan-m/uspto-database, affaan-m/scholar-evaluation, affaan-m/literature-review · View all 6 →

Perguntar na sua IA favorita

Abre um novo chat com esta habilidade de agente já pré-carregada.

Documentação

O que robots-txt-checker faz?

Habilidade Claude para verificar ao vivo um arquivo robots.txt contra bots relevantes (Google, Bing, crawlers de IA, ferramentas SEO, scrapers) via tamethebots MCP.

Habilidades Relacionadas