Automação de Web Scraping com IA via Rube MCP

O que Automação de Web Scraping com IA via Rube MCP faz?

Automatize operações de Web Scraping com IA através do toolkit Webscraping AI da Composio via Rube MCP.

Documentação do toolkit: composio.dev/toolkits/webscraping_ai

Pré-requisitos

• Rube MCP deve estar conectado (RUBE_SEARCH_TOOLS disponível)
• Conexão ativa com Webscraping AI via RUBE_MANAGE_CONNECTIONS com o toolkit webscraping_ai
• Sempre chame RUBE_SEARCH_TOOLS primeiro para obter os esquemas atuais das ferramentas

Configuração

Obter Rube MCP: Adicione https://rube.app/mcp como um servidor MCP na configuração do seu cliente. Nenhuma chave de API é necessária — basta adicionar o endpoint e começar a usar.

1. Verifique se o Rube MCP está disponível confirmando que RUBE_SEARCH_TOOLS responde
2. Chame RUBE_MANAGE_CONNECTIONS com o toolkit webscraping_ai
3. Se a conexão não estiver ATIVA, siga o link de autenticação retornado para concluir a configuração
4. Confirme que o status da conexão mostra ATIVO antes de executar qualquer fluxo de trabalho

Descoberta de Ferramentas

Sempre descubra as ferramentas disponíveis antes de executar fluxos de trabalho:

RUBE_SEARCH_TOOLS
queries: [{use_case: "Operações de Webscraping AI", known_fields: ""}]
session: {generate_id: true}

Isso retorna slugs de ferramentas disponíveis, esquemas de entrada, planos de execução recomendados e armadilhas conhecidas.

Padrão Principal de Fluxo de Trabalho

Passo 1: Descubra as Ferramentas Disponíveis

RUBE_SEARCH_TOOLS
queries: [{use_case: "sua tarefa específica de Webscraping AI"}]
session: {id: "id_da_sessao_existente"}

Passo 2: Verifique a Conexão

RUBE_MANAGE_CONNECTIONS
toolkits: ["webscraping_ai"]
session_id: "id_da_sua_sessao"

Passo 3: Execute as Ferramentas

RUBE_MULTI_EXECUTE_TOOL
tools: [{
  tool_slug: "SLUG_DA_FERRAMENTA_DO_RESULTADO",
  arguments: {/* argumentos em conformidade com o esquema dos resultados da busca */}
}]
memory: {}
session_id: "id_da_sua_sessao"

Armadilhas Conhecidas

• Sempre pesquise primeiro: Os esquemas das ferramentas mudam. Nunca use slugs ou argumentos fixos sem chamar RUBE_SEARCH_TOOLS
• Verifique a conexão: Confirme se RUBE_MANAGE_CONNECTIONS mostra status ATIVO antes de executar ferramentas
• Conformidade com o esquema: Use nomes e tipos de campos exatos dos resultados da busca
• Parâmetro memory: Sempre inclua memory nas chamadas RUBE_MULTI_EXECUTE_TOOL, mesmo que vazio ({})
• Reutilização de sessão: Reutilize IDs de sessão dentro de um fluxo de trabalho. Gere novos para novos fluxos
• Paginação: Verifique as respostas quanto a tokens de paginação e continue buscando até completar

Referência Rápida

Operação	Abordagem
Encontrar ferramentas	RUBE_SEARCH_TOOLS com caso de uso específico de Webscraping AI
Conectar	RUBE_MANAGE_CONNECTIONS com toolkit webscraping_ai
Executar	RUBE_MULTI_EXECUTE_TOOL com slugs de ferramentas descobertas
Operações em lote	RUBE_REMOTE_WORKBENCH com run_composio_tool()
Esquema completo	RUBE_GET_TOOL_SCHEMAS para ferramentas com schemaRef

---

Desenvolvido por Composio