Communityコーディング&開発github.com

ComposioHQ/scrape-do-automation

Rube MCP(Composio)経由でScrape Doのタスクを自動化します。まずは常にツールを検索して最新のスキーマを取得してください。

scrape-do-automation とは?

このスキルは、ComposioのScrape DoツールキットをRube MCP経由で操作し、Webスクレイピングタスクを自動化するためのものです。Rube MCPに接続し、Scrape Doとの連携がアクティブであることを確認した上で、まず「RUBE_SEARCH_TOOLS」を呼び出して利用可能なツールの最新スキーマを動的に取得します。その後、「RUBE_MANAGE_CONNECTIONS」で接続状態を確認し、「RUBE_MULTI_EXECUTE_TOOL」で実際のスクレイピング処理を実行します。ツールスキーマは頻繁に変更されるため、毎回検索から始めることが重要です。対応プラットフォームはClaude Code、Cursor、Codexなど、Rube MCPをMCPサーバーとして登録できるすべてのAIエージェント環境です。

対応~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/ComposioHQ/awesome-codex-skills/tree/main/composio-skills/scrape-do-automation

Installed? Explore more コーディング&開発 skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →

お気に入りのAIに質問する

このエージェントスキルを事前に読み込んだ状態で新しいチャットを開きます。

ドキュメント

Rube MCP 経由の Scrape Do 自動化

Composio の Scrape Do ツールキットを Rube MCP 経由で操作し、Scrape Do の処理を自動化します。

ツールキットドキュメント: composio.dev/toolkits/scrape_do

前提条件

  • Rube MCP が接続されていること(RUBE_SEARCH_TOOLS が利用可能)
  • RUBE_MANAGE_CONNECTIONS を使用してツールキット scrape_do でアクティブな Scrape Do 接続が確立されていること
  • 最新のツールスキーマを取得するために、必ず最初に RUBE_SEARCH_TOOLS を呼び出すこと

セットアップ

Rube MCP の入手: クライアント設定で https://rube.app/mcp を MCP サーバーとして追加します。API キーは不要で、エンドポイントを追加するだけで動作します。

  1. RUBE_SEARCH_TOOLS が応答することを確認し、Rube MCP が利用可能であることを確認します
  2. ツールキット scrape_do を指定して RUBE_MANAGE_CONNECTIONS を呼び出します
  3. 接続が ACTIVE でない場合は、返された認証リンクに従ってセットアップを完了します
  4. ワークフローを実行する前に、接続ステータスが ACTIVE であることを確認します

ツールの検出

ワークフローを実行する前に、常に利用可能なツールを検出します:

RUBE_SEARCH_TOOLS
queries: [{use_case: "Scrape Do 操作", known_fields: ""}]
session: {generate_id: true}

これにより、利用可能なツールスラッグ、入力スキーマ、推奨実行計画、既知の落とし穴が返されます。

コアワークフローパターン

ステップ 1: 利用可能なツールを検出

RUBE_SEARCH_TOOLS
queries: [{use_case: "特定の Scrape Do タスク"}]
session: {id: "既存のセッションID"}

ステップ 2: 接続を確認

RUBE_MANAGE_CONNECTIONS
toolkits: ["scrape_do"]
session_id: "あなたのセッションID"

ステップ 3: ツールを実行

RUBE_MULTI_EXECUTE_TOOL
tools: [{
  tool_slug: "検索結果からのツールスラッグ",
  arguments: {/* 検索結果に準拠したスキーマ引数 */}
}]
memory: {}
session_id: "あなたのセッションID"

既知の落とし穴

  • 常に最初に検索: ツールスキーマは変更されます。RUBE_SEARCH_TOOLS を呼び出さずにツールスラッグや引数をハードコードしないでください。
  • 接続を確認: ツールを実行する前に、RUBE_MANAGE_CONNECTIONS で ACTIVE ステータスが表示されていることを確認します。
  • スキーマ準拠: 検索結果から得られた正確なフィールド名と型を使用します。
  • メモリパラメータ: RUBE_MULTI_EXECUTE_TOOL の呼び出しには、空({})の場合でも常に memory を含めます。
  • セッションの再利用: 同一ワークフロー内ではセッション ID を再利用します。新しいワークフローには新しい ID を生成します。
  • ページネーション: レスポンスにページネーショントークンがある場合は、取得が完了するまでフェッチを続けます。

クイックリファレンス

操作方法
ツールを検索RUBE_SEARCH_TOOLS を Scrape Do 固有のユースケースで呼び出し
接続RUBE_MANAGE_CONNECTIONS をツールキット scrape_do で呼び出し
実行RUBE_MULTI_EXECUTE_TOOL を検出したツールスラッグで呼び出し
一括操作RUBE_REMOTE_WORKBENCH で run_composio_tool() を使用
完全なスキーマRUBE_GET_TOOL_SCHEMAS で schemaRef を持つツールを取得

Powered by Composio

Individual skills in this repo

This repo contains 20 individual skills — each has its own dedicated page.

ComposioHQ/-21risk-automation

Automate 21risk tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/-2chat-automation

Automate 2chat tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/ably-automation

Automate Ably tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/abstract-automation

Automate Abstract tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/abuselpdb-automation

Automate Abuselpdb tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/abyssale-automation

Automate Abyssale tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/accelo-automation

Automate Accelo tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/accredible-certificates-automation

Automate Accredible Certificates tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/acculynx-automation

Automate Acculynx tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/active-campaign-automation

Automate ActiveCampaign tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/addresszen-automation

Automate Addresszen tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/adobe-automation

Automate Adobe tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/adrapid-automation

Automate Adrapid tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/adyntel-automation

Automate Adyntel tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/aeroleads-automation

Automate Aeroleads tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/aero-workflow-automation

Automate Aero Workflow tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/affinda-automation

Automate Affinda tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/affinity-automation

Automate Affinity tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/agencyzoom-automation

Automate Agencyzoom tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/agent-deep-links

Build, validate, and troubleshoot deep links for Codex, Cursor, VS Code, Visual Studio, and similar tools. Use when users ask for clickable links (especially in Slack) that open threads, files, folders, or app settings.

関連スキル