Webscraping AI Automation via Rube MCP

Rube MCP を用いた Webscraping AI 自動化

Composio の Webscraping AI ツールキットを Rube MCP 経由で操作し、Web スクレイピング AI 処理を自動化します。

ツールキットドキュメント: composio.dev/toolkits/webscraping_ai

前提条件

• Rube MCP が接続されていること（RUBE_SEARCH_TOOLS が利用可能であること）
• RUBE_MANAGE_CONNECTIONS を使用し、ツールキット webscraping_ai で Webscraping AI とのアクティブな接続が確立されていること
• 常に最初に RUBE_SEARCH_TOOLS を呼び出して現在のツールスキーマを取得すること

セットアップ

Rube MCP を入手: クライアント設定に MCP サーバーとして https://rube.app/mcp を追加します。API キーは不要で、エンドポイントを追加するだけで動作します。

1. RUBE_SEARCH_TOOLS が応答することを確認して、Rube MCP が利用可能であることを確認します
2. ツールキット webscraping_ai を指定して RUBE_MANAGE_CONNECTIONS を呼び出します
3. 接続が ACTIVE でない場合は、返された認証リンクに従ってセットアップを完了します
4. ワークフローを実行する前に、接続ステータスが ACTIVE であることを確認します

ツールの検出

ワークフローを実行する前に、必ず利用可能なツールを検出します。

RUBE_SEARCH_TOOLS
queries: [{use_case: "Webscraping AI 操作", known_fields: ""}]
session: {generate_id: true}

これにより、利用可能なツールスラッグ、入力スキーマ、推奨実行計画、既知の落とし穴が返されます。

コアワークフローパターン

ステップ 1: 利用可能なツールの検出

RUBE_SEARCH_TOOLS
queries: [{use_case: "あなたの具体的な Webscraping AI タスク"}]
session: {id: "existing_session_id"}

ステップ 2: 接続の確認

RUBE_MANAGE_CONNECTIONS
toolkits: ["webscraping_ai"]
session_id: "your_session_id"

ステップ 3: ツールの実行

RUBE_MULTI_EXECUTE_TOOL
tools: [{
  tool_slug: "TOOL_SLUG_FROM_SEARCH",
  arguments: {/* 検索結果からのスキーマ準拠の引数 */}
}]
memory: {}
session_id: "your_session_id"

既知の落とし穴

• 常に最初に検索: ツールスキーマは変更されます。RUBE_SEARCH_TOOLS を呼び出さずにツールスラッグや引数をハードコードしないでください
• 接続を確認: ツールを実行する前に、RUBE_MANAGE_CONNECTIONS が ACTIVE ステータスを示していることを確認してください
• スキーマ準拠: 検索結果から正確なフィールド名と型を使用してください
• メモリパラメータ: RUBE_MULTI_EXECUTE_TOOL の呼び出しには常に memory を含めてください（空でも {} としてください）
• セッションの再利用: ワークフロー内ではセッション ID を再利用してください。新しいワークフローには新しい ID を生成してください
• ページネーション: レスポンスにページネーショントークンがないか確認し、完了するまで取得を続けてください

クイックリファレンス

操作	方法
ツールの検索	Webscraping AI 固有のユースケースを指定した RUBE_SEARCH_TOOLS
接続	ツールキット webscraping_ai を指定した RUBE_MANAGE_CONNECTIONS
実行	検出したツールスラッグを指定した RUBE_MULTI_EXECUTE_TOOL
一括操作	run_composio_tool() を使用した RUBE_REMOTE_WORKBENCH
完全スキーマ	schemaRef を持つツールの RUBE_GET_TOOL_SCHEMAS

---

Powered by Composio