Community코딩 & 개발github.com

ComposioHQ/scrapingant-automation

Rube MCP(Composio)를 통해 Scrapingant 작업을 자동화합니다. 항상 도구를 먼저 검색하여 최신 스키마를 확인하세요.

scrapingant-automation란 무엇인가요?

이 스킬은 Composio의 Scrapingant 도구 키트를 Rube MCP와 연동하여 웹 스크래핑 작업을 자동화하는 방법을 제공합니다. 사용자는 `RUBE_SEARCH_TOOLS`를 통해 최신 도구 스키마를 동적으로 조회하고, `RUBE_MANAGE_CONNECTIONS`로 Scrapingant 연결을 활성화한 후 `RUBE_MULTI_EXECUTE_TOOL`을 사용하여 스크래핑 도구를 실행할 수 있습니다. Rube MCP를 MCP 서버로 추가하기만 하면 별도의 API 키 없이 즉시 사용 가능하며, 모든 도구 호출은 스키마에 엄격히 맞춰야 합니다. 핵심은 항상 작업 전에 도구를 검색하여 스키마 변경에 대응하고, 세션 ID를 재사용하며, 페이지네이션 토큰을 처리하여 완전한 결과를 얻는 것입니다.

지원 대상~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/ComposioHQ/awesome-codex-skills/tree/main/composio-skills/scrapingant-automation

Installed? Explore more 코딩 & 개발 skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →

즐겨 사용하는 AI에게 물어보기

이 에이전트 스킬이 미리 로드된 새 채팅을 엽니다.

문서

Rube MCP를 통한 Scrapingant 자동화

Composio의 Scrapingant 도구 키트를 Rube MCP를 통해 자동화합니다.

도구 키트 문서: composio.dev/toolkits/scrapingant

사전 요구 사항

  • Rube MCP가 연결되어 있어야 합니다 (RUBE_SEARCH_TOOLS 사용 가능)
  • RUBE_MANAGE_CONNECTIONS를 통해 scrapingant 도구 키트로 활성화된 Scrapingant 연결
  • 항상 먼저 RUBE_SEARCH_TOOLS를 호출하여 현재 도구 스키마를 가져오세요

설정

Rube MCP 가져오기: 클라이언트 설정에 MCP 서버로 https://rube.app/mcp를 추가하세요. API 키가 필요 없으며, 엔드포인트만 추가하면 작동합니다.

  1. RUBE_SEARCH_TOOLS가 응답하는지 확인하여 Rube MCP가 사용 가능한지 확인합니다.
  2. scrapingant 도구 키트로 RUBE_MANAGE_CONNECTIONS를 호출합니다.
  3. 연결 상태가 ACTIVE가 아니면 반환된 인증 링크를 따라 설정을 완료합니다.
  4. 워크플로우를 실행하기 전에 연결 상태가 ACTIVE인지 확인합니다.

도구 검색

워크플로우를 실행하기 전에 항상 사용 가능한 도구를 검색하세요:

RUBE_SEARCH_TOOLS
queries: [{use_case: "Scrapingant 작업", known_fields: ""}]
session: {generate_id: true}

이 명령은 사용 가능한 도구 슬러그, 입력 스키마, 권장 실행 계획 및 알려진 함정을 반환합니다.

핵심 워크플로우 패턴

1단계: 사용 가능한 도구 검색

RUBE_SEARCH_TOOLS
queries: [{use_case: "특정 Scrapingant 작업"}]
session: {id: "기존_세션_id"}

2단계: 연결 확인

RUBE_MANAGE_CONNECTIONS
toolkits: ["scrapingant"]
session_id: "your_session_id"

3단계: 도구 실행

RUBE_MULTI_EXECUTE_TOOL
tools: [{
  tool_slug: "검색_결과에서_가져온_도구_슬러그",
  arguments: {/* 검색 결과에서 가져온 스키마 준수 인수 */}
}]
memory: {}
session_id: "your_session_id"

알려진 함정

  • 항상 먼저 검색하세요: 도구 스키마는 변경됩니다. RUBE_SEARCH_TOOLS를 호출하지 않고 도구 슬러그나 인수를 하드코딩하지 마세요.
  • 연결 확인: 도구를 실행하기 전에 RUBE_MANAGE_CONNECTIONS가 ACTIVE 상태를 표시하는지 확인하세요.
  • 스키마 준수: 검색 결과에 정확한 필드 이름과 유형을 사용하세요.
  • 메모리 매개변수: 비어 있어도({}) 항상 RUBE_MULTI_EXECUTE_TOOL 호출에 memory를 포함하세요.
  • 세션 재사용: 워크플로우 내에서 세션 ID를 재사용하세요. 새 워크플로우에는 새 ID를 생성하세요.
  • 페이지네이션: 응답에서 페이지네이션 토큰을 확인하고 완료될 때까지 계속 가져오세요.

빠른 참조

작업방법
도구 찾기Scrapingant 관련 사용 사례로 RUBE_SEARCH_TOOLS
연결하기scrapingant 도구 키트로 RUBE_MANAGE_CONNECTIONS
실행하기검색된 도구 슬러그로 RUBE_MULTI_EXECUTE_TOOL
대량 작업run_composio_tool()을 사용한 RUBE_REMOTE_WORKBENCH
전체 스키마schemaRef가 있는 도구의 RUBE_GET_TOOL_SCHEMAS

Composio 제공

Individual skills in this repo

This repo contains 20 individual skills — each has its own dedicated page.

ComposioHQ/-21risk-automation

Automate 21risk tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/-2chat-automation

Automate 2chat tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/ably-automation

Automate Ably tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/abstract-automation

Automate Abstract tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/abuselpdb-automation

Automate Abuselpdb tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/abyssale-automation

Automate Abyssale tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/accelo-automation

Automate Accelo tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/accredible-certificates-automation

Automate Accredible Certificates tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/acculynx-automation

Automate Acculynx tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/active-campaign-automation

Automate ActiveCampaign tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/addresszen-automation

Automate Addresszen tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/adobe-automation

Automate Adobe tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/adrapid-automation

Automate Adrapid tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/adyntel-automation

Automate Adyntel tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/aeroleads-automation

Automate Aeroleads tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/aero-workflow-automation

Automate Aero Workflow tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/affinda-automation

Automate Affinda tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/affinity-automation

Automate Affinity tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/agencyzoom-automation

Automate Agencyzoom tasks via Rube MCP (Composio). Always search tools first for current schemas.

ComposioHQ/agent-deep-links

Build, validate, and troubleshoot deep links for Codex, Cursor, VS Code, Visual Studio, and similar tools. Use when users ask for clickable links (especially in Slack) that open threads, files, folders, or app settings.

관련 스킬