Community코딩 & 개발github.com

scrapingant-automation

Scrapingant 작업을 Rube MCP(Composio)를 통해 자동화합니다. 항상 먼저 도구를 검색하여 최신 스키마를 확인하세요.

scrapingant-automation란 무엇인가요?

이 기술은 AI 에이전트가 Rube MCP(Composio)를 통해 Scrapingant의 웹 스크래핑 작업을 자동화할 수 있도록 지원합니다. 사용자는 Rube MCP가 제공하는 표준 도구(RUBE_SEARCH_TOOLS, RUBE_MANAGE_CONNECTIONS, RUBE_MULTI_EXECUTE_TOOL)를 활용하여 Scrapingant 툴킷의 최신 스키마를 동적으로 조회하고, 연결 상태를 확인하며, 실제 스크래핑 명령을 실행할 수 있습니다. 특히, 모든 실행 전에 `RUBE_SEARCH_TOOLS`를 호출하여 도구 스키마의 변경 사항을 반영해야 하며, 연결이 ACTIVE 상태인지 확인한 후 작업을 진행해야 합니다. 이 기술은 에이전트의 정확성과 신뢰성을 높이기 위해 설계되었으며, Claude Code, Cursor, Codex 등 Rube MCP와 호환되는 모든 플랫폼에서 동작합니다. Composio의 Scrapingant 툴킷을 기반으로 하여 복잡한 웹 스크래핑 워크플로우를 단순화하고, 오류를 최소화합니다.

지원 대상~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/ComposioHQ/awesome-claude-skills/tree/master/composio-skills/scrapingant-automation

Installed? Explore more 코딩 & 개발 skills: steipete/bluebubbles, steipete/eightctl, steipete/blucli · View all 6 →

즐겨 사용하는 AI에게 물어보기

이 에이전트 스킬이 미리 로드된 새 채팅을 엽니다.

문서

Rube MCP를 통한 Scrapingant 자동화

Composio의 Scrapingant 툴킷을 통해 Rube MCP로 Scrapingant 작업을 자동화합니다.

툴킷 문서: composio.dev/toolkits/scrapingant

전제 조건

  • Rube MCP가 연결되어 있어야 합니다 (RUBE_SEARCH_TOOLS 사용 가능)
  • RUBE_MANAGE_CONNECTIONS를 통해 Scrapingant 연결이 활성화되어 있어야 하며, 툴킷은 scrapingant여야 합니다
  • 항상 RUBE_SEARCH_TOOLS를 먼저 호출하여 현재 도구 스키마를 가져오세요

설정

Rube MCP 가져오기: 클라이언트 설정에 https://rube.app/mcp를 MCP 서버로 추가하세요. API 키가 필요 없습니다. 엔드포인트만 추가하면 작동합니다.

  1. RUBE_SEARCH_TOOLS가 응답하는지 확인하여 Rube MCP가 사용 가능한지 확인
  2. RUBE_MANAGE_CONNECTIONS를 호출하고 툴킷을 scrapingant로 지정
  3. 연결이 ACTIVE 상태가 아니라면 반환된 인증 링크를 따라 설정을 완료
  4. 워크플로우를 실행하기 전에 연결 상태가 ACTIVE인지 확인

도구 검색

워크플로우를 실행하기 전에 항상 사용 가능한 도구를 먼저 검색하세요:

RUBE_SEARCH_TOOLS
queries: [{use_case: "Scrapingant operations", known_fields: ""}]
session: {generate_id: true}

이 명령은 사용 가능한 도구 슬러그, 입력 스키마, 권장 실행 계획 및 알려진 함정을 반환합니다.

핵심 워크플로우 패턴

1단계: 사용 가능한 도구 검색

RUBE_SEARCH_TOOLS
queries: [{use_case: "your specific Scrapingant task"}]
session: {id: "existing_session_id"}

2단계: 연결 확인

RUBE_MANAGE_CONNECTIONS
toolkits: ["scrapingant"]
session_id: "your_session_id"

3단계: 도구 실행

RUBE_MULTI_EXECUTE_TOOL
tools: [{
  tool_slug: "TOOL_SLUG_FROM_SEARCH",
  arguments: {/* 검색 결과와 일치하는 스키마 인수 */}
}]
memory: {}
session_id: "your_session_id"

알려진 함정

  • 항상 먼저 검색: 도구 스키마는 변경됩니다. RUBE_SEARCH_TOOLS를 호출하지 않고 도구 슬러그나 인수를 하드코딩하지 마세요
  • 연결 확인: 도구를 실행하기 전에 RUBE_MANAGE_CONNECTIONS에서 ACTIVE 상태가 표시되는지 확인
  • 스키마 준수: 검색 결과에서 정확한 필드 이름과 유형을 사용하세요
  • 메모리 매개변수: RUBE_MULTI_EXECUTE_TOOL 호출에 항상 memory를 포함하세요. 비어 있어도 ({}) 포함해야 합니다
  • 세션 재사용: 하나의 워크플로우 내에서는 세션 ID를 재사용하고, 새 워크플로우에는 새 세션 ID를 생성하세요
  • 페이지네이션: 응답에서 페이지네이션 토큰을 확인하고, 완료될 때까지 계속 가져오세요

빠른 참조

작업접근 방법
도구 찾기Scrapingant 관련 사용 사례로 RUBE_SEARCH_TOOLS 호출
연결RUBE_MANAGE_CONNECTIONS에 툴킷 scrapingant 지정
실행검색된 도구 슬러그로 RUBE_MULTI_EXECUTE_TOOL 호출
대량 작업RUBE_REMOTE_WORKBENCH에 run_composio_tool() 사용
전체 스키마schemaRef가 있는 도구의 경우 RUBE_GET_TOOL_SCHEMAS 호출

Composio 제공

Individual skills in this repo

This repo contains 20 individual skills — each has its own dedicated page.

ably-automation

Automate Ably tasks via Rube MCP (Composio). Always search tools first for current schemas.

abstract-automation

Automate Abstract tasks via Rube MCP (Composio). Always search tools first for current schemas.

abuselpdb-automation

Automate Abuselpdb tasks via Rube MCP (Composio). Always search tools first for current schemas.

abyssale-automation

Automate Abyssale tasks via Rube MCP (Composio). Always search tools first for current schemas.

accelo-automation

Automate Accelo tasks via Rube MCP (Composio). Always search tools first for current schemas.

accredible-certificates-automation

Automate Accredible Certificates tasks via Rube MCP (Composio). Always search tools first for current schemas.

acculynx-automation

Automate Acculynx tasks via Rube MCP (Composio). Always search tools first for current schemas.

active-campaign-automation

Automate ActiveCampaign tasks via Rube MCP (Composio). Always search tools first for current schemas.

addresszen-automation

Automate Addresszen tasks via Rube MCP (Composio). Always search tools first for current schemas.

adobe-automation

Automate Adobe tasks via Rube MCP (Composio). Always search tools first for current schemas.

adrapid-automation

Automate Adrapid tasks via Rube MCP (Composio). Always search tools first for current schemas.

adyntel-automation

Automate Adyntel tasks via Rube MCP (Composio). Always search tools first for current schemas.

aeroleads-automation

Automate Aeroleads tasks via Rube MCP (Composio). Always search tools first for current schemas.

aero-workflow-automation

Automate Aero Workflow tasks via Rube MCP (Composio). Always search tools first for current schemas.

affinda-automation

Automate Affinda tasks via Rube MCP (Composio). Always search tools first for current schemas.

affinity-automation

Automate Affinity tasks via Rube MCP (Composio). Always search tools first for current schemas.

agencyzoom-automation

Automate Agencyzoom tasks via Rube MCP (Composio). Always search tools first for current schemas.

agent-mail-automation

Automate Agent Mail tasks via Rube MCP (Composio). Always search tools first for current schemas.

agentql-automation

Automate Agentql tasks via Rube MCP (Composio). Always search tools first for current schemas.

agenty-automation

Automate Agenty tasks via Rube MCP (Composio). Always search tools first for current schemas.

관련 스킬