Community研究&データ分析github.com

brightdata/scrape

Bright Data CLI(`bdata scrape`)を使用して、WebコンテンツをクリーンなMarkdown/HTML/JSONとしてスクレイピングします。

scrape とは?

このスキルは、Bright Data CLI の `bdata scrape` コマンドを利用して、任意のWebページのコンテンツをMarkdown、HTML、またはJSON形式で抽出するためのものです。開発者は、URLリストの一括取得やページネーションを含むリストページのクロールを簡潔に実行できます。Amazon、LinkedIn、TikTok、Instagram、YouTube、Redditなど、Bright Dataが公式にサポートするプラットフォームについては、`data-feeds` スキルに自動的にハンドオフします。また、URL自体が不明な場合は `search` スキルを呼び出して事前にURLを発見します。CLIがインストールされていない場合やログインが必要な場合は、ユーザーを積極的にガイドします。

対応~Claude Code~Codex CLI~Cursor
npx skills add https://github.com/brightdata/skills/tree/main/skills/scrape

Installed? Explore more 研究&データ分析 skills: affaan-m/uspto-database, affaan-m/scholar-evaluation, affaan-m/literature-review · View all 6 →

お気に入りのAIに質問する

このエージェントスキルを事前に読み込んだ状態で新しいチャットを開きます。

ドキュメント

scrape は何をしますか?

Bright Data CLI(bdata scrape)を使用して、WebコンテンツをクリーンなMarkdown/HTML/JSONとしてスクレイピングします。ユーザーがページを取得したい場合、複数のURLからコンテンツを抽出したい場合、またはページネーションのあるリストをクロールしたい場合に使用します。Amazon、LinkedIn、TikTok、Instagram、YouTube、Redditなどのサポート対象プラットフォームについては data-feeds にハンドオフし、URLを事前に発見する必要がある場合は search にハンドオフします。Bright Data CLIが必要であり、インストールやログインが不足している場合は積極的にガイドします。

Individual skills in this repo

This repo contains 3 individual skills — each has its own dedicated page.

brightdata/bright-data-best-practices

Build production-ready Bright Data integrations with best practices baked in. Reference documentation for developers using coding assistants (Claude Code, Cursor, etc.) to implement web scraping, search, browser automation, and structured data extraction. Covers Web Unlocker API, SERP API, Web Scraper API, and Browser API (Scraping Browser).

brightdata/brightdata-cli

Guide for using the Bright Data CLI (`brightdata` / `bdata`) to scrape websites, search the web, extract structured data from 40+ platforms, manage proxy zones, and check account budget. Use this skill whenever the user wants to scrape a URL, search Google/Bing/Yandex, extract data from Amazon/LinkedIn/Instagram/TikTok/YouTube/Reddit or any other platform, check their Bright Data balance or zones, or do anything involving web data collection from the terminal. Also trigger when the user mentions brightdata, bdata, web scraping CLI, SERP API, or wants to install Bright Data skills into their coding agent.

brightdata/seo-audit

When the user wants to audit, review, or diagnose SEO issues on their site. Uses live web data via the Bright Data CLI for accurate detection of JS-injected schema, hreflang, canonicals, and live SERP-based ranking checks. Also use when the user mentions "SEO audit," "technical SEO," "why am I not ranking," "SEO issues," "on-page SEO," "meta tags review," "SEO health check," "my traffic dropped," "lost rankings," "not showing up in Google," "site isn't ranking," "Google update hit me," "page speed," "core web vitals," "crawl errors," or "indexing issues." Use this even if the user just says something vague like "my SEO is bad" or "help with SEO" — start with an audit. For building pages at scale to target keywords, see programmatic-seo. For implementing structured data, see schema-markup. For AI search optimization, see ai-seo.

関連スキル