- 任意の言語でリクエストを構築
- スケジューラーとWebhookで自動化
- JSON、NDJSON、またはCSV形式で配信
ウェブスクレイパーAPIライブラリ
Web スクレイパー API 料金
正常に配信されたものだけにお支払いいただきます。隠れた費用や、配信失敗への請求はありません。
3ステップでデータ取得まで
-
スクレイパーを選ぶ
上記のWebスクレイパーから選ぶか、AIで数分で独自のものを作成できます。
-
APIを呼び出す
最大5,000件のターゲットURLを1回のAPI呼び出しで処理。Python・Node.js SDK、CLI、MCPサーバー、あらゆるHTTPクライアントに対応。
-
構造化データを取得
クリーンにパースされた[current_scrper_name]のデータをJSON、NDJSON、CSV形式で受け取れます。API、Webhook、クラウドストレージ経由で配信されます。
curl -H "Authorization: Bearer API_TOKEN" -H "Content-Type: application/json" -d '[{"url":"https://www.amazon.com/Quencher-FlowState-Stainless-Insulated-Smoothie/dp/B0CRMZHDG8","asin":"B0CRMZHDG8","origin_url":"https://www.amazon.com/Quencher-FlowState-Stainless-Insulated-Smoothie/dp/B0CRMZHDG8","zipcode":"94107","language":""},{"url":"https://www.amazon.com/KitchenAid-Protective-Dishwasher-Stainless-8-72-Inch/dp/B07PZF3QS3","asin":"B07PZF3QS3","zipcode":"","language":""},{"url":"https://www.amazon.com/TruSkin-Naturals-Vitamin-Topical-Hyaluronic/dp/B01M4MCUAF","asin":"","origin_url":"https://www.amazon.com/TruSkin-Naturals-Vitamin-Topical-Hyaluronic/dp/B01M4MCUAF","zipcode":"94124","language":""}]' "https://api.brightdata.com/datasets/v3/trigger?dataset_id=gd_l7q7dkf244hwjntr0&format=json&uncompressed_webhook=true"
[
{
"timestamp": "2026-10-08",
"title": "Sennelier Abstract Acrylic Satin, Cadmium Yellow Medium Hue, 120ml",
"seller_name": "Amazon **",
"brand": "Sennelier",
"description": "Dive into the vibrant world of colour with the Sennelier Abstract Acrylic Paint, Satin Cadmium Yellow Medium Hue. This 1...",
"initial_price": 12,
"currency": "AUD",
"availability": "Only 2 left in stock (more on the way)."
},
{
"timestamp": "2026-10-08",
"title": "Sennelier Abstract Acrylic Satin, Burnt Sienna, 120ml",
"seller_name": "Amazon **",
"brand": "Sennelier",
"description": "Experience the joy of painting with the Sennelier Abstract Acrylic Paint in Satin Burnt Sienna. This 120 ml tube of Qual...",
"initial_price": 12,
"currency": "AUD",
"availability": "Only 3 left in stock (more on the way)."
},
{
"timestamp": "2026-10-08",
"title": "Sennelier Large Oil Pastel, Transparent Blue",
"seller_name": "Amazon **",
"brand": "Sennelier",
"description": "Bring your artwork to life with Sennelier Oil Pastels in Transparent Blue, designed to deliver rich colour and a smooth,...",
"initial_price": 28.18,
"currency": "AUD",
"availability": "Temporarily out of stock. Order now and we\u0027ll deliver when available. We\u0027ll e-mail you with an estimated delivery date a..."
},
{
"timestamp": "2026-10-08",
"title": "Speedball Water-Based Printing Ink Yellow, 37ml, Produces Bold, Vibrant Colours, Can Be Printed Over Acrylic Paint - Ide...",
"seller_name": "Amazon **",
"brand": "Speedball",
"description": "Experience the thrill of creating stunning prints with the Speedball Water Based Block Printing Ink. This Speedball ink ...",
"initial_price": 18.39,
"currency": "AUD",
"availability": "Usually dispatched within 1 to 2 months"
},
{
"timestamp": "2026-10-08",
"title": "Sennelier Oil Paint, 40ml, Series S1, Cassel Earth",
"seller_name": "Amazon **",
"brand": "Sennelier",
"description": "Bring depth and expression to your artwork with Sennelier Oil Paint in Cassel Earth. Designed for artists who want colou...",
"initial_price": 26,
"currency": "AUD",
"availability": "Usually dispatched within 1 to 2 months"
}
]
curl -H "Authorization: Bearer API_TOKEN" -H "Content-Type: application/json" -d '[{"url":"https://www.instagram.com/cats_of_world_/"},{"url":"https://www.instagram.com/dogsofinstagram/"},{"url":"https://www.instagram.com/zoobarcelona"},{"url":"https://www.instagram.com/australiazoo"}]' "https://api.brightdata.com/datasets/v3/trigger?dataset_id=gd_l1vikfch901nx3by4&format=json&uncompressed_webhook=true"
[
{
"timestamp": "2023-03-03",
"account": "mir***ady***kov***",
"fbid": "17841433652332665",
"id": "33701321744",
"followers": 8,
"posts_count": 0,
"is_business_account": false,
"is_professional_account": false
},
{
"timestamp": "2021-10-19",
"account": "npu***hen***030***",
"fbid": "17841439874796241",
"id": "40049929159",
"followers": 52,
"posts_count": 0,
"is_business_account": false,
"is_professional_account": false
},
{
"timestamp": "2022-10-15",
"account": "jam***wat***son***",
"fbid": "17841406775045844",
"id": "6926753834",
"followers": 522,
"posts_count": 137,
"is_business_account": false,
"is_professional_account": false
},
{
"timestamp": "2022-02-23",
"account": "yov***sus***",
"fbid": "17841404326092024",
"id": "4336192203",
"followers": 21,
"posts_count": 1,
"is_business_account": false,
"is_professional_account": false
},
{
"timestamp": "2021-09-12",
"account": "ban***gel***",
"fbid": "17841410054903782",
"id": "9950263163",
"followers": 35,
"posts_count": 33,
"is_business_account": false,
"is_professional_account": false
}
]
curl -H "Authorization: Bearer API_TOKEN" -H "Content-Type: application/json" -d '[{"url":"https://www.zillow.com/homedetails/2506-Gordon-Cir-South-Bend-IN-46635/77050198_zpid/?t=for_sale"}]' "https://api.brightdata.com/datasets/v3/trigger?dataset_id=gd_lfqkr8wm13ixtbd8f5&format=json&uncompressed_webhook=true"
[
{
"timestamp": "2026-10-08",
"zpid": 84745759,
"city": "Rosenberg",
"state": "TX",
"homeStatus": "OTHER",
"address:city": "Rosenberg",
"address:streetAddress": "3138 Fern Brook Ln",
"address:zipcode": "77471"
},
{
"timestamp": "2026-10-08",
"zpid": 103146147,
"city": "Pt Charlotte",
"state": "FL",
"homeStatus": "FOR_SALE",
"address:city": "Pt Charlotte",
"address:streetAddress": "183 Presque Isle Dr",
"address:zipcode": "33954"
},
{
"timestamp": "2026-10-08",
"zpid": 83300660,
"city": "Tuscaloosa",
"state": "AL",
"homeStatus": "OTHER",
"address:city": "Tuscaloosa",
"address:streetAddress": "24 Ridgeland",
"address:zipcode": "35406"
},
{
"timestamp": "2026-10-08",
"zpid": 2058674280,
"city": "Margate City",
"state": "NJ",
"homeStatus": "OTHER",
"address:city": "Margate City",
"address:streetAddress": "109 S Newport Elevator",
"address:zipcode": "08402"
},
{
"timestamp": "2026-10-08",
"zpid": 458925398,
"city": "Troutman",
"state": "NC",
"homeStatus": "SOLD",
"address:city": "Troutman",
"address:streetAddress": "186 Hudson Point Dr",
"address:zipcode": "28166"
}
]
curl -H "Authorization: Bearer API_TOKEN" -H "Content-Type: application/json" -d '[{"url":"https://www.linkedin.com/in/elad-moshe-05a90413/"},{"url":"https://www.linkedin.com/in/jonathan-myrvik-3baa01109"},{"url":"https://www.linkedin.com/in/aviv-tal-75b81/"},{"url":"https://www.linkedin.com/in/bulentakar/"},{"url":"https://www.linkedin.com/in/nnikolaev/"}]' "https://api.brightdata.com/datasets/v3/trigger?dataset_id=gd_l1viktl72bvl7bjuj0&format=json&uncompressed_webhook=true"
[
{
"timestamp": "2026-10-08",
"id": "ped***alc***-ab*********",
"name": "Pedro A****o",
"city": "Belém, Pará, Brazil",
"country_code": "BR",
"position": null,
"about": null,
"posts": null
},
{
"timestamp": "2026-10-08",
"id": "pau***ee-***",
"name": "Paul ***",
"city": "New York, New York, United States",
"country_code": "US",
"position": null,
"about": "Int***sts***uil*********lyt*********************one******************************************",
"posts": null
},
{
"timestamp": "2026-10-08",
"id": "cha***a-s***har*********",
"name": "Chandra S*****r",
"city": "New Delhi, Delhi, India",
"country_code": "IN",
"position": null,
"about": null,
"posts": null
},
{
"timestamp": "2026-10-08",
"id": "ayi***i-g***iel*********3",
"name": "Ayideji G*****l",
"city": "Nigeria",
"country_code": "NG",
"position": null,
"about": null,
"posts": null
},
{
"timestamp": "2026-10-08",
"id": "zak***a-m***ouh*********3",
"name": "Zakaria M*****h",
"city": "Casablanca, Casablanca-Settat, Morocco",
"country_code": "MA",
"position": null,
"about": null,
"posts": null
}
]
Tell your agent:
Read https://brightdata.com/SKILL.md and get structured JSON for this Amazon product via the amazon_product pipeline: https://www.amazon.com/Quencher-FlowState-Stainless-Insulated-Smoothie/dp/B0CRMZHDG8Or run it yourself:
npx -p @brightdata/cli bdata loginbdata pipelines amazon_product "https://www.amazon.com/Quencher-FlowState-Stainless-Insulated-Smoothie/dp/B0CRMZHDG8"Or connect over MCP:
https://mcp.brightdata.com/mcp?token=YOUR_API_KEYBright Dataのスクレイパーをエージェントに組み込む
エージェントはBright Dataが既に管理しているスクレイパーから選択します。必要な時にいつでも実行でき、毎回実行するたびにリアルタイムのウェブデータが直接ストレージに届きます。Claude Code、Codex、Cursor、その他あらゆるコーディングエージェントで動作します。
- npxで実行、インストール不要
- bdata loginでブラウザ認証、キーの貼り付け不要
- スクレイパー名を指定するだけでJSONを取得
- AWS・GCP・Azure・Snowflake・Webhookへ配信
必要なすべてが組み込まれています
直接ソースにアクセス
数百万ページへ即座にスケール
サイト変更時にスクレイパーが自動修復
数千の検証済みスクレイパー
結果ごとの料金、追加費用なし
準拠かつ完全サポート
数分でWebデータの収集を開始
倫理的なウェブデータ収集をリードする
公開されているデータのみを使用。ISO 27001認証取得、SOC 2管理体制、GDPR・CCPA準拠。すべての利用事例は専任のコンプライアンス&倫理チームが審査し、文書化されたKYCプロセスと利用規約に基づいています。
あらゆる用途に対応するスクレイパーAPI
GoogleスクレイピングAPI
ビジネス・B2BスクレイピングAPI
LLMスクレイピングAPI
ウェブスクレイパーAPI vs 他のプロバイダー
ウェブスクレイパーAPIのよくある質問
ウェブスクレイパーAPIとは何ですか?
ウェブスクレイパーAPIは、ウェブデータ抽出を簡素化するクラウドベースのサービスで、IPローテーション、CAPTCHAの解決、構造化形式へのデータパースを自動で処理します。企業がシームレスに価値あるウェブデータにアクセスできるよう、効率的でスケーラブルなデータ収集を実現します。
ウェブスクレイパーAPIの利用で恩恵を受けられるのは誰ですか?
AI、ML、ビッグデータアプリケーションなどのためにウェブデータを効率的に収集・分析する方法を求めるデータアナリスト、研究者、エンジニア、開発者にとって、ウェブスクレイパーAPIは特に有益です。
手動のスクレイピング方法ではなくウェブスクレイパーAPIを選ぶ理由は何ですか?
ウェブスクレイパーAPIは、ウェブサイトの構造変更への対応、ブロックやCAPTCHAへの対処、インフラ維持にかかる高いコストといった手動ウェブスクレイピングの限界を克服します。自動化され、スケーラブルで信頼性の高いデータ抽出ソリューションを提供し、運用コストと時間を大幅に削減します。
Bright DataのウェブスクレイパーAPIが市場で独自性を持つ理由は何ですか?
ウェブスクレイパーAPIの独自性は、レジデンシャルプロキシやJavaScriptレンダリングなどの高度な技術に支えられた、一括リクエスト処理、データディスカバリー、自動検証といった専門機能にあります。これらの機能により、広範なアクセス、高いデータ整合性、全体的な効率性が確保され、競争の激しい市場においてスクレイパーAPIを際立たせています。
ウェブスクレイパーAPIはどのように始められますか?
ウェブスクレイパーAPIの利用開始は、Bright Dataのコントロールパネルを通じて簡単に行えます。詳細なドキュメントと使いやすいダッシュボードでAPIキーの管理や設定が可能です。このアプローチにより設定の手間が最小限に抑えられ、高いスケーラビリティと信頼性を備えたプラットフォームへすぐにアクセスできます。
ウェブスクレイパーAPIはどのような具体的なユースケースに最適化されていますか?
ウェブスクレイパーAPIは、競合ベンチマーキング、市場トレンド分析、ダイナミックプライシングアルゴリズム、感情分析、機械学習パイプラインへのデータ供給など、さまざまな開発ニーズに対応します。eコマース、フィンテック、ソーシャルメディア分析に不可欠なこれらのAPIは、開発者がデータ駆動型の戦略を効果的に実装することを可能にします。
ウェブスクレイパーAPIは大規模なデータ抽出タスクをどのように管理しますか?
高い並行処理能力とバッチ処理機能を備えたウェブスクレイパーAPIは、大規模なデータ抽出シナリオに優れています。これにより、開発者は大量のリクエストを高いスループットで処理しながら、スクレイピング作業を効率的に拡張できます。
ウェブスクレイパーAPIはどのようなデータ形式で抽出情報を提供できますか?
ウェブスクレイパーAPIは、NDJSONやCSVを含む多様な形式で抽出データを配信し、幅広い分析ツールやデータ処理ワークフローとのシームレスな統合を実現するため、開発者環境での導入が容易になります。
どのウェブサイトをスクレイピングできますか?
Amazon、LinkedIn、Instagram、TikTok、Googleマップ、Zillowなど、人気サイト向けに1,400以上の構築済みスクレイパーがあります。その他のウェブサイトについては、Scraper Studioを使用してAIで数分でカスタムスクレイパーを作成できます。
Bright Dataを使ったウェブスクレイピングは合法でコンプライアンスに準拠していますか?
はい。Bright Dataは公開されているデータのみを収集し、ISO 27001認証を取得し、SOC 2管理体制を維持し、GDPRおよびCCPAに準拠しています。専任のコンプライアンス&倫理チームがすべての利用事例を審査し、文書化されたKYCプロセスと利用規約に基づいています。詳細はBright Data Trust Centerで公開されています。
AIエージェントはウェブスクレイパーAPIを使用できますか?
はい。ホスト型MCPサーバー経由であらゆるエージェントを接続したり、コーディングエージェントをbrightdata.com/SKILL.mdに向けて自動設定させたり、CLIを使用したりできます。エージェントはブラウザOAuthで一度認証すれば、1,400以上のスクレイパーのいずれかを実行したり、Scraper Studioで新しいものを構築したりできます。
このウェブスクレイパーAPIはPythonやNode.jsで使用できますか?
はい。Python用(brightdata-sdk)およびNode.js用(@brightdata/sdk)の公式SDKが、認証と結果のポーリングを代行します。requests、axios、cURL、Go、Javaなど、あらゆるHTTPクライアントからREST APIを呼び出すこともできます。各スクレイパーページには両言語のすぐ使えるコードスニペットが含まれています。