Web ScraperプロキシとBright Dataの統合
Web Scraperプロキシ設定をセットアップして、Bright DataのプロキシIPと統合する方法を学びます
Web Scraper拡張機能と Web Scraper Cloudは、データ抽出に最適なツールです。ポイント&クリックの簡単なインターフェースで、スクレイパーは数分でウェブサイトのデータを収集します。
Web Scraper Cloudを使用すると、スケジューラー、API、データパーサー、データエクスポートなどを使って、スクレイピング作業を完全に自動化できます。
Web Scraperの使用を開始する
- Chrome StoreでWeb Scraperブラウザ拡張機能をインストールします
- Web Scraper Cloudにサインアップします
- スケールプランに登録します
- 左側のツールバーにある「プロキシマネージャー」を開きます
Bright Dataでプロキシを作成する
- Bright Data Dashboardにアクセスし、Zoneの追加をクリックします
- ネットワークタイプを選択して、Zoneの追加を押します
- Bright Dataダッシュボードに戻り、Zone名をクリックします
- Zoneのユーザー名とパスワードを控えておきます
統合
- Web Scraper Cloudプロキシマネージャーに戻ります
- 指定のプロキシサーバーとしてBright Dataプロキシを選択します
- Bright Data が作成したZoneからカスタム名、ユーザー名、パスワードを入力します。 必要に応じて、ドロップダウンメニューで国を選択してプロキシ地域を制限します。
- プロキシの追加をクリックします
- 以下のようにカスタムプロキシが表示されます
- スクレイピング作業にプロキシを使用するには、左側のメニューから「マイサイトマップ」に進みます
- スクレイピングしたいサイトマップの横にある詳細ページをクリックします
- プロキシドロップダウンメニューから、作成したプロキシを選択し、スクレイピングをクリックします
これで完了です。Web Scraper CloudはBright Dataプロキシ経由でスクレイパーを実行します。
とても簡単です!