WebHarvy プロキシ統合

WebHarveyをBright Dataのプロキシと統合することで、安全で柔軟なプロキシ管理が実現し、シームレスで信頼性の高いデータ抽出による自動ウェブスクレイピングが向上します。

このガイドは古くなっている可能性があります。最新のガイドについてはドキュメントをご覧ください。

無料トライアル Google で始める

クレジットカードは必要ありません

400M+ レジデンシャルIP
スティッキーおよびローテーションセッション
99.95%の成功率
ジオロケーションターゲティング - 無料

WebHarvyとは？

WebHarvyは、ウェブサイトからテキスト、HTML、画像、URL、メールを簡単に抽出し、抽出したコンテンツをさまざまな形式で保存できるウェブスクレイピングツールです。大規模なスクレイピング操作を実行している場合、Bright Dataが提供するプロキシサービスを利用することで、成功率を高め、同じターゲットに対してより多くの同時リクエストを送信できます。

Webharvy用プロキシを取得

WebHarvyとBright Dataプロキシの
設定方法：

WebHarvy Webスクレイパーをダウンロードしてインストールする
Webharvy → ホームタブ → 設定 → プロキシ設定に移動する

WebHarvy toolbar with home and settings options.

Bright Dataのプロキシネットワークに登録する
Bright Dataダッシュボードに移動する
Bright Dataプロキシネットワークと統合セクションで、クローラーまたはボットを使用オプションを選択する

APIサンプルページで、以下の詳細が表示されます：
- プロキシアドレス、ポート番号、ユーザー名、パスワード

Instructions for bot configuration with red arrows.

WebHarvyのプロキシ設定に戻り、Bright Dataの詳細をWebHarvyのプロキシ設定に貼り付ける
＋ボタンをクリックする
適用をクリックする

WebHarvy proxy settings configuration screen.

ご注意ください：Webharvyはマイニング中にのみプロキシサーバーを使用します。Webharvyの設定ブラウザはこのプロキシサーバーを使用しないため、設定ブラウザ内でIPアドレスを確認しても、コンピューターの元のIPアドレスが表示されます。設定ブラウザでプロキシサーバーを使用するには、Windowsで直接プロキシアドレスを設定する必要があります。

プロキシサーバーを無効にするには、Webharvy → ホームメニュー → 設定 → プロキシ設定タブで「プロキシサーバー経由のネットワーク接続を有効にする」チェックボックスをオフにするだけです。

また、より迅速で簡単なプロセスのために、独自のデータ収集ツールをご利用いただけます。

⚠️重要なお知らせ：Bright Dataのレジデンシャルプロキシ、Web UnlockerまたはSERP APIを使用している場合、ターゲットウェブサイトへのエンドツーエンドの安全な接続を有効にするためにSSL証明書をインストールする必要があります。これは簡単なプロセスです。手順についてはhttps://docs.brightdata.com/general/account/ssl-certificate#installation-of-the-ssl-certificateをご覧ください。