Webharvy  proxy integration

WebHarvy プロキシ 統合

WebHarvyは何ですか?

WebHarvy は、Web サイトからテキスト、HTML、画像、URL、電子メールを簡単に抽出し、抽出したコンテンツをさまざまな形式で保存できるウェブスクレイピングツールです。大規模なスクレイピングを実行している場合、Bright Dataが提供するプロキシサービスのいずれかを使用することで、成功率を高め、同じターゲットにより多くの同時リクエストを送ることができます。

Bright Dataプロキシを使用したWebHarvyのセットアップ方法

  • WebHarvy Web Scraperをダウンロードしてインストールします
  • 「Webharvy」 → 「ホーム」タブ → 「設定」 → 「プロキシ設定」の順に進みます
Accessing "Proxy Settings" on Webharvy
  • Bright Dataのプロキシネットワークにサインアップします
  • Bright Dataダッシュボードに移動します
  • Bright Dataプロキシネットワークとの統合セクションで、クローラーまたはボットの使用オプションを選択します
Selecting "With a crawler or a bot" on the integration with Bright Data's Proxy Network
  • 「API例」ページでは、以下の詳細が表示されます:
    • プロキシアドレス、ポート番号、ユーザー名、パスワード
The details you'll need that are under
  • WebHarvyプロキシの設定に戻り、Bright Dataの詳細を WebHarvyプロキシの設定に貼り付けます。
  • +ボタンをクリックします
  • 適用をクリックします
Where to paste the details from Bright Data
: Webharvyはマイニング時にのみプロキシサーバーを使用します。 Webharvyの構成ブラウザはこのプロキシサーバーを使用しないため、構成ブラウザ内でIPアドレスを確認しても、コンピュータの元のIPのままです。 構成ブラウザでプロキシサーバーを使用するには、Windowsでプロキシアドレスを直接設定する必要があります。 プロキシサーバーを無効にするには、Webharvy → 「ホーム」メニュー → 「設定」 → 「プロキシ設定」タブで、プロキシサーバー経由のネットワーク接続を有効にするチェックボックスをオフにするだけです。 あるいは、独自のデータ収集ツールを使用して、プロセスをより迅速かつ簡単にすることもできます。

始める準備はできましたか?

あらゆるニーズに対応するプロキシタイプ

レジデンシャルプロキシ

  • 7,200万を超えるIP
  • 195カ国で利用可能
  • ローテーションに対応する最大級のリアルピアIPネットワーク
  • 洗練されたウェブサイトすべてにアクセスしてクローリング

データセンタープロキシ

  • 1,600万を超えるIP
  • 98カ国で利用可能
  • 共有および専用のIPプールを利用可能
  • 複雑でないウェブサイトへ迅速にアクセス

ISPプロキシ

  • 60万を超えるIP
  • 35カ国で利用可能
  • IPローテーションのない本物のスタティックレジデンシャルIP
  • 複数アカウントへのログインに最適

モバイルプロキシ

  • 700万を超えるIP
  • 195カ国で利用可能
  • 世界最大のリアルピア3G/4G IPネットワーク
  • モバイル広告の検証とモバイルサイトのクローリング

業界No.1のカスタマーエクスペリエンス

お客様のニーズに合わせてカスタマイズ

毎日新しい機能がリリースされています

時間年中無休のグローバルサポート

何時でもお気軽にご連絡ください

完全な透明性

リアルタイムのネットワークパフォーマンス ダッシュボード

専任のアカウント マネージャー

パフォーマンスの最適化を支援します

カスタマイズされたソリューション

データ収集の目標を達成するには

プロキシとデータ収集のカテゴリーリーダー

Category leader in proxies

毎日収集される650TBの公開データ

Number of ISP proxies

700,000+の実際のモバイルIP、実際のピアによって共有

Serving 7/10 universities

世界をリードする大学10校中7校にサービス提供

Trust pilot ratings

業界で4.5/5最高のトラストパイロット評価

WebHarvy用のプロキシを取得する