Helium ScraperプロキシとBright Dataの統合
Helium Scraperは、あらゆるウェブサイトから最も簡単にデータ抽出を実行できるウェブスクレイピングツールです。
Helium Scraperを使用すれば、データの取得方法ではなく、必要なデータに集中できます。
Helium Scraperのセットアップ
- Helium Scraperをダウンロードしてインストールします
- Helium Scraperを起動し、ファイル → プロキシリストを選択します
- リストに項目が含まれる場合は、消去ボタンを押します
Bright DataとHelium Scraperの統合
- Bright Data Dashboardにアクセスし、Zoneの追加をクリックします
- ネットワークタイプを選択して、Zoneの追加を押します
- Bright Dataダッシュボードに戻り、Zone名をクリックします
- Zoneのユーザー名とパスワードを控えておきます
- Helium Scraperプロキシリストに戻り、次のように入力します。
- アドレス:
zproxy.lum-superproxy.io
- ポート:
22225
- ユーザー名:
お使いのZoneユーザー名
- パスワード:
お使いのZoneパスワード
- アドレス:
- 「OK」を押します
プロキシマネージャーとHelium Scraperの統合
- プロキシマネージャーをインストールします
- 新しいプロキシの追加をクリックして必要なZoneと設定を選択し、「保存」をクリックします
- Helium Scraperのプロキシリストに戻り、次のように入力します。
- アドレス:
127.0.0.1
- ポート:
お使いのプロキシポート24XXX
(プロキシマネージャーに表示される) - ユーザー名:
空白のまま
- パスワード:
空白のまま
- アドレス:
- 「OK」を押します
Helium Scraperプロジェクトでプロキシを有効にする
上記の手順を実行すると、Helium Scraperでプロキシが有効になり、すべてのHelium Scraperプロジェクトで利用できるようになります。 特定のプロジェクトでプロキシを使用するように設定するには、以下の手順に従います。
- ファイル → 新規またはファイル → 開くをクリックしてプロジェクトを作成またはロードします
- プロジェクト → 設定を選択します
- プロキシカテゴリで、プロキシを有効にするをTrueに設定して、OKをクリックします
Bright Dataのプロキシについて:
レジデンシャルプロキシ:195カ国、7,200万以上の実際のIPを有するBright Dataのレジデンシャルプロキシは、IP禁止や CAPTCHAを回避しつつ、地理的位置に関係なくあらゆるウェブサイトのコンテンツにアクセスできます。
ISPプロキシ:700,000を超えるISP IPを使用して、ISPにより割り当てられ、Bright Dataにリースされる世界中の都市の本物の静的IPを、必要な期間、お客様専用としてご利用いただけます。
データセンタープロキシ:770,000を超えるデータセンターIPを有するBright Dataのデータセンタープロキシネットワークは、共有IPプールまたは個別に購入した、世界各地の複数のIPタイプで構築されています。
モバイルプロキシ:700万を超えるモバイルIPを有するBright Dataの先進的なモバイルIPネットワークは、世界最速かつ最大のリアルピア3G/4G/5G IPネットワークを提供します。