Apify プロキシ統合

Bright DataのプロキシをApifyで使用することで、安全で匿名のデータ抽出が保証され、IPブロックや検出のリスクが軽減され、ウェブスクレイピングの効率が向上します。

このガイドは古くなっている場合があります。最新のガイドについてはドキュメントをご覧ください。

無料トライアル Google で始める

クレジットカードは必要ありません

400M+ レジデンシャルIP
スティッキーおよびローテーションセッション
99.95%の成功率
ジオロケーションターゲティング - 無料

Apifyとは？

Apifyは強力なウェブスクレイピング、データ抽出、およびウェブRPAプラットフォームです。ウェブブラウザで手動で行えることを自動化し、大規模に実行できます。Apify Storeには、設定を少し変更するだけで使用できる数百のスクレイピングツールが揃っています。

プロキシはウェブスクレイピングに欠かせない要素です。ウェブスクレイピングを行う際は常に身元を保護し、ターゲットサイトが導入しているアンチスクレイピング対策やその他の制限にも対応する必要があります。

そこでBright Dataの出番です💪

Bright Dataのプロキシは、スクレイピングや自動化タスクをブロックされることなく完了するのに役立ちます。Bright DataのプロキシはApifyとシームレスに統合され、ブロックされることなく作業を遂行できます。

Apify用プロキシを取得

Apifyを
Bright Dataプロキシで設定する方法：

Bright Dataにアクセス：

Bright Dataアカウントにログインしてダッシュボードに移動します
Proxies & Infraをクリックし、ゾーンを作成します
データセンター、レジデンシャル、ISP、モバイルIPから選択できます
プロジェクトの要件に応じてゾーンを設定および作成します
ゾーン名の横にある設定アイコンをクリックします
ユーザー名とパスワードを取得します

Apifyにアクセス：

apify.comにアクセスし、アカウントにログインします。

Apify Consoleに入ったら、左側のメニューのActorsをクリックします。

Apify user dashboard with various navigation options and cards.

Storeタブの下にウェブスクレイパーがあります。これを例として使用します。クリックしてください。

Web Scraper tool interface in Apify platform.

Inputタブに移動します。
スクレイピングの開始URLとしてlumtestを入力します：https://lumtest.com/myip.json

Page functionに次のコードを貼り付けます：

      async function pageFunction(context) {
    // jQuery is handy for finding DOM elements and extracting data from them.
    // To use it, make sure to enable the "Inject jQuery" option.
    const $ = context.jQuery;

    // Select the element using the 'body > pre' CSS selector and extract its text content.
    const data = $('body > pre').text();

    // Return an object with the extracted data. It will be stored in the resulting dataset.
    return {
        data: data
    };
}

次に下にスクロールしてプロキシとブラウザの設定を見つけます。

own proxyをクリックし、以下の形式でプロキシの認証情報を入力します。

http://username:[email protected]:33335のパスワードは、先ほど作成したゾーンの設定から取得できます。
Bright Dataプロキシのホスト名はbrd.superproxy.io、ポートは33335です。
最終的なBright DataプロキシのURLはこのようになります：http://lum-customer-c_375eb5c4-zone-zone5:[email protected]:33335
あとはStartをクリックするだけです。

データをHTML、JSON、CSV、Excel、XML、RSSフィードとしてプレビューおよびダウンロードするか、出力タブで表示できます
ApifyがプロキシをUを使用したことを確認するには、Bright Dataダッシュボードに移動し、プロキシに進んでイベントログを確認します。

Screenshot of a data table showing JSON data output.

⚠️重要なお知らせ：Bright Dataのレジデンシャルプロキシ、Web Unlocker、またはSERP APIを使用している場合、ターゲットウェブサイトへのエンドツーエンドの安全な接続を有効にするためにSSL証明書をインストールする必要があります。これは簡単な手順です。詳細はhttps://docs.brightdata.com/general/account/ssl-certificate#installation-of-the-ssl-certificateをご覧ください。