スクレイピングブラウザ:高度なアンロック機能を備えた完全ホスト型
Selenium対応
APIコールを簡単に実行して任意の数のブラウザセッションを取得し、CDPプロトコル経由でSelenium スクレイピングブラウザを使って操作できます。ページのホバー、ボタンのクリック、スクロール、テキストの入力など、データ取得のためにウェブサイトとのインタラクションが必要なスクレイピングプロジェクトに最適です。
const { Builder, Browser } = require('selenium-webdriver');
const {
AUTH = 'USER:PASS',
TARGET_URL = 'https://example.com',
} = process.env;
async function scrape(url = TARGET_URL) {
if (AUTH == 'USER:PASS') {
throw new Error(`Provide Scraping Browsers credentials in AUTH`
+ ` environment variable or update the script.`);
}
console.log(`Connecting to Browser...`);
const server = `https://${AUTH}@brd.superproxy.io:9515`;
const driver = await new Builder()
.forBrowser(Browser.CHROME)
.usingServer(server)
.build();
try {
console.log(`Connected! Navigating to ${url}...`);
await driver.get(url);
console.log(`Navigated! Scraping page content...`);
const data = await driver.getPageSource();
console.log(`Scraped! Data: ${data}`);
} finally {
await driver.quit();
}
}
if (require.main == module) {
scrape().catch(error => {
console.error(error.stack || error.message || error);
process.exit(1);
});
}
Selenium搭載ブラウザとBright Dataプロキシを使用する
Bright Dataの堅牢なプロキシネットワークをSeleniumスクリプトに簡単に統合し、比類のない信頼性とスケールを実現します。レジデンシャル、データセンター、モバイルプロキシで自動化されたブラウザテストとデータ収集を強化し、世界中でシームレスかつ効率的なアクセスを実現します。
⚠️重要な注意事項: Bright Dataのレジデンシャルプロキシ、Web Unlocker、またはSERP APIをご利用の場合、ターゲットのウェブサイトへのエンドツーエンドの安全な接続を有効にするためにSSL証明書をインストールする必要があります。これは簡単な手順です。詳しい手順はhttps://docs.brightdata.com/general/account/ssl-certificate#installation-of-the-ssl-certificateをご覧ください。
Selenium用プロキシを取得する
受賞歴のあるプロキシネットワークを搭載
72百万以上の住宅用IPアドレス、クラス最高のテクノロジー とターゲットにする能力 国、都市、運送業者、ASN プレミアムプロキシサービスを開発者にとって最高の選択肢にします
あらゆる開発パスに対応するプロキシ
ネットワーク、ピアIP、IPを自由に組み合わせて、ウェブデータの継続的なフローを最適化しましょう。
プロキシとデータ収集の分野における業界トップ
毎日650TBの公共データが収集されている
毎日新機能をリリース
世界有数の大学10校のうち7校にサービスを提供
4.6/5トラストパイロット評価
業界No.1のカスタマーエクスペリエンス
毎日新機能をリリース
必要な時にサポートします
リアルタイムのネットワークパフォーマンス ダッシュボード
マネージャー
パフォーマンス最適化のサポート
お客様のデータ収集目標を満たします