本記事では以下の点について議論します：
- 旅行業界におけるデータ収集の課題
- 企業がウェブデータを活用して業務効率を飛躍的に向上させる方法
旅行業界におけるデータ収集の課題
競合他社の情報収集の難しさ
対象サイトからリアルタイムの旅行データ（価格やパッケージなど）を収集しようとする際、主な課題は次の2点です：
第一に：競合サイトは 単一IPアドレスからのトラフィックが過剰と判断した場合、データ収集をブロックする（いわゆる「レート制限」）。
二つ目：ターゲット層のニーズに合わせた地域特化型情報へのアクセス獲得。多くのサイトは、自国以外の地域からの情報リクエストを歪めるかブロックする（例：ニューヨークのホテルが日本のOTAで消費者に表示される価格を確認しようとする場合）。
API関連の課題
APIを用いたデータ収集全般、特に旅行業界における主な課題は以下の通りです：
- 古いデータ– 取得されるデータが対象サイトでコミットされた最新バージョンではなく、情報の最終キャッシュバージョンである状態を指します。例えば、市場で最も競争力のあるオファーを提供しようとする旅行パッケージ会社が、1日前の情報に基づいて取引を行う場合などに問題を引き起こします。
- 同時リクエスト制限– 多くのAPIは、ユーザーが同時に実行できるアクティブセッション数に制限を設けています。これは、競争力を維持するために数百から数千の業界サイトを同時にスキャンする必要があるOTAにとって、大きな制約となり得ます。
- API呼び出し– 多くのAPIが一定期間内の呼び出し数を制限するため、これも定量的制約となります。これにより、旅行サイトは新たな旅行トレンドや消費者行動を自由に監視できず、対象データを細かく選別し、正確なバッチサイズを計算する必要があります。これは企業が発見できるデータ駆動型の機会を大幅に制限する可能性があります。
- バッチサイズ– バッチサイズの制限は対象サイト側にも存在します。対象サイトがリクエストごとのバッチを100レコードに制限している場合、ジョブを完了するには10回のデータリクエストが必要となります。これは実質的に情報取得速度の低下を意味し、市場の変化に即応・対応する企業の機動力は鈍化します。
企業がウェブデータを活用して業務を加速させる方法
企業1：第三者流通チャネルでの料金表示状況を把握したいホテルチェーン
企業概要： 米国に拠点を置く中規模ホテルチェーン。 主にレジャー客を対象としており、顧客の大半が客室を検索・予約するOTA（オンライン旅行代理店）経由のウェブトラフィックに大きく依存している。
課題：予約を第三者サイトに依存しているため、ベンダーが自社の客室をいくらで表示するかを制御できない。OTAは施設に通知せずに価格を引き下げることで知られており、その差額を他の掲載物件の価格引き上げで補填している。これは特定の状況で顧客を獲得するための戦略であり、OTAにとっては有利だが、ホテルのブランドを損なう。
ホテルチェーンは、こうした行為が運営契約違反であるとして、法務部門を通じてOTAに是正を求めたいと考えている。しかしその前に、主張を立証するための情報収集が必要だ。問題は、ホテルの技術チームが使用しているAPIが旧式で、全ての第三者サイトへの「同時リクエスト」送信に問題があり、頻繁に「古いデータ」を受け取ってしまう点にある。
解決策：同社は 現在、ローテーション型レジデンシャルIPネットワークへのアクセスを提供するデータ収集ネットワークを採用している。これは世界各国・都市に居住する実在の個人に属するレジデンシャルIPアドレスのグローバルネットワークである。各リクエストが異なる端末を経由するため、ホテルは無制限の同時リクエスト送信が可能となった。
このプロキシネットワークは遅延が極めて低く、キャッシュ情報にアクセスせず対象サイトのライブデータから直接取得するため、データは高精度かつリアルタイムで取得されます。
結果として、同社は すべての第三者ベンダーが事前定義・合意済みの最低価格を下回らない価格設定を維持していることを保証できるようになった。
企業 #2: 自社のオファーの競争力を知りたいオンライン旅行代理店（OTA）
企業概要： 航空券・レンタカー・宿泊施設を含む旅行パッケージを提供するOTA。多岐にわたる競合が存在し、絶えず変化・進化する環境で事業を展開。
課題：同社は 複数の地域で事業を展開しているため、競合他社が異なるターゲット層に類似したオファーをどのように表示しているか、リアルタイムで情報を収集する必要がある。 しかし、本社はドイツにあるため、この実現は容易ではありません。競合他社のサイトから情報を取得することは可能ですが、ターゲットサイトへのトラフィックが過剰なため、IPアドレスがブラックリストに登録されるケースが頻繁に発生します。また、例えばドイツのIPアドレスでは中国国内のサイトにアクセスできない場合もあります。
解決策：同社は 「Web Unlocker」というツールを採用。これによりIPローテーションの自動化と機械学習（ML）アルゴリズムを活用し、対象サイトのブロックや制限を回避・解決できるようになった。
結果：このOTAは 競争力を高め、自社の事業環境に適したバンドルを提供できるようになった。競合他社のバンドルオファーが変更されるとシステムが自動更新されるため、必要と判断した時点で戦略的に方向転換が可能となった。
結論
旅行業界の多くの企業は、APIレベルで古いデータや同時リクエストに苦戦しています。また、市場シェア拡大のために競合情報をリアルタイムで入手することが困難な企業も少なくありません。データ収集能力と成功率を向上させるデータ収集ネットワークを活用することで、激戦市場において貴社を際立たせることが可能です。
