TelegraphがAIスクレイパーを制御

Telegraph Media Group（TMG）は、世界中のユーザーに高品質のジャーナリズムを配信することを基盤に事業を展開しています。サブスクリプションを優先するビジネスモデルを採用したことで、TMGは2023年に100万人の加入者を獲得するという野心的な目標を達成しました。それ以来、AI主導のコンテンツ・スクレイピングが増加し、新たな課題が生じていました。AIボットは次第に、許可を得ずにTelegraphの報道を収集するようになりました。同社は、信頼を寄せるパートナーであるAkamaiのソリューションを採用することにしました。Akamaiを通じて、TelegraphはAIボットからコンテンツを保護し、APIのセキュリティを確保できています。

AIボットはコンテンツを収集してモデルをトレーニングするだけでなく、ユーザーに要約を提供します。多くの場合、その際に情報元を表示することも対価を支払うこともありません。「人々はAIが提供する要約を見ても、弊社のサイトへクリックスルーしません」とTMGのテクノロジー担当DirectorであるCiro Rizzo氏は説明します。「トラフィックも、エンゲージメントも、収益も失うのです」。 

しかも、一部のアウトプットはTelegraphの報道を不正確に伝え、ブランドの完全性まで危険にさらしています。加えて、スクレイパートラフィックは、収益を生み出すことなく、高コストのインフラキャパシティを消費します。「当社のコンテンツがパートナーにライセンス供与される場合は、ロイヤリティが支払われます」とRizzo氏は説明します。「しかし、スクレイピングされて許可なく使用される場合は違います。当社のビジネスモデルや戦略とは相反するものです」。

同社は「良性」ボットと「悪性」ボットを区別し、不正なクローラーをブロックし、アクセスを希望するユーザーとライセンス契約を結ぶためのインテリジェンスを収集する必要がありました。Akamaiと長年連携してきたため、選択は簡単でした。「他のプロバイダーでは、迅速なコンテンツ配信の実現から高度なボット管理の実現など、当社が直面するさまざまな課題に対処できません」と同氏は述べています。

Telegraphは、AIスクレイピングの問題に直接対処するため、Content Protectorの概念実証（PoC）を行っています。初期の結果から明らかになったことについて、Rizzo氏は「第1段階では目を見張る結果が得られました。そのとき当社は、AIクローラーエコシステムの規模と、この問題の本当の大きさをようやく理解したのです」と述べています。

PoCはすでに、大量の悪質なボットをブロックしています。その多くは、無名のAI企業のボットです。このインテリジェンスは、許可されたクローラーとの将来的な交渉をサポートし、ブランドとコストへの影響を軽減しながら新たな収益源を生み出す可能性があります。

Telegraphのモバイルファースト戦略の中心となるのは、コンテンツ管理システム（CMS）、決済プラットフォーム、サブスクリプション加入者登録サービスを接続する数百ものAPIを活用したアプリエコシステムです。

同社は重要なドメインをAkamai App & API Protectorの背後に移動することで、何百ものAPI全体で一貫したガバナンス、可視性、および制御を実現しました。これは、価値の高い登録サービスや決済サービスにおいて特に重要なことです。

Telegraphのコンテンツライブラリは、1日あたり数百件もの記事の発行を何年にもわたって行っており、SEOとオーディエンスエンゲージメントのための大規模なリダイレクトネットワークによってサポートされています。これまでは、リダイレクトの管理は時間がかかるものであり、社内サーバーに依存していました。

EdgeWorkersに移行することで、Telegraphはこのプロセスを変革しました。かつて15分かかっていたことが、今や数秒で完了するようになりました。「ある記事から別の記事へのトラフィックを促したい場合、EdgeWorkersはすべての場所で、毎回確実に、リダイレクトを即座に展開してくれます」とRizzo氏は述べています。

トラフィックパターンを理解することは、運用効率と戦略的計画の鍵となります。しかし、以前は、Telegraphがすべてのログを集約して関連付けることは困難でした。「そのため、特にCMSやWebサイトの問題をデバッグすることが難しかったのです」と同氏は説明します。

TrafficPeakはログを集約し、関連付けます。Telegraphのサイト信頼性エンジニアリングチームにとって、これは画期的なものでした。「TrafficPeakによって全体像が示され、トラブルシューティングが数時間から数分に短縮されました」とRizzo氏は言います。

さらにRizzo氏は、TrafficPeakが大規模なデータセットを長期間保存して管理することを高く評価しています。「そのようなデータにアクセスすることで、他では得られなかった相関関係やパターンを確認できます」と同氏は続けます。

Rizzo氏は、AkamaiがTelegraphのアプリケーションの未来の進化の役割を担っていると考えています。「Akamaiは、当社がジャーナリズムを保護し、ビジネスを成長させるために必要としている、業界有数の専門知識、サポート、そしてソリューションを確実に提供しています」と同氏は締めくくりました。

Telegraph Media Group（TMG）は、The Daily TelegraphとThe Sunday Telegraph、The Telegraph Magazine、Telegraph.co.uk、およびTelegraphアプリのパブリッシャーです。TMGは、質の高いジャーナリズムを根幹としたサブスクリプション加入者第一のビジネスであり、サブスクリプション加入者とのより深いつながりを大規模に築くことを目標としています。

Telegraph Media Group（TMG）は、The Daily TelegraphとThe Sunday Telegraph、The Telegraph Magazine、Telegraph.co.uk、およびTelegraphアプリのパブリッシャーです。TMGは、質の高いジャーナリズムを根幹としたサブスクリプション加入者第一のビジネスであり、サブスクリプション加入者とのより深いつながりを大規模に築くことを目標としています。