Cloudflare、AIボットからウェブサイトを守る新機能を発表
ITmedia NEWS / 2024年7月5日 10時35分
過去1年にCloudflareのネットワーク上で見られたAIボットの推移(画像:Cloudflare)
インターネットセキュリティ企業の米Cloudflareは7月3日(現地時間)、AIによるWebサイトのスクレイピング(データの自動収集)を防ぐ新機能を発表した。この機能により、Webサイト運営者は簡単な操作でAIボットからサイトを守ることができるようになるとしている。
近年、米OpenAIの「ChatGPT」などの生成AIの登場により、AIの学習に使用されるデータの需要が急増している。そのため、多くのAI企業がインターネット上の情報を大規模に収集しようとしている。
従来、Webサイト運営者はrobots.txtというファイルを使用して、検索エンジンのクローラーなどのボットにサイトのどの部分にアクセスしてよいかを指示していた。
だが、この方法には限界があるとCloudflareは説明する。例えば、robots.txtは「紳士協定」のようなもので、悪意のあるボットは無視する可能性がある。また、ボットは簡単にユーザーエージェントを偽装できるため、正体を隠すことができる。
Cloudflareの新機能「AI Scrapers and Crawlers」は、グローバルな機械学習モデルを使用して、偽装したボットも検出できるという。顧客はダッシュボード上のトグルスイッチを有効にするだけで利用可能だ。無料プランを含む、すべての顧客が利用できる。
機能を有効にしておくと、新しいAIボットが発見されるごとに自動的にブロックリストに追加される。
Cloudflareは、1秒間に平均5700万件以上のリクエストを処理する巨大なネットワークを持っており、この膨大なデータを活用して、AIボットの行動パターンを学習し、高精度で検出する。例えば、ユーザーエージェントを偽装してブラウザのふりをしているボットでも、その他の特徴から「ボットらしさ」をスコア化し、30点以下のスコアのアクセスを自動的にブロックする。
Cloudflareは、この機能を継続的に改善していく方針。また、不正なAIボットの報告システムも用意し、ユーザーからのフィードバックを積極的に受け付けているとしている。
外部リンク
この記事に関連するニュース
-
Google、Vertex AIのグラウンディング機能強化 Moody'sなどのコンテンツを利用可能に
ITmedia NEWS / 2024年6月28日 12時7分
-
ソフトバンクと提携のPerplexity、「記事を盗用した」とForbesが非難
ITmedia NEWS / 2024年6月20日 11時36分
-
マイクロストラテジー、AIを活用して社内全体でのデータ活用を可能にする最新機能を発表
PR TIMES / 2024年6月18日 13時45分
-
クラウドストライクとCloudflare、ネットワークセキュリティ強化とAIネイティブなSOCの実現に向けた戦略的提携の拡大を発表
PR TIMES / 2024年6月5日 18時15分
-
CrowdStrikeとCloudflare、ネットワークの保護とAIネイティブなSOCの実現に向けて戦略的パートナーシップの拡大を発表
PR TIMES / 2024年6月5日 17時45分
ランキング
-
1「鬼すぎない?」 大正製薬の広告が“性差別”と物議…… 男女の“非対称性”に「昭和かな?」「時代にあってない」
ねとらぼ / 2024年7月4日 18時32分
-
2「知らんかった」 Googleで“あるワード”を検索すると……? あまりに“癒やし”な「隠し機能」に5万いいね「延々とやっちゃう」
ねとらぼ / 2024年7月4日 20時45分
-
3「Thank you Buddies!」 櫻坂46、最新曲「自業自得」ライブ映像を公開 「これだよこれ!」「いきなり凄いものが…」反響続出
ねとらぼ / 2024年7月4日 20時53分
-
4楽天ペイと楽天ポイントのキャンペーンまとめ【7月4日最新版】 楽天ペイアプリでポイント最大10倍もらえる
ITmedia Mobile / 2024年7月4日 10時5分
-
5「ドコモ光 1ギガ」旧プランを2025年6月に提供終了、解約金の安い新プランへ自動移行
マイナビニュース / 2024年7月4日 19時15分
記事ミッション中・・・
記事にリアクションする
記事ミッション中・・・
記事にリアクションする
エラーが発生しました
ページを再読み込みして
ください