動察 Beatingのモニタリングによると、Metaはウェブページを猛烈にクロールし、自社のAI検索用インデックスを構築している。独立開発者のPieter Levels氏は、Metaが今週、自身が運営する複数のサイトを高頻度でクロールしており、そのうちの1台のVPSは複数回ロードアラートを発動したと述べている。
DataDomeの統計によると、今年第2四半期にMetaの2つのAIクローラーは合計91億回のリクエストを送信した。そのうち検索インデックス構築を担当するMeta-WebIndexerは単四半期で163%増加し、6月のリクエスト量は初めてトレーニング用クローラーを上回った。
Metaは2024年にはすでに自社検索エンジンの構築が報じられており、Meta AIがGoogleやBingへの依存を減らすことを目指している。現在、この検索インデックスは明らかに急速に拡大しているが、このような高強度のクロールは、ウェブサイトに実際のユーザーをほとんど還元していない。
Metaの従業員1人がダイレクトメッセージで、同社は自社の「Google」を作り、AI検索リクエストをGoogleに渡して、さらにGoogleにトレーニングに利用されるのを避けたいと考えていると明かした。この部分は現在匿名の情報提供のみであり、Metaによる確認はまだ得られていない。