Reddit、AIペイウォールでGoogle以外の検索エンジンをブロック

RedditがGoogle以外の検索エンジンをブロック | DuckDuckGoの検索結果が空になる

Reddit は現在、AI トレーニングの有料化を事実上導入しているため、Google を除くすべての検索エンジンによるサイトのインデックスをブロックしています。

2月には、GoogleがAIモデルのトレーニングに役立てるため、ユーザーの投稿にアクセスするためにRedditに年間6000万ドル以上を支払っていたことが明らかになった。

RedditがGoogle以外の検索エンジンをブロック

Redditはrobots.txtファイルを更新し、すべての検索エンジンをブロックしました。このファイルは、すべてのウェブクローラーに対し、サイトのインデックスを許可していないことを説明メッセージとともに通知します。

Reddit はオープンなインターネットを信じていますが、公開コンテンツの悪用は信じていません。

404 Media はこれを最初に報じ、他の検索エンジンが過去 1 週間以内に投稿された投稿の結果を一切返さなくなったと指摘しました。

Bing、DuckDuckGo、Mojeek、Qwantなど、Googleのインデックスに依存しない他の検索エンジンを使用して「site:reddit.com」でRedditを検索した場合、過去1週間の検索結果は表示されません。DuckDuckGoは現在、Reddit検索で7つのリンクを表示していますが、リンク先や理由に関するデータは提供されておらず、「ここに説明を表示したいのですが、サイトで許可されていません」というメッセージが表示されるだけです。

唯一の例外は、Google から検索結果を購入する検索エンジンです。

Redditは根拠のない発言をしている

Redditは、この変更はGoogleとの契約とは関係ないと主張した。

「これはGoogleとの最近の提携とは全く関係ありません。Googleとの最近の提携のせいで、最近のRedditの検索結果がGoogle以外の検索エンジンで表示されないというのは正確ではありません」と、Redditの広報担当者ティム・ラスシュミット氏はメールで述べた。彼は、AIトレーニングにクロールデータを使用しないことを約束しないクローラーはすべてブロックしており、「複数の検索エンジンと協議を行ってきました。しかし、AIへの利用を含め、Redditのコンテンツの利用に関して、強制力のある約束ができない、あるいは約束する意思のない検索エンジンもあり、全てと合意に至っていません」と述べた。

しかし、この発言は意味をなさない。唯一の例外は、企業がその権限を得るために年間数千万ドルを支払っていることだからだ。明らかに、企業は検索エンジンに対し、AI目的でのサイトのインデックス作成はもはや有料であると伝えている。

マイクロソフトとRedditは膠着状態に

Engadget は、Microsoft が Bing によるアクセスを許可することについて Reddit と協議してきたが、両者は合意に達することができなかったと報じている。

Redditの動向に詳しい情報筋は水曜日にEngadgetに対し、Bingの除外はMicrosoftがRedditのAIクロールに関する条件に同意しなかったためだと語った。Bingの開発元であるMicrosoftは、自社の標準ウェブコントロールで十分だと主張したとされている。情報筋は、Microsoftの姿勢がRedditのデータプライバシーポリシーと矛盾し、行き詰まりと検索結果の空白につながっていると主張している。