r/poisonaiのキャンペーンは、本物のニュースイベントに見せかけるために3層の偽の証拠を構築しました:
DuckDuckGoのAI Search Assist(Duck.ai) は、自信満々にユーザーに対して「トランプ大統領は2026年6月7日に狂犬病で死亡し、バンス副大統領はそれ以前に死亡した」と回答しました。AIは、偽のWKNA Newsの記事に加え、無関係なオハイオ州の狂犬病被害者に関するABCニュースの記事を「証拠」として引用し、完全で自信に満ちた回答ボックスを生成しました
。BraveのAI検索 も同じ偽情報に騙され、偽のナラティブをそのまま繰り返しました
。
コーネル工科大学の研究者(Tingwei Zhang、Harold Trieuら)によるプレプリント論文が、2026年5月にarXivに投稿され、r/poisonaiが悪用した脆弱性を直接説明しています。この論文は「Deep-Research Agents Can Be Poisoned via User-Generated Content」と題され、WARP(Web Agent Retrieval Poisoning) と呼ばれる攻撃を紹介しています
。
研究の主な発見は以下の通りです:
r/poisonaiのキャンペーンは、コーネル工科大学の論文が説明する脆弱性の実世界での実証です。このサブレディットは、AI検索エージェントがユーザー生成コンテンツを広範囲に取り込み、それを権威ある情報源と区別せずに信頼するという同じメカニズムを武器化しました。AIリサーチエージェントは、全クエリの約半数でReddit、信頼性の低いサイト、フォーラムを情報源としてスクレイピングするため、複数のスレッドにわたる協調的なシードキャンペーンによってコンセンサスがあるように見せかけ、AIはそれを裏付けとして扱いました
。
この事件は、コーネル工科大学の研究結果が実験室での人為的な産物ではないことを証明しています。同じ13語の毒入れテクニックを、複数のスレッドとピンクスライムサイトで拡大しただけで、何百万人もの人々が使用する本番のAIシステムを侵害することに成功したのです。
この偽情報作戦が成功したのは、AI検索ツールが、本物のユーザーの議論と組織的な偽情報キャンペーンを確実に区別できないためです。特に、虚偽のコンテンツが複数の一見独立した情報源にクロスポストされた場合に顕著です。WKNA Newsサイトはまだ偽の記事をホストしており、この毒入りコンテンツがインデックスされたウェブ上でどれほど永続的であるかを示しています
。DuckDuckGoとBraveは両方ともこの事件を認めていますが、根本的な脆弱性、つまりAIエージェントがUGCを権威あるものとして扱うという問題は、アーキテクチャレベルでは未だに修正されていません
。
Comments
0 comments