r/poisonai 行動建構了三層偽造證據,使其看起來像一個合法的新聞事件:
DuckDuckGo的AI搜尋輔助功能(Duck.ai)自信地告訴用戶,川普於2026年6月7日死於狂犬病,而范斯比他更早去世 。它產生了一個完整且自信的答案框,引用了虛假的WKNA News文章,並將一篇不相關的真實ABC新聞關於俄亥俄州狂犬病受害者的文章作為「證據」
。Brave的AI搜尋也同樣上當,重複了虛構的敘述
。
來自康乃爾大學(Cornell Tech)研究人員(Tingwei Zhang、Harold Trieu 等人)的一份預印本研究,於2026年5月發佈在arXiv上,直接解釋了r/poisonai所利用的漏洞 。這篇名為「深度研究代理可經由用戶生成內容被投毒」的論文,介紹了一種稱為 WARP(Web Agent Retrieval Poisoning,網路代理檢索投毒) 的攻擊
。
該研究的關鍵發現包括:
r/poisonai 行動是康乃爾大學論文所述漏洞的真實世界演示。該社團利用了相同的機制——AI搜尋代理廣泛攝取用戶生成內容,卻無法將其與權威來源區分開來 。由於AI研究代理在約半數的查詢中都會從Reddit、低可信度網站和論壇抓取資料,因此一個跨越多個討論串的協同播種行動營造出共識的假象,而AI則將其視為互相佐證
。
這個騙局之所以成功,是因為AI搜尋工具無法可靠地區分真正的用戶討論和協調的虛假訊息活動,特別是當虛假內容跨平台張貼在多個看似獨立的來源上時 。WKNA News網站至今仍保留著那些虛構的文章,顯示了這些被投毒的內容在索引網路中的持久性
。DuckDuckGo和Brave都已承認此事件,但底層的弱點——AI代理將用戶生成內容視為權威來源——在架構層面上仍未得到修補
。
Comments
0 comments