研究人員發現「歸因衰減」:擴散模型用愈多資料訓練,任何一張訓練圖片對某個生成結果的因果影響,可能逐漸小到難以偵測。 這項發現只關乎某項訓練資料對輸出的可歸因影響,並不代表圖片從未被使用、儲存或能在其他情況下重現。 研究團隊建立「擴散模型集成」架構,讓不同模型元件只接觸訓練集中的受控分片,藉此精準測試移除某張圖片後的反事實結果。
研究答案

Create a landscape editorial hero image for this Studio Global article: What did Zheng Dai and David Gifford’s MIT CSAIL study, published in Nature Communications, discover about “attribution decay” in diffusion. Article summary: Dai and Gifford found “attribution decay”: as a diffusion image generator is trained on more data, the causal effect of any one training item on a particular generated image can shrink until it is too small to detect.. Topic tags: general web, ai safety, openai, chatgpt, llm. Style: premium digital editorial illustration, source-backed research mood, clean composition, high detail, modern web publication hero. Use reference image context only for broad subject, composition, and topical grounding; do not copy the exact image. Avoid: logos, brand marks, copyrighted characters, real person likenesses, fake screenshots, UI text, readable text, watermarks, charts wit
鄭戴(Zheng Dai)與 David Gifford 來自麻省理工學院電腦科學及人工智能實驗室(MIT CSAIL)的研究,發現擴散式圖像生成器存在一種他們稱為「歸因衰減」(attribution decay)的現象:模型訓練資料愈多,單一訓練項目對某一張生成圖片的因果影響便可能愈來愈小,最後細到無法可靠偵測。這並不等於訓練圖片從未被模型使用、儲存,或模型永遠不能在其他提示詞及生成條件下重現相關內容。
一般做法可能只會估算某張圖片對模型的影響,但研究團隊建立了一個「擴散模型集成」(diffusion ensemble)架構,讓多個獨立訓練的模型元件各自只接觸訓練數據中受控的一部分。
這樣一來,研究人員便可以製造一個較精準的反事實問題:「如果這張圖片從來沒有放入訓練集,結果會點?」他們不需要重新訓練一個龐大的單一模型,而是停用所有曾經看過該圖片的模型元件,再將其餘元件產生的結果,與原本輸出比較。
團隊亦將這種集成架構,與24個使用相同數據訓練的傳統擴散模型比較;兩者在一般圖像質素指標上的表現大致相若。
研究涵蓋7個公開圖像數據集,數據集規模由256張圖片至超過16萬張圖片不等。對每個測試輸出,研究人員都建立一個「反事實宇宙」:逐一省略候選訓練單位,再觀察生成結果與原始輸出之間的最大差異。這個最大差異被稱為「反事實半徑」(counterfactual radius),用來衡量某個被移除單位對輸出的最大因果影響。
結果顯示,當數據集變大,移除單一圖片後的反事實半徑會下降。換句話說,訓練資料愈豐富,某一張圖片愈難單獨左右某個生成結果。
在足夠大的規模下,這種情況甚至可能擴展至整個類別:移除某位藝術家的全部作品,或者移除所有描繪某一個人的相片,都未必會令某張生成圖片出現明顯改變。
研究所講的是一種特定反事實測試下的「非歸因」結果。如果刪除某個訓練單位後,輸出沒有改變,按這項研究採用的衡量方式,就不能將該輸出的因果責任歸給這個單位。
這項研究可能令一種針對圖像生成公司的侵權論證更難成立,例如聲稱某位藝術家的作品,或複製該藝術家風格的作品,直接造成某一個具體AI輸出。假如連藝術家的整個作品庫都移除,生成結果仍然沒有明顯改變,索償一方要證明該藝術家對這個輸出有直接、具體的因果貢獻,可能會更加困難。
不過,研究並沒有替任何訴訟作出裁決,也沒有建立一條新的法律規則。版權案件仍然可能涉及未經授權使用訓練資料、特定輸出與受保護作品之間是否構成實質相似、模型是否曾接觸相關作品、市場損害、合約條款,以及其他與「單一圖片是否為某個輸出所不可或缺」無關的問題。
簡單講,「歸因衰減」指出:當模型規模去到一定程度,單一來源的因果故事可能會失效;但這不代表其他方式永遠無法證明曾經發生複製,亦不代表AI生成內容自然就沒有版權風險。
Studio Global AI
此頁麵包含一個有來源支援的答案,您可以在 Studio Global 內繼續。
研究人員發現「歸因衰減」:擴散模型用愈多資料訓練,任何一張訓練圖片對某個生成結果的因果影響,可能逐漸小到難以偵測。
研究人員發現「歸因衰減」:擴散模型用愈多資料訓練,任何一張訓練圖片對某個生成結果的因果影響,可能逐漸小到難以偵測。 這項發現只關乎某項訓練資料對輸出的可歸因影響,並不代表圖片從未被使用、儲存或能在其他情況下重現。
研究團隊建立「擴散模型集成」架構,讓不同模型元件只接觸訓練集中的受控分片,藉此精準測試移除某張圖片後的反事實結果。