Cette architecture permet de poser une question très concrète : qu’aurait produit le modèle si cette image n’avait pas influencé son entraînement ? Au lieu de réentraîner entièrement un modèle de grande taille, les chercheurs peuvent désactiver les composants qui ont vu l’image sélectionnée, puis générer un résultat de comparaison. Il s’agit d’une ablation de l’influence de l’image, et non d’une simple estimation approximative.
L’équipe a étudié 24 ensembles de modèles de diffusion à partir de sept collections publiques d’images. Les jeux de données comprenaient entre 256 images et plus de 160 000 images, ce qui a permis d’observer l’évolution de l’attribution lorsque le volume de données augmente. Les chercheurs ont comparé une génération originale à des versions contrefactuelles produites après l’omission de différentes unités d’entraînement.
La plus grande différence mesurée entre le résultat original et ces versions contrefactuelles a été appelée « counterfactual radius », ou rayon contrefactuel. Cette mesure sert à évaluer l’ampleur du changement qu’une unité d’entraînement supprimée peut provoquer dans le résultat.
Le rayon contrefactuel diminuait à mesure que les jeux de données s’agrandissaient. En pratique, supprimer une seule image produisait de plus en plus souvent un résultat difficile à distinguer de l’original selon la mesure utilisée par l’étude.
L’idée est contre-intuitive : ajouter davantage de données peut rendre une image générée moins attribuable à un exemple unique, même si cet exemple faisait bien partie des données d’entraînement. Le modèle apprend alors des motifs généraux et largement recouvrants à partir de nombreuses sources, plutôt que de dépendre d’une image identifiable pour produire un résultat particulier.
À une échelle suffisamment importante, le phénomène ne concernait plus seulement des images isolées. Selon l’étude, retirer toutes les images d’un artiste donné, ou toutes les photographies représentant une personne précise, pouvait également laisser un échantillon généré pratiquement inchangé dans le cadre du test contrefactuel.
Les chercheurs parlent donc de « déclin » plutôt que d’un simple échec des outils de traçage. Le problème ne vient pas nécessairement d’un manque de puissance des méthodes d’analyse : le lien causal entre une source et un résultat peut lui-même devenir trop diffus pour être isolé.
L’attribution decay pourrait compliquer une théorie précise dans certains contentieux : celle selon laquelle une image contestée aurait été directement causée par les œuvres d’un artiste identifié, ou par des copies de ces œuvres présentes dans les données d’entraînement. Si la suppression de l’ensemble du corpus d’un artiste ne modifie pas sensiblement le résultat, il devient plus difficile de soutenir que ce corpus était individuellement nécessaire à la production de cette image selon ce test causal.
Cela pourrait peser dans les affaires opposant des artistes aux entreprises de génération d’images et dans les accusations selon lesquelles les modèles reproduiraient le style de créateurs. L’entraînement à très grande échelle fragilise en effet un récit simple dans lequel un résultat reconnaissable serait directement issu d’une œuvre ou d’un artiste précis. L’étude pourrait ainsi compliquer certains dossiers de propriété intellectuelle liés aux systèmes d’image générative.
Mais la recherche ne détermine pas si une entreprise a enfreint le droit d’auteur et ne constitue pas, à elle seule, une défense juridique. Un litige peut soulever plusieurs questions : des œuvres protégées ont-elles été copiées pendant l’entraînement ? Le résultat est-il substantiellement similaire à une œuvre protégée ? Le système peut-il la reproduire dans certaines conditions ? Quel préjudice ou quelles obligations contractuelles sont en jeu ?
Le sens technique de « non attribuable » ne doit donc pas être confondu avec le sens juridique de « non copié ».
L’expérience mesure la sensibilité du modèle au retrait d’unités d’entraînement. Elle ne teste pas toutes les formes possibles de conservation ou de reproduction d’une information.
Un modèle peut dépendre faiblement d’une image individuelle dans le test de suppression utilisé par l’ensemble de modèles, tout en étant capable de reproduire une œuvre dans certaines conditions de requête ou d’échantillonnage. Un résultat peut aussi ressembler à une œuvre protégée sans qu’une image unique soit identifiée comme causalement indispensable à sa production.
Il faut distinguer trois affirmations :
L’attribution decay concerne directement la première question. Il ne tranche ni la deuxième ni la troisième.
L’étude porte sur des modèles génératifs fondés sur la diffusion, utilisés pour les images et des contenus audiovisuels apparentés. Son architecture en ensemble et la tendance observée lorsque les données augmentent ne peuvent pas être automatiquement extrapolées aux grands modèles de langage — les LLM — fondés sur des transformeurs.
Les modèles de langage ont une architecture, des procédures d’entraînement, des représentations en tokens et un comportement de sortie différents. L’étude peut ouvrir une piste expérimentale pour de futurs travaux sur l’attribution, mais elle ne démontre pas qu’un phénomène identique existe dans les LLM.
Lorsqu’il s’agit de déterminer si un système d’IA a copié une œuvre, l’attribution decay ne constitue qu’un élément parmi d’autres. Les tribunaux et les experts techniques devront toujours pouvoir examiner notamment :
La leçon centrale de l’étude est donc plus nuancée — et plus utile — que l’idée selon laquelle l’IA « oublierait » ses sources. À mesure que les jeux de données de diffusion grandissent, la contribution causale de chaque exemple individuel peut devenir trop diffuse pour être détectée dans un résultat particulier. Cela rend l’attribution des sources plus difficile, sans rendre impossibles l’analyse de la mémorisation, de la reproduction ou d’une éventuelle atteinte au droit d’auteur.
Cette architecture permet de poser une question très concrète : qu’aurait produit le modèle si cette image n’avait pas influencé son entraînement ? Au lieu de réentraîner entièrement un modèle de grande taille, les chercheurs peuvent désactiver les composants qui ont vu l’image sélectionnée, puis générer un résultat de comparaison. Il s’agit d’une ablation de l’influence de l’image, et non d’une simple estimation approximative.
L’équipe a étudié 24 ensembles de modèles de diffusion à partir de sept collections publiques d’images. Les jeux de données comprenaient entre 256 images et plus de 160 000 images, ce qui a permis d’observer l’évolution de l’attribution lorsque le volume de données augmente. Les chercheurs ont comparé une génération originale à des versions contrefactuelles produites après l’omission de différentes unités d’entraînement.
La plus grande différence mesurée entre le résultat original et ces versions contrefactuelles a été appelée « counterfactual radius », ou rayon contrefactuel. Cette mesure sert à évaluer l’ampleur du changement qu’une unité d’entraînement supprimée peut provoquer dans le résultat.
Le rayon contrefactuel diminuait à mesure que les jeux de données s’agrandissaient. En pratique, supprimer une seule image produisait de plus en plus souvent un résultat difficile à distinguer de l’original selon la mesure utilisée par l’étude.
L’idée est contre-intuitive : ajouter davantage de données peut rendre une image générée moins attribuable à un exemple unique, même si cet exemple faisait bien partie des données d’entraînement. Le modèle apprend alors des motifs généraux et largement recouvrants à partir de nombreuses sources, plutôt que de dépendre d’une image identifiable pour produire un résultat particulier.
À une échelle suffisamment importante, le phénomène ne concernait plus seulement des images isolées. Selon l’étude, retirer toutes les images d’un artiste donné, ou toutes les photographies représentant une personne précise, pouvait également laisser un échantillon généré pratiquement inchangé dans le cadre du test contrefactuel.
Les chercheurs parlent donc de « déclin » plutôt que d’un simple échec des outils de traçage. Le problème ne vient pas nécessairement d’un manque de puissance des méthodes d’analyse : le lien causal entre une source et un résultat peut lui-même devenir trop diffus pour être isolé.
L’attribution decay pourrait compliquer une théorie précise dans certains contentieux : celle selon laquelle une image contestée aurait été directement causée par les œuvres d’un artiste identifié, ou par des copies de ces œuvres présentes dans les données d’entraînement. Si la suppression de l’ensemble du corpus d’un artiste ne modifie pas sensiblement le résultat, il devient plus difficile de soutenir que ce corpus était individuellement nécessaire à la production de cette image selon ce test causal.
Cela pourrait peser dans les affaires opposant des artistes aux entreprises de génération d’images et dans les accusations selon lesquelles les modèles reproduiraient le style de créateurs. L’entraînement à très grande échelle fragilise en effet un récit simple dans lequel un résultat reconnaissable serait directement issu d’une œuvre ou d’un artiste précis. L’étude pourrait ainsi compliquer certains dossiers de propriété intellectuelle liés aux systèmes d’image générative.
Mais la recherche ne détermine pas si une entreprise a enfreint le droit d’auteur et ne constitue pas, à elle seule, une défense juridique. Un litige peut soulever plusieurs questions : des œuvres protégées ont-elles été copiées pendant l’entraînement ? Le résultat est-il substantiellement similaire à une œuvre protégée ? Le système peut-il la reproduire dans certaines conditions ? Quel préjudice ou quelles obligations contractuelles sont en jeu ?
Le sens technique de « non attribuable » ne doit donc pas être confondu avec le sens juridique de « non copié ».
L’expérience mesure la sensibilité du modèle au retrait d’unités d’entraînement. Elle ne teste pas toutes les formes possibles de conservation ou de reproduction d’une information.
Un modèle peut dépendre faiblement d’une image individuelle dans le test de suppression utilisé par l’ensemble de modèles, tout en étant capable de reproduire une œuvre dans certaines conditions de requête ou d’échantillonnage. Un résultat peut aussi ressembler à une œuvre protégée sans qu’une image unique soit identifiée comme causalement indispensable à sa production.
Il faut distinguer trois affirmations :
L’attribution decay concerne directement la première question. Il ne tranche ni la deuxième ni la troisième.
L’étude porte sur des modèles génératifs fondés sur la diffusion, utilisés pour les images et des contenus audiovisuels apparentés. Son architecture en ensemble et la tendance observée lorsque les données augmentent ne peuvent pas être automatiquement extrapolées aux grands modèles de langage — les LLM — fondés sur des transformeurs.
Les modèles de langage ont une architecture, des procédures d’entraînement, des représentations en tokens et un comportement de sortie différents. L’étude peut ouvrir une piste expérimentale pour de futurs travaux sur l’attribution, mais elle ne démontre pas qu’un phénomène identique existe dans les LLM.
Lorsqu’il s’agit de déterminer si un système d’IA a copié une œuvre, l’attribution decay ne constitue qu’un élément parmi d’autres. Les tribunaux et les experts techniques devront toujours pouvoir examiner notamment :
La leçon centrale de l’étude est donc plus nuancée — et plus utile — que l’idée selon laquelle l’IA « oublierait » ses sources. À mesure que les jeux de données de diffusion grandissent, la contribution causale de chaque exemple individuel peut devenir trop diffuse pour être détectée dans un résultat particulier. Cela rend l’attribution des sources plus difficile, sans rendre impossibles l’analyse de la mémorisation, de la reproduction ou d’une éventuelle atteinte au droit d’auteur.