Grâce à la puissance de l’IA, il est désormais possible de reproduire des styles artistiques distinctifs en quelques minutes – une innovation qui laisse les artistes traditionnels sur le carreau car leur art est utilisé pour former des modèles d’IA qui leur volent ensuite des opportunités d’emploi.

Et si vous pouviez empêcher les modèles d’IA de reproduire votre style artistique ?

Des chercheurs de l’Université de Chicago ont créé un outil qui, selon eux, fera exactement cela, un filtre qui, une fois appliqué à une image, signifie que l’image ne peut pas être lue et reproduite par des outils d’IA qui grattent l’art en ligne.

Appelée « Glaze », une version bêta de l’outil gratuit lancé en téléchargement la semaine dernière.

L’art de l’IA peut être produit instantanément, mais uniquement parce que l’IA tire des données de milliers d’œuvres d’art sur Internet dont la création a pris des semaines, voire des mois, à des artistes humains.

Les créateurs affirment que Glaze permettra aux artistes de protéger leur style artistique distinct contre l’absorption dans le pool de données sur lesquelles les outils d’art de l’IA s’appuient.

« Les artistes ont vraiment besoin de cet outil ; l’impact émotionnel et financier de cette technologie sur eux est vraiment bien réel », a déclaré Ben Zhao, professeur Neubauer d’informatique à l’Université de Chicago, dans un communiqué de presse de février. « Nous avons parlé à des enseignants qui voyaient des élèves abandonner leur classe parce qu’ils pensaient qu’il n’y avait aucun espoir pour l’industrie, et à des artistes professionnels qui voient leur style arnaqué à gauche et à droite. »

Le projet impliquait de sonder plus de 1 100 artistes professionnels, selon le communiqué. L’outil a été testé sur 195 artistes historiques, ainsi que sur quatre artistes actuellement en activité, avant qu’un groupe de discussion n’évalue la précision de Glaze à perturber l’imitation de l’IA.

Plus de 90% des artistes interrogés ont déclaré qu’ils étaient prêts à utiliser l’outil lors de la publication de leur art.

Glaze est le deuxième projet du SAND Lab de l’Université de Chicago qui protège les images publiées en ligne. SAND Lab a précédemment créé un outil pour protéger les photos personnelles afin qu’elles ne puissent pas être utilisées pour former un logiciel de reconnaissance faciale en 2020. Mais lorsqu’ils ont commencé à appliquer le même concept à l’art, quelques problèmes se sont immédiatement posés.

Les photos de visages humains peuvent se résumer à quelques caractéristiques distinctes, mais l’art est beaucoup plus complexe, avec un style artistique défini par de nombreuses choses, y compris les coups de pinceau, les palettes de couleurs, la lumière et l’ombre ainsi que la texture et le positionnement.

Afin de confondre les outils d’IA et de s’assurer qu’ils ne seraient pas en mesure de lire le style artistique et de le reproduire, les chercheurs devaient isoler quelles parties d’une œuvre d’art étaient mises en évidence comme indicateurs de style clés par les outils d’art de l’IA.

« Nous n’avons pas besoin de changer toutes les informations de l’image pour protéger les artistes, nous avons seulement besoin de changer les caractéristiques de style », a déclaré Shawn Shan, un étudiant diplômé en informatique de l’UChicago qui a co-écrit l’étude, dans le communiqué de presse. « Nous avons donc dû concevoir un moyen de séparer essentiellement les caractéristiques stylistiques de l’image de l’objet, et d’essayer uniquement de perturber la caractéristique de style à l’aide de la cape. »

Pour ce faire, les chercheurs ont utilisé une approche «combattre le feu par le feu». Glaze fonctionne en utilisant l’IA pour identifier les caractéristiques de style qui changent lorsqu’une image passe à travers un filtre pour la transformer en un nouveau style artistique, comme le cubisme ou l’aquarelle, puis en prenant ces caractéristiques et en les ajustant juste assez pour tromper d’autres outils d’IA.

Ils ciblent le « talon d’Achille des modèles d’IA » qui est « un phénomène appelé exemples contradictoires – de petits ajustements dans les entrées qui peuvent produire des différences massives dans la façon dont les modèles d’IA classent les entrées », selon le site Web.

Fondamentalement, Glaze modifie très légèrement ces éléments clés sur une œuvre d’art, tout en laissant l’art original presque identique à l’œil nu, de sorte que les autres outils d’IA ne pourront pas reconnaître, et donc reproduire, le style individuel de l’art original.

« Nous laissons le modèle nous apprendre quelles parties d’une image se rapportent le plus au style, puis nous utilisons ces informations pour revenir attaquer le modèle et l’induire en erreur en reconnaissant un style différent de ce que l’art utilise réellement, », a déclaré Zhao.

Si un outil d’IA conçu pour reproduire le style d’œuvres d’art essaie de reproduire une œuvre d’art avec Glaze dessus, il lira cette œuvre d’artiste comme ayant un style différent, comme le style artistique de Vincent Van Gogh, et produira une imitation qui utilise ce style à la place.

Bien que de nombreux outils d’art IA aient déjà eu la chance d’apprendre à partir de milliers d’images non masquées en ligne, l’introduction de plus d’images masquées en ligne à l’aide de Glaze réduira leur efficacité en matière d’imitation, selon les chercheurs.

Pour l’utiliser, les artistes peuvent télécharger Glaze sur leur ordinateur et l’exécuter sur des images qu’ils espèrent dissimuler à l’IA. Ils peuvent également personnaliser le nombre de modifications introduites par Glaze, les modifications faibles semblant presque invisibles mais offrant moins de protection contre l’IA, tandis que les modifications plus importantes peuvent être plus visibles mais offrir beaucoup plus de protection.

« La majorité des artistes à qui nous avons parlé avaient déjà pris des mesures contre ces modèles », a déclaré Shan. « Ils ont commencé à supprimer leur art ou à ne télécharger que des images en basse résolution, et ces mesures sont mauvaises pour leur carrière car c’est ainsi qu’ils obtiennent des emplois. Avec Glaze, plus vous perturbez l’image, meilleure est la protection. Et lorsque nous avons demandé aux artistes avec quoi ils étaient à l’aise, un certain nombre ont choisi le plus haut niveau. Ils sont prêts à tolérer de grandes perturbations en raison des conséquences dévastatrices si leurs styles sont volés.