Il a utilisé l'art AI de Midjourney pour gagner une amende

Nov 15, 2023

Lorsque Jason Allen a soumis son "Théâtre D'opéra Spatial" au concours des beaux-arts de la Colorado State Fair la semaine dernière, le somptueux tirage a été un succès immédiat, battant 20 autres artistes dans la catégorie "photographie manipulée numériquement" pour remporter la première place ruban bleu et un prix de 300 $.

Ce qu'Allen avait seulement laissé entendre, cependant, c'est que l'œuvre avait été créée en grande partie par un outil d'intelligence artificielle, Midjourney, qui peut générer des images réalistes à la demande d'un utilisateur. Le portrait de trois personnages, vêtus de robes fluides, regardant vers un au-delà lumineux, était si finement détaillé que les juges ne pouvaient pas le dire.

L'œuvre d'Allen offre un exemple clair de la rapidité avec laquelle l'art généré par l'IA a progressé. Formés sur des milliards d'images Internet, les systèmes ont repoussé de manière décisive les limites de ce que les ordinateurs peuvent créer.

Mais cela a également déclenché un débat massif sur la signification de l'art, Allen étant accusé d'avoir été trompeur en battant d'autres artistes humains avec quelque chose qu'il a demandé à une machine de créer.

Les outils de conversion de texte en image tels que DALL-E 2 et Midjourney ont rapidement gagné en sophistication et sont devenus l'un des sujets les plus brûlants de l'IA. Ils peuvent générer non seulement de fausses personnes, objets et lieux, mais imiter des styles visuels entiers. Les utilisateurs peuvent exiger que l'œuvre d'art ressemble à un livre de contes de dessins animés, à un diagramme historique ou à une photographie de l'Associated Press, et le système fera de son mieux pour s'exécuter.

Mais l'art généré par l'IA a été critiqué comme un plagiat automatisé, car il repose sur des millions d'œuvres d'art ingérées qui sont ensuite reproduites en masse. Cela a également alimenté des peurs plus profondes : décimer le travail créatif des gens, brouiller les frontières de la réalité ou étouffer l'art humain.

Allen a déclaré que son œuvre d'art montre que les gens doivent "dépasser leur déni et leur peur" d'une technologie qui pourrait permettre de nouvelles inventions et remodeler notre monde. L'IA, a-t-il dit, "est un outil, tout comme le pinceau est un outil. Sans la personne, il n'y a pas de force créatrice".

Mais il a également lancé une note de défi envers les critiques qui, selon lui, n'appréciaient pas le message profond de son art généré par l'IA.

"Vous avez dit que l'IA ne serait jamais aussi bonne que vous, que l'IA ne ferait jamais le travail que vous faites, et j'ai dit:" Oh vraiment? Et ça? J'ai gagné "", a-t-il déclaré. "C'est ici maintenant. Reconnaissez-le. Arrêtez de nier la réalité. L'IA ne s'en va pas."

***

Allen, 39 ans, vit au sud de sa ville natale de Colorado Springs et dirige une entreprise, Incarnate Games, qui fabrique des jeux fantastiques sur table. Il est entré dans l'Air Force après le lycée et a obtenu un diplôme en informatique dans une école technique du Colorado. Il ne se considère pas comme un artiste et n'avait jamais participé à un concours artistique auparavant.

Plus tôt cette année, a-t-il dit, il a commencé à remarquer que les gens publiaient plus d'art de l'IA sur les réseaux sociaux, mais il avait d'abord été sceptique quant à l'essayer lui-même pour des "raisons spirituelles". Elon Musk, se souvient-il, avait comparé l'IA à "l'invocation du démon", et la pratique semblait être "une passerelle vers la communication avec l'inconnu".

"C'est ce que l'on ressent. Ce n'est pas créé par un humain", a déclaré Allen jeudi en regardant un tournoi de jiujitsu à Las Vegas. "Il y a beaucoup à dire sur l'ingérence spirituelle dans notre réalité. Ils utiliseraient tout ce qu'ils pourraient pour influencer l'humanité."

Mais l'art était tellement complexe, dit-il, qu'il ne pouvait s'empêcher d'y penser. Il a commencé à jouer avec des outils artistiques alimentés par l'IA : WOMBO Dream, NightCafe, starryai. Puis, quelqu'un l'a invité à Midjourney, et il est devenu obsédé.

L'ingénieur de Google qui pense que l'IA de l'entreprise a pris vie

Midjourney est devenu l'un des générateurs d'art AI les plus populaires en grande partie parce qu'il permet à quiconque de créer librement de nouvelles images sur commande. À l'aide de l'invite "/imagine", un utilisateur peut taper ce qu'il veut voir et l'IA renverra quatre images nouvellement créées en 60 secondes. L'utilisateur peut également demander à l'IA d'améliorer ou de "mettre à l'échelle" la qualité visuelle avec de nouvelles variations sur la même idée.

La start-up, qui s'appelle "un laboratoire de recherche indépendant … élargissant les pouvoirs imaginatifs de l'espèce humaine", opère en grande partie sur un réseau d'un million d'abonnés sur le service de chat Discord, avec des salles consacrées à la création de personnages, aux environnements et "montrez et racontez".

Après avoir payé pour un compte d'entreprise, Allen a commencé à générer des milliers d'images, modifiant les invites de texte à chaque création. Il a expérimenté de nouveaux décors, scénarios et effets. Il a demandé des images dans les styles de Léonard de Vinci et de l'artiste psychédélique américain Alex Gray.

Les pièces qui ont vraiment attiré son attention, cependant, étaient ce qu'il appelle maintenant sa série de "théâtre d'opéra spatial". Il a commencé avec une image mentale simple - "une femme vêtue d'une robe à volants victorienne, portant un casque spatial" - et a continué à affiner les invites, "en utilisant des tests pour vraiment créer une scène épique, comme dans un rêve". Il a dit avoir passé 80 heures à faire plus de 900 itérations de l'art, en ajoutant des mots comme "opulent" et "somptueux" pour affiner son ton et sa sensation. Il a refusé de partager la série complète de mots qu'il a utilisés pour créer son art, affirmant qu'il s'agissait de son produit artistique et qu'il avait l'intention de le publier plus tard. "S'il y a une chose dont vous pouvez vous approprier, c'est votre invite", a-t-il déclaré.

"J'étais comme: mec", a-t-il dit. "C'est tellement dingue ! Je veux en voir plus ! Je suis accro ! Je suis obsédé !"

Lorsqu'il a trouvé des images qu'il aimait vraiment, il les a importées dans Adobe Photoshop pour supprimer les artefacts visuels. Dans une image, il manquait une tête au personnage central, il a donc également peint une coupe de cheveux noirs et ondulés. Il a utilisé un autre outil d'apprentissage automatique, Gigapixel AI, pour augmenter la qualité et la netteté des photos, puis a imprimé les trois pièces sur toile - toutes des variations de l'expression française pour "théâtre d'opéra spatial", qu'il trouvait cool - et a conduit à les soumettre à la foire d'État.

Quand il a regardé les pièces, a-t-il dit, il a vu "une réalité surnaturelle… quelque chose que nous n'avons même pas encore pu expérimenter, au-delà du grand au-delà". Mais le rythme de l'art de l'IA évolue peut-être encore plus vite qu'Internet. "Vous regardez l'art d'il y a un mois", a-t-il ajouté. "En termes de technologie, c'est des décennies. Cette pièce est désuète par rapport à ce que Midjourney fait maintenant."

***

La foire d'État de Pueblo, dans le Colorado, était un lieu improbable pour l'écriture d'un nouveau chapitre de l'histoire de l'art. Le festival vieux de 150 ans, connu pour ses concours de chevaux et de bétail, organise une série de concours d'art plus traditionnels, notamment pour les poupées faites maison, les courtepointes, l'art de la porcelaine et les travaux d'aiguille, ainsi que pour les meilleures carottes en conserve, les remèdes médicinaux et les pains de vacances.

Sur les 596 candidatures au concours "beaux-arts", 21 "artistes émergents" amateurs ont soumis des pièces de "photographie manipulée numériquement", l'une des catégories les plus récentes de la foire. Interrogé sur le matériel d'art qu'il avait utilisé, Allen a uniquement déclaré aux responsables de la foire d'État qu'il avait utilisé Midjourney – bien qu'il ne soit pas entré dans les détails et que personne ne semble l'avoir demandé.

L'un des juges, Dagny McKinley, auteur et historien de l'art qui dirige un festival de dramaturges à Steamboat Springs, se souvient d'être passé devant la toile d'Allen et d'avoir été immédiatement attiré par une pièce qui rappelait l'art de la Renaissance.

"Il y avait une histoire immédiate : des gens regardant dans un autre monde, tout le monde vous tournant le dos, personne ne faisant face ou ne s'engageant avec les téléspectateurs", a-t-elle déclaré. "Tu t'intéresses : qu'est-ce qu'ils voient ?"

McKinley a déclaré qu'elle n'avait pas réalisé que l'art était généré par l'IA, mais a déclaré que cela n'aurait pas changé son jugement de toute façon; Allen, a-t-elle dit, "avait un concept et une vision qu'il a concrétisés, et c'est vraiment une belle pièce".

Sebastian Smee, critique d'art du Washington Post, a déclaré que les textures et l'éclairage de la pièce rappellent Gustave Moreau, un artiste de la fin du XIXe siècle, associé aux décadents, qui a influencé Edgar Degas et Henri Matisse. (Il a également rappelé une citation de l'artiste Sol LeWitt, qui a dit : « L'idée devient une machine qui crée l'art. »)

Quand Allen a lui-même annoncé sa victoire sur la chaîne Discord de Midjourney, affirmant qu'il avait passé "de nombreuses semaines à peaufiner et à organiser", les réponses ont oscillé entre une excitation sourde et une terreur pure et simple. Dans un forum de discussion consacré aux débats philosophiques, un utilisateur a comparé la victoire à "participer à un marathon et conduire une Lamborghini jusqu'à la ligne d'arrivée". Un autre utilisateur a écrit que le "cascadeur" menaçait de "faire interdire cet outil et le haïr encore plus".

Prêt ou pas, les deepfakes vidéo de masse arrivent

La victoire a également déclenché un flot de rage en ligne. Un tweet exprimant une consternation profane face à la victoire d'Allen a été aimé plus de 85 000 fois. Une autre personne a tweeté : "Nous regardons la mort de l'art se dérouler sous nos yeux." Allen a déclaré qu'il avait également reçu "beaucoup de haine très méchante" dans ses boîtes de réception en ligne; sur le profil Instagram de sa société de jeux, un utilisateur a déclaré qu'il devrait rendre son prix et "poster des excuses publiques avant qu'un contrecoup MAJEUR ne vous arrive".

Une partie de la frustration est venue de la façon dont les outils ont été construits : un outil similaire, Stable Diffusion, a été "formé" sur 2 milliards d'images prises sur Internet, y compris sur des blogs personnels et des sites d'art amateur comme Flickr et DeviantArt.

Allen, cependant, rejette le point comme superficiel : « Où avez-vous appris à faire votre art ?

Allen a répertorié les pièces pour 750 $ chacune, a-t-il dit, et deux ont été vendues à la foire à des acheteurs inconnus, bien qu'il s'inquiète maintenant qu'il aurait dû facturer beaucoup plus, étant donné qu'il pourrait s'agir "essentiellement d'une pièce d'histoire de l'art". Sur Discord, certains utilisateurs lui ont demandé s'il aurait dû être plus explicite, ce à quoi Allen a répondu : "Est-ce que j'étais obligé ?"

Malgré la fureur en ligne, les voisins d'Allen semblaient plus optimistes quant à l'adaptation à l'IA. Pour autant que quiconque au ministère de l'Agriculture du Colorado puisse le dire, Allen n'a enfreint aucune règle. Les pièces de la catégorie ne doivent impliquer que "la technologie dans le cadre du processus de création ou de présentation". Les filtres numériques, les outils de manipulation des couleurs et la "recombinaison d'images" sont tous expressément autorisés.

Personne n'a déposé de plainte officielle sur le résultat non plus, a déclaré la porte-parole du département, Olga Robak, bien qu'il y ait eu un différend sans rapport avec le concours de tonte des chèvres de la foire.

Robak, qui a étudié l'histoire de l'art, trouve la controverse fascinante. "Les gens ont mis des bananes sur le mur et ont appelé cela de l'art", a-t-elle déclaré. "Même la photographie n'a pas été considérée comme une forme d'art pendant longtemps ; les gens disaient qu'il s'agissait simplement d'appuyer sur un bouton, et maintenant nous réalisons qu'il s'agit de composition, de couleur, de lumière. Qui sommes-nous pour dire que l'IA n'est pas la même chose ?"

Ne demandez pas si la banane à ruban adhésif est de l'art. Demandez si c'est bon.

***

Jessica Hair, une réceptionniste de 25 ans dans un cabinet médical qui a remporté la troisième place du concours, a déclaré qu'elle ne pensait pas qu'Allen avait agi de manière injuste et qu'elle n'avait aucune rancune à propos de sa victoire.

Hair a déclaré que son "juge, jury, bourreau", qui représente un squelette en smoking sur un trône doré entouré de crânes, a mis 15 heures à créer avec un stylet sur un iPad Pro. Mais la pièce d'Allen a également demandé du temps, des efforts et un jugement subjectif, et "comment qualifions-nous ce qui est et n'est pas de l'art?" dit-elle.

Elle s'est cependant demandé si cela aurait pu enfreindre les règles de la foire exigeant que toutes les œuvres d'art aient été réalisées par des résidents du Colorado. L'IA, où qu'elle existe, serait-elle éligible ?

McKinley, la juge du concours, a déclaré qu'elle comprenait les frustrations de certains artistes se sentant rejetés dans leur métier, et elle pense que le festival devrait envisager une catégorie purement consacrée à l'art de l'IA. Mais elle voit une telle technologie comme ouvrant un nouveau monde de possibilités pour les artistes - et comme quelque chose qu'il vaudrait mieux adopter, car elle ne va pas disparaître.

"Cela n'enlèvera rien à une belle peinture ou à une sculpture que vous pouvez toucher", a-t-elle déclaré. "C'est juste un outil de plus dont nous disposons pour faire avancer ce que nous pouvons créer."

Gregory Block, un peintre à l'huile de Denver qui ne faisait pas partie du concours, a déclaré qu'il avait du mal à imaginer un générateur d'IA supplantant les centaines d'heures - et tout le "cœur, l'âme, le sang, la sueur et les larmes" - qu'il a investi dans son art. Mais il repense également aux artistes qui l'ont d'abord inspiré, qui ont utilisé des appareils rudimentaires comme la camera lucida, dans les années 1800, pour aider leurs propres conceptions.

"Cela a également été considéré comme de la triche", a-t-il déclaré. "Pourtant, ils l'ont utilisé pour créer ces peintures incroyables : des figures anatomiquement correctes, un bel éclairage doux. … Ces étapes technologiques sont essentielles à notre art. Sinon, nous ferions encore des peintures rupestres avec seulement nos mains et notre sang."

L'IA, a-t-il dit, peut imprégner l'art d'une beauté mystérieuse, d'autant plus spéciale qu'elle est si difficile à comprendre. Mais "l'âme que chacun d'entre nous peut trouver dans une œuvre d'art, l'émotion, la lutte humaine à laquelle nous nous identifions dans l'art est toujours la nôtre".

"Il ne doit pas nécessairement être créé à partir d'une âme humaine, l'œuvre d'art elle-même. C'est à nous de voir et de réagir", a déclaré Block. "Nous, les téléspectateurs, sommes, en fin de compte, les artistes ultimes. C'est nous qui créons le monde qui entre dans nos globes oculaires. Ce monde est dans notre esprit."

Nitasha Tiku a contribué à ce rapport.