L'IA crée des images tellement réalistes, c'est effrayant !

Table des matières

1. Introduction
2. L'essor de l'IA dans la création artistique
3. La Fusion de modèles : une nouvelle approche
4. Laura : la nouvelle révolution de l'IA
5. Les mixes : des œuvres d'art uniques
6. Les inquiétudes liées à la génération d'images réalistes
7. L'avenir des médias numériques avec l'IA
8. Les implications éthiques et les défis à venir
9. Conclusion
10. Ressources et références

L'essor de l'IA dans la création artistique

L'intelligence artificielle (IA) a connu une formidable avancée dans le domaine de la création artistique, notamment dans la génération d'images réalistes et d'illustrations. Il y a quelques mois, j'ai présenté des avancées impressionnantes réalisées grâce à Dreambooth, un outil capable de copier n'importe quel sujet ou style artistique. Cependant, depuis lors, des progrès considérables ont été accomplis, rendant les images encore plus réalistes et cohérentes sur le plan artistique.

La fusion de modèles : une nouvelle approche

Pour parvenir à créer des images extrêmement réalistes ou des illustrations aussi cohérentes, nous devons remonter aux idées initiales de Dreambooth et trouver deux modèles complémentaires. Alors que Dreambooth est capable d'apprendre pratiquement n'importe quoi avec un petit ensemble de données, les ajustements et améliorations sur le modèle initial de Dreambooth sont devenus obsolètes. En effet, cela demande beaucoup plus d'images d'entraînement et de temps, ainsi que des coûts informatiques plus élevés, pour obtenir un résultat seulement légèrement amélioré.

C'est pourquoi des personnes créatives de la communauté ont commencé à fusionner Dreambooth avec d'autres modèles affinés et ont découvert que cela fonctionnait étonnamment bien. Cette nouvelle vague de fusion de modèles a permis de créer des œuvres combinant les meilleures qualités de chaque modèle fusionné. Bien que la fusion de modèles n'était pas une idée nouvelle, elle n'était pas beaucoup utilisée lorsque Dreambooth est apparu et a simplifié le processus.

La fusion de modèles classique, qui consiste à ajouter ou à calculer les différences entre les poids des modèles afin de partager uniformément les principales caractéristiques de chacun, et la fusion par blocs, qui permet de spécifier une couche spécifique du modèle pour obtenir plus de contrôle sur les caractéristiques combinées, sont devenues populaires au milieu de janvier. Ces méthodes de fusion ont permis de créer des modèles combinant des fonctionnalités spécifiques, comme la génération de mains réalistes.

Maintenant que nous pouvons fusionner des modèles ensemble de n'importe quelle manière, il n'y a rien qui nous empêche de fusionner un modèle fusionné avec un autre modèle fusionné pour créer un modèle encore plus complexe. Cette approche a donné naissance à certains des mixes les plus populaires, qui combinent différents modèles pour obtenir des détails impossibles à réaliser avec une simple phase d'affinement.

Laura : la nouvelle révolution de l'IA

Deux mois après la sortie de Dreambooth, une nouvelle approche appelée Laura a été présentée. À l'origine, Laura avait été développée dans le but de réduire le stockage et le temps nécessaire à l'affinage des grands modèles de langage. Cependant, certaines personnes ont rapidement compris son potentiel et l'ont intégrée à Sable Diffusion, créant ainsi quelque chose de phénoménal, surpassant même Dreambooth.

Pour mieux comprendre le fonctionnement de Laura, il convient de souligner qu'une phase d'affinage ou d'utilisation de Dreambooth consiste généralement à affiner l'ensemble d'un modèle de 7 Go, ce qui peut être fastidieux et chronophage. Laura, quant à elle, insère de nouvelles couches dans l'architecture et utilise ces quelques couches pour apprendre le but de votre affinage. Fonctionnellement, cette méthode est très similaire à une inversion textuelle, où l'on entraîne un déclencheur avec un sujet pour que l'IA apprenne à quoi cela ressemble. Ensuite, Laura peut régénérer l'idée ou l'objet avec une précision bien meilleure qu'avec une simple inversion textuelle, car son influence sur le modèle est beaucoup plus profonde.

Même si Laura est légèrement plus grande qu'une phase d'affinage traditionnelle, elle reste bien plus petite qu'un modèle Dreambooth affiné. Derrière Laura se cachent des mathématiques très astucieuses qui expliquent pourquoi elle fonctionne si bien. Pour une explication technique détaillée et une comparaison avec d'autres méthodes, je vous recommande de consulter la vidéo de Koiboy, où il explique en détail cette fabuleuse approche.

Les mélanges Le Fontôt très étranges à ce stade. Certaines personnes très ingénieuses ont réussi à fusionner Laura avec des modèles fusionnés, créant ainsi des œuvres d'art vraiment uniques. Ces nouvelles créations artistiques ressemblent très peu à celles générées habituellement par l'IA. Les progrès réalisés dans la génération de texte-images m'ont particulièrement impressionné et préoccupé. Si l'on se souvient des résultats obtenus lors des tests sur des humains, toutes les images étaient marquées par un éclat artificiel étrange ou des textures reconnaissables instantanément comme étant générées par une IA. Cependant, grâce à ces nouveaux mélanges et à Laura, les résultats sont presque réels. J'ai même dû regarder deux fois pour m'assurer qu'il s'agissait de créations générées par IA. Les mélanges basés sur ces modèles extrêmement réalistes, bien que controversés et interdits par les conditions d'utilisation de YouTube, ne laissent pas de nous émerveiller. Les résultats, propres à l'univers du travail, sont stupéfiants.

Les seuls éléments qui trahissent leur origine artificielle sont les motifs vestimentaires ou les accessoires. Cependant, le visage, l'anatomie, l'éclairage, les ombres et les réflexions de ces créations sont effrayamment réalistes. Il est probable que de petites améliorations, telles que les boutons, les mains, voire le texte, puissent être apportées à ces modèles grâce à la fusion, trompant ainsi facilement les gens. Les cosplayers, les stars d'Instagram et même les célébrités en ligne risquent d'être remplacés par de fausses personnalités générées par IA qui satisferont nos goûts personnels. Si nous combinons cela avec le contrôle-net dont j'ai parlé dans ma précédente vidéo, nous aurons encore plus de contrôle dans la génération d'œuvres d'art basées sur l'IA et cela va changer le paysage des médias numériques de manière radicale.

Il est également possible de réaliser un affinage encore plus poussé de ces modèles d'extrême réalisme avec Laura en utilisant les caractéristiques d'une personne spécifique. Cependant, cela comporte des risques similaires aux deepfakes, mais avec une facilité d'utilisation bien plus grande. Alors que la création d'une nouvelle vidéo nécessite de nombreuses heures de travail, un affinage de seulement six minutes avec votre visage à l'Aide de Laura peut permettre à quiconque possède le modèle de générer indéfiniment des créations portant votre visage. Le futur s'annonce très préoccupant et terrifiant pour certains.

Merci de m'avoir suivi jusqu'ici. Je tiens à remercier chaleureusement Andrew Lascellias, Chris LeDoux, Alex Marie et tous les autres qui me soutiennent sur Patreon et YouTube. N'oubliez pas de suivre mon compte Twitter si ce n'est pas déjà fait. À bientôt pour la prochaine vidéo !

Points forts

• La fusion de modèles permet de créer des œuvres uniques en combinant les meilleures caractéristiques de chaque modèle.
• Laura, une nouvelle approche de l'IA, insère de nouvelles couches dans l'architecture des modèles pour obtenir une précision encore meilleure.
• Les mélanges de modèles et l'utilisation de Laura donnent naissance à des créations d'une réalité impressionnante.
• La combinaison de l'IA et du contrôle-net offre de nouvelles possibilités de génération d'œuvres d'art extrêmement réalistes.
• Les implications éthiques et les défis liés à la génération de contenu artificiel sont préoccupants pour l'avenir des médias numériques.

FAQ

Q : Qu'est-ce que Dreambooth ? R : Dreambooth est un outil d'IA permettant de copier n'importe quel sujet ou style artistique.

Q : Qu'est-ce que Laura et comment fonctionne-t-elle ? R : Laura est une nouvelle approche qui insère de nouvelles couches dans l'architecture des modèles pour obtenir des résultats extrêmement précis dans la génération d'œuvres d'art.

Q : Comment se fait la fusion de modèles ? R : La fusion de modèles peut se faire de différentes manières, par ajout ou calcul des différences entre les poids des modèles, ou par fusion de couches spécifiques pour un contrôle plus précis des caractéristiques combinées.

Q : Quelles sont les implications éthiques de la génération d'images réalistes ? R : La génération d'images réalistes soulève des préoccupations quant à l'utilisation abusive de l'IA, notamment en ce qui concerne les deepfakes et la création de fausses personnalités.

Q : Quelle sera l'impact de ces avancées sur les médias numériques ? R : Ces avancées transformeront considérablement le paysage des médias numériques, avec l'apparition de célébrités générées par IA et une grande maîtrise de la génération de contenus réalistes.

Ressources et références

• Vidéo de Koiboy sur Laura (lien : ici)
• Présentation de Dreambooth (lien : ici)
• Exemples de mixes d'illustrations (lien : ici)