Raconter des histoires avec Midjourney

Midjourney vient d’introduire une nouvelle fonctionnalité à son service de génération d’images par IA : la capacité de représenter de manière cohérente des personnages à travers de nouvelles images. Jusqu’à présent, seuls quelques artistes comme Thierry Murat, dans Initial A (lire Qant du 3 octobre 2023), maîtrisaient cette compétence.

Les modèles de diffusion génèrent des images pixel par pixel à partir de descriptions textuelles fournies par l’utilisateur. Cette méthode crée une image nouvelle à chaque fois, même si l’on répète le prompt ou qu’il contient des mots-clés identiques au précédent. Cela rend difficile la création d’images narratives où un même personnage apparaît dans différents contextes. 

Pour surmonter ce problème, Midjourney a créé une nouvelle balise, “–cref” (pour « référence de personnage »), que les utilisateurs peuvent ajouter à leurs prompts. Cette balise vise à reproduire les traits faciaux, le type de corps et même les vêtements d’un personnage à partir d’une URL fournie par l’utilisateur. 

Les utilisateurs peuvent également ajuster la fidélité de la nouvelle image au personnage original en ajoutant une balise de température, “–cw”, suivie d’un nombre de 1 à 100. Une valeur “cw” plus basse permet plus de variabilité, tandis qu’un nombre plus élevé garantit une plus grande fidélité au personnage de référence. A partir de l’image ci-dessus, on obtient alors : 

Midjourney a gardé la plupart des caractéristiques de notre personnage, comme l’apparence et la couleur de ses cheveux et de sa barbe, ou bien la couleur de son t-shirt. Mais les deux visages ne sont pas parfaitement identiques. 

Encore un effort.

Pour en savoir plus :

• Midjourney
• Venturebeat

• Midjourney-Stabiliy : la guerre des images • Midjourney a interdit à tous les employés de Stability AI d’utiliser son service après que des comptes liés à l’entreprise créatrice de Stable Diffusion se soient livrés à des activités s’apparentant à celles d’un botnet. Des employés de Stability AI avaient tenté de télécharger des données de Midjourney, entraînant une panne de près de 24 heures. Le CEO de Stability AI, Emad Mostaque, a indiqué avoir mené une enquête interne. Il a affirmé que, si l’incident était bien lié à un employé de Stability, l’entreprise n’en était pas à l’origine. Le service de Midjourney se base probablement sur Stable Diffusion et un autre LLM pour la réécriture des prompts (lire Qant du 23 novembre 2023) mais l’entreprise ne l’a jamais reconnu publiquement.Pour en savoir plus: The Verge