Générer une image unique en combinant plusieurs modèles LoRA

Avec les progrès de l’intelligence artificielle, les technologies de génération d’images évoluent à une vitesse remarquable. En particulier, les modèles de génération texte-image, qui créent l’image souhaitée à partir d’une saisie textuelle, attirent fortement l’attention dans la création de contenus créatifs et le domaine artistique. Récemment, grâce aux efforts de diverses communautés open source et de chercheurs, des modèles de génération d’images facilement accessibles à tous ont vu le jour. Parmi eux, les modèles LoRA (Low-Rank Adaptation) proposent un nouveau paradigme pour la génération d’images et suscitent un fort intérêt.

La rencontre entre LoRA et MixGen3

L’arrivée des modèles LoRA : les modèles LoRA sont des modèles légers que l’on ajoute à de grands modèles d’intelligence artificielle préentraînés afin de les adapter à la création de nouveaux styles ou contenus. LoRA permet une génération d’images efficace avec une faible taille de modèle, tout en offrant l’avantage de pouvoir exprimer des styles variés. Grâce à des plateformes open source comme Hugging Face, de nombreux modèles LoRA sont partagés et étudiés, ce qui accélère les progrès du domaine de la génération d’images.

Présentation du service MixGen3 : MixGen3, présenté dans ce blog, est justement un service innovant qui exploite ces modèles LoRA pour générer des images. Via MixGen3, les utilisateurs peuvent sélectionner différents modèles LoRA et saisir leurs propres prompts pour créer des images originales. Voyons maintenant plus en détail les points forts et la valeur du service MixGen3.

Ce qui le différencie des services existants :

Intégration des modèles LoRA : MixGen3 réunit plusieurs modèles LoRA au sein d’un seul service. Les utilisateurs peuvent parcourir différents modèles LoRA via une galerie et choisir ceux qu’ils souhaitent. Par rapport à l’approche classique, qui obligeait à rechercher et utiliser séparément chaque modèle LoRA, cela offre un accès bien plus pratique et efficace.

Combinaison de plusieurs modèles LoRA : le principal point distinctif de MixGen3 est la possibilité de combiner jusqu’à 3 modèles LoRA pour générer une image. En fusionnant plusieurs modèles LoRA, il devient possible d’exprimer des styles et des contenus uniques, jusque-là inexistants. Par exemple, en combinant un LoRA de paysage et un LoRA d’animaux, on peut générer l’image d’un chiot jouant sur une belle plage.

Choisir un modèle LoRA
Le choix du modèle LoRA est l’étape la plus importante du service. En effet, les modèles LoRA sont l’élément clé qui détermine le style et le contenu de l’image. Voyons maintenant comment choisir un modèle LoRA.

Cherchez le modèle LoRA souhaité dans la galerie. La galerie affiche les images et les titres des modèles LoRA. Chaque modèle LoRA possède un style propre, alors choisissez celui qui vous plaît.

Cliquez sur un modèle LoRA avec la souris : le modèle sélectionné sera ajouté à la liste des LoRA choisis en haut de l’écran. Vous pouvez sélectionner jusqu’à 3 modèles LoRA.

Dans la liste des LoRA sélectionnés, vous pouvez modifier l’ordre des modèles LoRA ou ajuster leur échelle. L’échelle permet de régler l’influence du modèle LoRA : déplacez le curseur pour définir la valeur souhaitée.

Dans le champ de saisie du prompt, entrez ce que vous souhaitez représenter dans l’image. Par exemple, « beau paysage forestier », « adorable famille de chats » ou « ville surréaliste » : essayez d’exprimer par écrit l’image que vous imaginez.

Cliquez sur le bouton Generate pour lancer la génération de l’image. Une barre de progression (progress bar) apparaît et montre le processus de génération par les modèles LoRA.

Après un court instant, l’image générée apparaît au centre de l’écran.

Vérifier et enregistrer le résultat de l’image
Pour vérifier l’image générée et l’enregistrer, procédez comme suit.

L’image générée s’affiche en grand au centre de l’écran. En cliquant dessus, vous pouvez l’agrandir en plein écran pour l’examiner en détail.

En cliquant sur le bouton de téléchargement en bas à droite de l’image, vous pouvez télécharger l’image. Enregistrez-la où vous le souhaitez pour pouvoir la revoir plus tard.

Vous pouvez modifier la taille de l’image à l’aide du curseur de redimensionnement. Si vous souhaitez enregistrer l’image dans une autre taille, ajustez-la à la taille voulue avant de la télécharger.

[undercat]

C’est bien réussi !

Ce serait encore mieux si l’article était rédigé en Markdown ^^