Utiliser un LoRA Stable Diffusion

Installer et utiliser les LoRAs avec Automatic1111

Utiliser un LoRA Stable Diffusion
Do not index
Do not index
Flag
A1111
Publish
Publish
feather:link
mydate
Les LoRAs (Low-Rank Adaptation) sont devenus des outils incontournables pour les utilisateurs de Stable Diffusion qui souhaitent personnaliser leurs générations d'images. Ces petits modèles complémentaires, généralement de 10 à 200 Mo, permettent d'ajouter de nouveaux concepts, styles artistiques ou personnages à vos créations sans avoir à télécharger des modèles complets qui pèsent plusieurs gigaoctets.
Leur avantage principal réside dans leur taille réduite qui permet de maintenir une collection variée sans surcharger votre stockage. Que vous souhaitiez créer des images dans le style d'un artiste particulier, générer un personnage spécifique ou améliorer la qualité de vos rendus, les LoRAs offrent une flexibilité remarquable.
Dans cet article nous allons voir comment installer et utiliser un LoRA Stable Diffusion dans l’interface d’Automatic1111
→ Pour tout savoir des LoRAs (qu’est ce que c’est, où en trouvez,…), consultez notre Guide des LoRAs

Tuto LoRAs pour A1111

Installation d'un LoRA

Télécharger un LoRA

Pour d'installer un LoRA, vous devez d'abord le télécharger. Les principales plateformes pour trouver des LoRAs sont :
  • Civitai (https://civitai.com/) : La communauté la plus active avec un filtre dédié permettant de rechercher spécifiquement des modèles LoRA
  • GitHub : Pour les LoRAs développés par des créateurs individuels
Le LoRA prend la forme d’une fichier au format .safetensors ou .pt

Placer le fichier le bon dossier

Maintenant que vous savez où dénicher des LoRAs, passons à leur installation dans l'interface graphique Automatic1111 (que vous pouvez installer avec nos tutos pour Windows, Mac ou Google Drive) ou utiliser en ligne avec Diffus.
C'est simple comme bonjour : placez simplement le fichiers du LoRA de dans le dossier stable-diffusion-webui/models/Lora de votre installation.

Redémarrer ou actualiser l'interface

Si Automatic1111 était déjà ouvert, vous devrez soit redémarrer l'interface, soit cliquer sur le bouton "Refresh" dans l'onglet LoRA pour que le nouveau modèle apparaisse dans la liste.

Utilisation d'un LoRA

Une fois votre LoRA installé, vous pouvez l'utiliser de deux manières différentes dans Automatic1111 ou Forge :

Insertion manuelle dans le prompt

Pour utiliser un LoRA via le prompt dans AUTOMATIC1111 ou Forge, il faut utiliser l’expression suivante dans le prompt : <lora:filename:multiplier>
  • filename correspond au nom du fichier LoRA, sans l'extension (.pt, .bin, etc.)
  • multiplier est le poids appliqué au modèle LoRA, avec une valeur par défaut de 1.
Par exemple : <lora:detail_tweaker:0.8> appliquera le LoRA "detail_tweaker" avec une intensité de 0.8.

Sélection via l'interface (recommandée)

Mais plutôt que de devoir retenir les noms de fichiers et la bonne syntaxe pour le LoRA, vous pouvez simplement cliquez sur le bouton "modèle", puis sur l'onglet "Lora".
Vous verrez alors la liste des modèles LoRA installés (cliquez sur “Refresh” si ce n’est pas le cas).
Cliquez sur le LoRA que vous souhaitez utiliser, et l'expression adéquate sera automatiquement insérée dans votre prompt à la position du curseur.
notion image

Utilisations avancées

Ajuster l'intensité du LoRA

Le paramètre de poids (multiplier) est similaire au poids d'un mot-clé : la valeur par défaut est 1, et la définir à 0 désactive complètement le modèle. Vous pouvez ajuster ce paramètre entre 0 et 1 (ou même au-delà dans certains cas) pour moduler l'effet du LoRA :
  • 0.3-0.5 : Effet subtil
  • 0.6-0.8 : Effet modéré (recommandé pour la plupart des LoRAs)
  • 1.0 : Effet maximal
  • Valeurs négatives : Parfois utilisées pour inverser l'effet

Utiliser les trigger words

De nombreux LoRAs nécessitent l'utilisation de "trigger words" (mots déclencheurs) spécifiques dans votre prompt pour fonctionner correctement. Ces mots déclencheurs sont généralement indiqués dans la description du modèle sur Civitai ou HuggingFace.
Par exemple, pour un LoRA de personnage, vous devrez probablement inclure le nom du personnage dans votre prompt en plus de la balise <lora:...>.

Combiner plusieurs LoRAs

Vous pouvez utiliser plusieurs LoRAs simultanément dans un même prompt. Ajoutez simplement plusieurs balises <lora:...> :
portrait d'une femme, cheveux longs, <lora:detail_tweaker:0.7> <lora:realistic_face:0.8> 

Conseils d'utilisation

  • Compatibilité des modèles : Bien que vous puissiez utiliser un LoRA avec n'importe quel modèle de base, ils sont généralement entraînés sur un modèle spécifique (SDXL, PonyXL,…) et fonctionneront mieux avec ce modèle ou ses dérivés.
  • Expérimentez avec les poids : N'hésitez pas à tester différentes valeurs de multiplier pour trouver l'intensité qui vous convient
  • Lisez les descriptions : Avant d'utiliser un LoRA, consultez sa page sur Civitai pour comprendre les meilleures pratiques d'utilisation
  • Notez aussi que la balise LoRA n'est pas réellement considérée comme faisant partie du prompt dans Automatic1111 ; elle est retirée après l'application du LoRA et ne modifie doonc pas l’importance ou l’effet des autres mots et token dans le prompt.
Avec ces connaissances, vous êtes maintenant prêt à explorer l'univers des LoRAs et à enrichir considérablement vos créations avec Stable Diffusion !

Stop aux heures perdues et aux crédits gaspillés sur des prompts inefficaces. Accédez à plus de 150 prompts éprouvés et opérationnels, pensés pour générer des visuels remarquables en un clin d'œil - sans galère, sans approximation, juste des résultats constants et exploitables.

Marre de tourner en rond ?

Découvrir l'Atelier du Prompt