Le problème de dérive
Le SDXL standard, lorsqu’on lui donne deux fois la même invite, produit deux personnes visiblement différentes. Pour un produit compagnon où les utilisateurs s’attachent à un visage spécifique, c’est un frein majeur.
L’ingénierie des invites aide un peu. Les images de référence via IP-Adapter aident davantage. Aucune de ces méthodes ne comble le fossé à elle seule.
Pourquoi les LoRAs sont la solution
Une LoRA entraînée sur 20 à 60 images sélectionnées d’un personnage verrouille le visage, le corps et le style directement dans le modèle de diffusion.
Le coût d’inférence est à peu près le même que celui du SDXL de base. Le coût d’entraînement est de quelques euros sur un petit pod GPU.
Comment LovlyChat les entraîne
Une fois un personnage lancé, un travail unique s’exécute sur un RunPod A40 avec kohya_ss pendant environ 2000 à 4000 étapes.
Le fichier LoRA produit fait quelques centaines de Mo et est enregistré avec l’identifiant du personnage dans notre base de données de personnages.
Comment l’API les utilise au moment de la requête
Lorsque POST /v1/generation/jobs est appelé avec un characterId, le worker charge la LoRA correspondante dans le workflow SDXL et l’applique pendant l’échantillonnage.
Les LoRAs par personnage expliquent pourquoi chaque image que vous recevez du même personnage ressemble à la même personne.
Questions fréquemment posées
« Comment LovlyChat maintient la cohérence des images de personnages : les LoRA par personnage expliqués » détaille pourquoi le modèle SDXL générique perd en cohérence au fil des générations d'un même personnage, et comment la technologie LovlyChat utilise des LoRA par personnage, entraînés une seule fois sur des pods GPU abordables, pour garantir la constance des visages. Cet article est destiné aux utilisateurs qui comparent des plateformes de compagnons IA, évaluent des expériences de chat relationnel ou cherchent à mieux comprendre ce sujet avant de tester une plateforme.
Cet article s'adresse aux personnes qui font des recherches sur la cohérence des personnages SDXL, comparent des plateformes de compagnons IA, ou cherchent à comprendre quelles fonctionnalités rendent les chats relationnels avec une IA plus personnels et engageants sur le long terme.
La cohérence des personnages SDXL est cruciale car les utilisateurs qui s'intéressent à ce sujet ont souvent des attentes plus précises que les utilisateurs de chatbots classiques. Ils accordent généralement plus d'importance à la mémoire, à la personnalité et à la continuité qu'à la simple nouveauté ou aux réponses isolées.
Les utilisateurs peuvent découvrir ces fonctionnalités directement sur lovlychat en parcourant les compagnons, en créant un personnage personnalisé et en ouvrant des fils de discussion persistants directement dans leur navigateur.