El problema de la deriva
El SDXL estándar, al recibir el mismo prompt dos veces, produce dos personas visiblemente diferentes. Para un producto complementario donde los usuarios crean un vínculo con un rostro específico, esto es un problema crítico.
La ingeniería de prompts ayuda un poco. Las imágenes de referencia mediante IP-Adapter ayudan más. Ninguna de las dos soluciones cierra la brecha por sí sola.
Por qué LoRAs son la solución
Un LoRA entrenado con entre 20 y 60 imágenes seleccionadas de un personaje bloquea el rostro, cuerpo y estilo dentro del modelo de difusión.
El costo en tiempo de inferencia es aproximadamente el mismo que el SDXL base. El costo de entrenamiento es de unos pocos dólares en un pequeño pod GPU.
Cómo LovlyChat los entrena
Una vez que un personaje se lanza, se ejecuta un trabajo único en un RunPod A40 con kohya_ss durante aproximadamente 2000 a 4000 pasos.
El archivo LoRA resultante pesa unos cientos de MB y se registra contra el id del personaje en nuestra tienda de personajes.
Cómo la API los usa en tiempo de solicitud
Cuando se llama a POST /v1/generation/jobs con un characterId, el worker carga el LoRA correspondiente en el flujo de trabajo SDXL y lo aplica durante el muestreo.
Los LoRAs por personaje son la razón por la que cada imagen que recibes del mismo personaje parece la misma persona.
Preguntas frecuentes
«Cómo LovlyChat mantiene las imágenes de los personajes fieles al modelo: Explicación de los LoRA por personaje» explica por qué el modelo SDXL genérico pierde coherencia entre las distintas generaciones de un mismo personaje y cómo la arquitectura de LovlyChat utiliza LoRA específicos por personaje, entrenados una sola vez en nodos de GPU económicos, para mantener la consistencia facial. Está escrito para usuarios que comparan productos de compañía mediante IA, evalúan experiencias de chat enfocadas en relaciones o buscan una forma más clara de entender este tema antes de probar una plataforma.
Este artículo está dirigido a personas que investigan la consistencia de personajes en SDXL, comparan plataformas de compañía mediante IA o intentan comprender qué características de un producto hacen que el chat de IA con enfoque en relaciones se sienta más personal y valga la pena.
La consistencia de los personajes en SDXL es importante porque los usuarios que buscan este tema suelen tener una intención más clara que el tráfico general de chatbots. Por lo general, valoran la memoria, la personalidad y la continuidad, más allá de la simple novedad o las respuestas aisladas.
Los usuarios pueden explorar estas ideas directamente en lovlychat navegando por los compañeros disponibles, creando un personaje personalizado e iniciando hilos de chat persistentes desde el navegador.