Utilización de LoRA con Fooocus

Utilización de LoRA con Fooocus
Do not index
Do not index
canonical-url
Publish
Publish
Desde su aparición hace unos meses, los LoRAs, estos mini modelos de ajuste para Stable Diffusion, han ganado una enorme popularidad y ahora representan uno de los puntos fuertes de Stable Diffusion en comparación con otras IAs de generación de imágenes.
Gracias al gran número de LoRAs creados y compartidos por la comunidad, resulta muy fácil generar imágenes utilizando personajes, estilos específicos u otros conceptos que no formaban parte de los datos de formación originales.
Detrás de su aspecto minimalista y su funcionamiento simplificado la interfaz de Fooocus esconde en realidad una gran cantidad de funciones útiles y bien pensadas, como el uso de LoRA
Veamos cómo añadir y utilizar un LoRA en Fooocus.
📌
¿Fooocus?
Fooocus es una nueva interfaz para Stable Diffusion que ofrece una experiencia sencilla y permite crear bellas imágenes con un mínimo de conocimientos y sin tener que lidiar con múltiples ajustes y parámetros.
Te explicamos cómo instalarlo y utilizarlo en nuestro artículo sobre Fooocus

Añadir un LoRA en Fooocus

¿Dónde puedo encontrar las LoRA?

El mejor recurso para encontrar LoRAs es Civitai - el sitio de intercambio de la comunidad donde muchos diseñadores comparten sus modelos, LoRAs y prompts
https://civitai.com/login?ref_code=THO-MXY
Haz clic en Modelos (arriba a la izquierda) para buscar entre los modelos disponibles en el sitio y, a continuación, en Filtro marca LoRA para limitar la búsqueda a los LoRA.
Como Fooocus trabaja exclusivamente con SDXL y los modelos derivados de él, también puedes marcar la casilla SDXL para tener sólo los LoRAs compatibles
Una vez que haya encontrado un LoRA que le interese, descárguelo (utilizando el botón Download situado a la derecha de las imágenes en la página del LoRA).
 
notion image
 

Coloque el archivo en el directorio Fooocus

Para añadir un LoRA a Fooocus, basta con colocar el archivo descargado en el directorio /models/loras de su instalación
En Windows, Max o Linux, este directorio se encuentra en su disco duro, donde instaló Fooocus. Mueva allí el fichero LoRA (a priori, un fichero .safetensor)
Où placer un LoRA sur Mac ?
Où placer un LoRA sur Mac ?
Si utiliza la versión alojada en Google Colab ,también puede añadir sus LoRA siguiendo el procedimiento que se indica a continuación (haga clic en el título para ver los pasos)
¿Cómo añado LoRAs a Fooocus en Google Colab?
  1. Ejecuta Colab - Fooocus se instalará.
  1. Haga clic en el icono de carpeta del menú de la izquierda de la pantalla.
  1. Abra el directorio Fooocus haciendo clic sobre él
  1. Abra el directorio modelos haciendo clic en él
  1. Abra el directorio loras haciendo clic sobre él
  1. Al pasar el el ratón por encima del loras, aparece un icono (tres puntos verticales). Haga clic sobre él
  1. En el menú que aparece, seleccione "Import".
  1. Seleccione su fichero LoRA y confirme.
  1. Espere hasta que el archivo esté completamente cargado y desaparezca de la parte inferior de la columna.
  1. Una vez importado el fichero, puedes abrir Fooocus y utilizar el LoRA como se explica a continuación.
notion image

Utilización de un LoRA en Fooocus

Activación de LoRA

Para activar uno o varios LoRA en Fooocus, hay que abrir la interfaz Advanced marcando la casilla del mismo nombre en la parte inferior de la pantalla, bajo el campo Prompt.
En el menú que se abre a la derecha, elija la pestaña Model.
En la sección LoRAs, puede seleccionar hasta 5 LoRAs que se utilizarán para la generación de imágenes.
Si no ves el LoRA que acabas de añadir en los selectores, haz clic en el botón 🔁 Refesh All Files de la parte inferior de la columna para volver a cargar la lista de archivos disponibles
A diferencia del uso de LoRAs en otras interfaces como Automatic1111, no es necesario utilizar ninguna sintaxis particular en su prompt para utilizar un LoRA.
Sin embargo, si la LoRA tiene una o más palabras clave específicas, habrá que añadirlas a la consulta para que la LoRA se active correctamente.
notion image

Fuerza de la LoRA

Para cada uno de los 5 LoRAs seleccionables, puede definir un peso (Weight) que determine su influencia en su imagen.
Los pesos recomendados varían generalmente entre 0,5 y 1 - Pero cada LoRa es diferente y cada uno puede tener un Weight recomendado diferente.
Un peso demasiado bajo hará imperceptible la influencia del LoRA, mientras que un peso demasiado alto eliminará toda la flexibilidad del modelo y afectará negativamente a la calidad general de la imagen.
Puedes consultar el archivo LoRA o los avisos de ejemplo para hacerte una idea del peso que debes utilizar (en un aviso Automatic1111 como los que se comparten en Civitai, el peso se indica después del nombre de la lora, así: <lora:MonLora:0.85>) - Pero probablemente tendrás que hacer algunas pruebas para encontrar la fuerza que te conviene

Ejemplos de uso de LoRA en Fooocus

Ahora vamos a probar 3 LoRAs diferentes juntos y ver cómo se pueden utilizar para generar imágenes con Fooocus :
  • Tim Burton (Art Style) es un LoRA formada sobre un estilo de imagen, en este caso los dibujos del director Tim Burton que tiene un estilo distintivo y reconocible.
  • Rorschach - Watchmen es un LoRA entrenado para generar imágenes de un personaje concreto, Rorschach, un antihéroe de la serie The Watchmen. Al parecer, ha sido entrenado utilizando imágenes de la película de 2009 y no de los cómics.
  • SDXL Enhancer es un LoRA especial diseñado para mejorar las imágenes generadas con SDXL añadiendo detalle y riqueza a las imágenes.
Para cada uno de estos 3 LoRAS, generaremos 6 imágenes del mismo prompt, la primera sin utilizar el LoRA y las otras con el LoRA activado y utilizando un weight diferente, para poder comparar el efecto del LoRA con diferentes fuerzas.
Para estos ejemplos, no se han realizado otros ajustes específicos en Fooocus, por lo que utilizaremos la configuración por defecto (que suele dar buenos resultados).

Tim Burton

Prompt :
A pixie fairy in a Tim Burton-inspired wonderland. Around her, the landscape transforms into a surreal dreamscape, trees with twisted branches, each bearing glowing fruits. The pixies's eyes reflects the glow, holding a mixture of determination and curiosity, Tim Burton Style
(Nótese la inclusión de la palabra clave Tim Burton Style que activará el LoRA)
Sin LoRA
Sin LoRA
Tim_Burton_Painting_Style_SDXL - Weight : 0,1
Tim_Burton_Painting_Style_SDXL - Weight : 0,1
Tim_Burton_Painting_Style_SDXL - Weight : 0,5
Tim_Burton_Painting_Style_SDXL - Weight : 0,5
Tim_Burton_Painting_Style_SDXL - Weight : 0,75
Tim_Burton_Painting_Style_SDXL - Weight : 0,75
Tim_Burton_Painting_Style_SDXL - Weight : 1
Tim_Burton_Painting_Style_SDXL - Weight : 1
Tim_Burton_Painting_Style_SDXL - Weight : 1,25
Tim_Burton_Painting_Style_SDXL - Weight : 1,25

Rorschach - Watchmen

Prompt :
Cinematic photo, Rorschach from the Watchmen, man with a hat, vintage icecream store, hold an icrecream, 35mm photograph, film, bokeh, professional, 4k, highly detailed, Rorschach1024
(Nótese la inclusión de la palabra clave Rorschach1024 que activará el LoRA)
Sin LoRA
Sin LoRA
Rorschach1024 - Weight : 0,1
Rorschach1024 - Weight : 0,1
Rorschach1024 - Weight : 0,5
Rorschach1024 - Weight : 0,5
Rorschach1024 - Weight : 0,75
Rorschach1024 - Weight : 0,75
Rorschach1024 - Weight : 1
Rorschach1024 - Weight : 1
Rorschach1024 - Weight : 1,25
Rorschach1024 - Weight : 1,25

PotenciadorSDXL

Prompt :
Full-bodied portrait, cute and adorable cartoon white rabbit baby wearing a gold jaguar print hoodie and silver sunglasses, fantasy, dreamlike, surrealism, super cute
(Tenga en cuenta que aquí no hay palabra clave de activación: la LoRA se aplica automáticamente)
Como este LoRA añade detalles, también vamos a utilizar la misma Seed para las 4 imágenes, a fin de tener variaciones realzadas de la misma imagen
Sin LoRA
Sin LoRA
xl_more_art - Weight : 0,5
xl_more_art - Weight : 0,5
xl_more_art - Weight : 0,1
xl_more_art - Weight : 0,1
xl_more_art - Weight : 0,75
xl_more_art - Weight : 0,75
xl_more_art - Weight : 1
xl_more_art - Weight : 1
xl_more_art - Weight : 1,25
xl_more_art - Weight : 1,25
Como puedes ver, utilizar LoRAs con Fooocus es tan sencillo como potente. Estos minimodelos te permiten modificar fácilmente las imágenes generadas para utilizar un estilo concreto, integrar personajes o aplicar efectos visuales interesantes.
Cada LoRA es diferente y tendrás que experimentar un poco para apreciar el verdadero potencial de un LoRA para tus proyectos y deseos. El peso (Weight) utilizado también tendrá una gran influencia y puede cambiar completamente el resultado (o incluso arruinar completamente la imagen, como vimos con el LoRA Rorschach).
Espero que este artículo te haya inspirado a probar LoRAs con Fooocus para crear nuevas imágenes.

Pague una vez para acceder de por vida a la generación de imágenes con Stable Diffusion y Diffus

🔥 Lifetime Deal con -60% 🔥

Aproveche la oferta