Leyendas de Euskal Herria
Cada vez que quiero generar algo relacionado con la cultura vasca tengo el mismo problema y es que los modelos base no han sido entrenados con ella, así que he decidido ir creando LoRas poco a poco para poder disfrutar de su riqueza.
Configuración optima:
Strength Model: 2.50
CFG: 1
Sampler Name: Euler - Steps: 8
Sampler Name: Res-3M - Steps: 4
Prompt base: Eguzkilore. Carlina acaulis, a spiny-leaved thistle-like plant.
El Eguzkilore
no es solo una leyenda, sino un símbolo protector.
Es una flor seca del cardo silvestre (*Carlina acaulis*) que se colocaba en puertas de caseríos y casas.
Se creía que su forma solar ahuyentaba malos espíritus, brujas, tormentas y otros males nocturnos. Estos seres no podían contar sus espinas antes del amanecer y huían. Representa protección del hogar y poder benéfico del sol. Fue creada por Amalur para proteger a humanos de la oscuridad/espíritus malignos.
Datos del Entrenamiento:
GPU: RTX 3060 de 12 GB de VRAM
77 imágenes de 768x768px.
Sin descripción de las imágenes.
Configuración de Ostris AI-Toolkit:
Modelo: FLUX.2-base klein-9B
VRAM baja
Descarga de capas: 75
Cuantización: Float 8
Objetivo: LoRa 32
Ahorra: BF16 cada 250 4
Entrenamiento: 1000 Pasos en AdamW8bits
EMA: Incrustación de texto en caché
Configuración del conjunto de datos: Caché latente. Resolución 768
Muestreo: Deshabilitado
Description
Datos del Entrenamiento:
GPU: RTX 3060 de 12GB VRAM
77 imágenes de 768x768px.
Sin descripción de las imágenes.
Configuración de Ostris AI-Toolkit:
Modelo: FLUX.2-base klein-9B
Low VRAM
Layer Offloading: 75
Cuantización: Float 8
Target: LoRa 32
Save: BF16 every 250 4
Training: 1000 Steps en AdamW8bits
EMA: Cache Text Embeding
Dataset Settings: Cache Latent. Resolution 768
Sampling: Disabled
Comments (3)
hola primero comentario o post que encuentro en español, gracias por el lora, de hecho te escribo porque me gustaria saber como hago para crear mis propios loras, tengo una rtx 4060 y un ryzen 5 64 de ram, podrias ayudarme>?
Buenos días.
No soy experto en esto, pero te cuento como lo he hecho yo.
Creo que tu GPU es de 8GB, con lo que no se si vas a poder usar la misma configuración o vas a tener que reducir cosas. Te tocará probar.
La RAM que tengas en el PC no es tan importante, ya que los cálculos de la IA se hacen en la GPU.
Lo primero que tienes que hacer es conseguir un buen conjunto de imágenes de lo que quieras entrenar, yo estoy usando entre 70 y 80 a una resolución de 768x768px, aunque para 8GB usaría de 512x512 y empezaría las primeras pruebas con un dataset de 5-10 imágenes hasta conseguir la configuración optima.
Las apps que uso son:
- Taggi: Para generar automáticamente archivos TXT con las descripciones de las imágenes del dataset. https://github.com/jhc13/taggui.
- Ostris AI-Toolkit: Para entrenar el LoRa. Primero has de cargar el "Dataset" en su pestaña, luego configurar "Training Queue" y una vez listo ejecutar el proyecto y dejarlo corriendo toda la noche. https://github.com/ostris/ai-toolkit
- ComfyUI: Para ejecutar los workflows con los LoRas generados (supongo que valdrá para otras apps). https://www.comfy.org/
En la ficha del LoRa he puesto los parámetros que he usado yo, úsalos como referencia y baja los que te impidan ejecutar el proyecto.
También te aconsejo que antes busques información de las apps en Google, que hay muchos tutoriales y guías.
@Ivan_VisualGrafik muy amable y muchas gracias lo tomare en cuenta vere que se puede hacer por cierto soy de tijuana mexico