LoRA de Studio Ghibli para Stable Diffusion 1.5: guía de prompts y configuración

Resumen

• Instala el LoRA en ComfyUI, AUTOMATIC1111 o tu pipeline de diffusers usando el nombre de peso studioGhibliRedmond-15V.
• Añade siempre ambos desencadenantes: el token StdGBRedmAF y las palabras Studio Ghibli.
• Configuración inicial recomendada: CFG 7, 20–30 pasos, peso LoRA 0.6–1.0, en runwayml/stable-diffusion-v1-5 o LiberteRedmond SD 1.5.

Qué hace el modelo

StudioGhibli.Redmond 1.5V es un adaptador LoRA entrenado para impartir la estética dibujada a mano, cálida y emocionalmente expresiva de las películas de Studio Ghibli a las generaciones de Stable Diffusion. Está dirigido al modelo base runwayml/stable-diffusion-v1-5 y está diseñado explícitamente para emparejarse con el checkpoint LiberteRedmond SD 1.5. Al aplicarse, tiende a suavizar los bordes, favorecer una iluminación cálida de luz diurna, desaturar ligeramente los colores hacia una paleta pastel y producir expresiones faciales suaves con tonos de piel más suaves — rasgos característicos del arte de personajes de Ghibli.

Modelo base y licencia

Modelo base: runwayml/stable-diffusion-v1-5. Archivo de pesos: StudioGhibliRedmond-15V-LiberteRedmond-StdGBRedmAF-StudioGhibli.safetensors (formato Safetensors). El modelo se distribuye bajo una licencia personalizada designada como bespoke-lora-trained-license (etiquetada como other). Revisa el enlace de la licencia en la tarjeta del modelo de Hugging Face antes de usarlo en productos comerciales.

Palabras desencadenantes y formato de prompt

Dos palabras desencadenantes activan el estilo: el token StdGBRedmAF y la frase Studio Ghibli. El prompt de ejemplo del autor es Studio Ghibli. La posición recomendada es al final de la descripción del sujeto:

A cute cat on top a table with food, StdGBRedmAF, Studio Ghibli
A fluffy pink monster, StdGBRedmAF, Studio Ghibli
Portrait of a happy child, StdGBRedmAF, Studio Ghibli
A black boy, StdGBRedmAF, Studio Ghibli

Cómo usarlo

Diffusers (Python)

from diffusers import AutoPipelineForText2Image
import torch

pipeline = AutoPipelineForText2Image.from_pretrained(
    'runwayml/stable-diffusion-v1-5',
    torch_dtype=torch.float16,
).to('cuda')

pipeline.load_lora_weights(
    'artificialguybr/studioghibli-redmond-1-5v-studio-ghibli-lora-for-liberteredmond-sd-1-5',
    weight_name='StudioGhibliRedmond-15V-LiberteRedmond-StdGBRedmAF-StudioGhibli.safetensors',
)

image = pipeline(
    'A black boy, StdGBRedmAF, Studio Ghibli,'
).images[0]

ComfyUI

Carga un nodo LoraLoader, configura el modelo como runwayml/stable-diffusion-v1-5 (o LiberteRedmond SD 1.5) y proporciona el archivo LoRA. En un paso CLIPTextEncode o en el prompt de condicionamiento, incluye StdGBRedmAF, Studio Ghibli.

AUTOMATIC1111 (WebUI)

Coloca el archivo .safetensors en models/Lora/, selecciónalo desde el menú desplegable de LoRA y añade StdGBRedmAF, Studio Ghibli a tu prompt. Comienza con una intensidad de 0.8.

Configuración recomendada

Parámetro | Valor

|---|:---:

Modelo base | runwayml/stable-diffusion-v1-5 / LiberteRedmond SD 1.5 Pasos | 20–30 Escala CFG | 6–8 (7 por defecto) Peso LoRA | 0.6–1.0 Muestreador | Euler a o DPM++ 2M Karras Desencadenantes | StdGBRedmAF, Studio Ghibli Pesos LoRA más altos (superiores a 1.0) pueden aplicar en exceso el estilo y aplanar el detalle fino. Si la salida parece demasiado suave o borrosa, reduce el peso a 0.6 o añade descriptores de detalle como soft lighting, pastel colors, film grain.

Errores comunes y soluciones

Error | Causa | Solución | Origen

|---|---|---|---

Estilo no aplicado | Falta el token StdGBRedmAF | Añade tanto StdGBRedmAF como Studio Ghibli al prompt | Tarjeta del modelo Imagen demasiado aplanada | Peso LoRA demasiado alto | Reduce a 0.6–0.8 | Recomendaciones del autor Estética incorrecta, salida ruidosa | Usando una base no SD 1.5 | Usa runwayml/stable-diffusion-v1-5 o LiberteRedmond SD 1.5 | Tarjeta del modelo Archivo no detectado | Nombre de peso incorrecto | Usa el archivo exacto StudioGhibliRedmond-15V-LiberteRedmond-StdGBRedmAF-StudioGhibli.safetensors | Fragmento de diffusers

FAQ

¿Necesito fusionar con LiberteRedmond SD 1.5? No, pero el autor diseñó este LoRA para complementar LiberteRedmond SD 1.5. Sigue funcionando en SD 1.5 vanilla.

¿Qué resolución debería usar? Se recomienda el valor predeterminado de la base SD 1.5 (512×512). Para retratos, 512×768 funciona y evita el bien conocido problema de las manos de SD.

¿Es seguro para uso comercial? La licencia es personalizada (other). Confirma el enlace de la licencia en la tarjeta del modelo antes del despliegue comercial.

Fuentes

• Página del modelo de Hugging Face — tarjeta, palabras desencadenantes y fragmento de diffusers.
• Portafolio de ArtificialGuyBR — modelos y recursos del autor.