Diffusers How to use MarkBW/object-insertion-xl with Diffusers:
pip install -U diffusers transformers accelerate
import torch
from diffusers import DiffusionPipeline
# switch to "mps" for apple devices
pipe = DiffusionPipeline.from_pretrained("stabilityai/stable-diffusion-xl-base-1.0", dtype=torch.bfloat16, device_map="cuda")
pipe.load_lora_weights("MarkBW/object-insertion-xl")
prompt = "UNICODE\u0000\u0000i\u0000n\u0000s\u0000e\u0000r\u0000t\u0000i\u0000o\u0000n\u0000 \u0000p\u0000u\u0000s\u0000s\u0000y\u0000 \u0000a\u0000p\u0000p\u0000l\u0000e\u0000s\u0000 \u0000i\u0000n\u0000s\u0000e\u0000r\u0000t\u0000i\u0000n\u0000g\u0000 \u0000a\u0000 \u0000a\u0000p\u0000p\u0000l\u0000e\u0000s\u0000 \u0000i\u0000n\u0000 \u0000h\u0000e\u0000r\u0000 \u0000p\u0000u\u0000s\u0000s\u0000y\u0000,\u0000 \u0000o\u0000b\u0000j\u0000e\u0000c\u0000t\u0000 \u0000i\u0000n\u0000s\u0000e\u0000r\u0000t\u0000i\u0000o\u0000n\u0000,\u0000 \u0000s\u0000c\u0000o\u0000r\u0000e\u0000_\u00009\u0000,\u0000 \u0000s\u0000c\u0000o\u0000r\u0000e\u0000_\u00008\u0000_\u0000u\u0000p\u0000,\u0000 \u0000s\u0000c\u0000o\u0000r\u0000e\u0000_\u00007\u0000_\u0000u\u0000p\u0000,\u0000 \u0000s\u0000c\u0000o\u0000r\u0000e\u0000_\u00006\u0000_\u0000u\u0000p\u0000,\u0000 \u0000r\u0000a\u0000t\u0000i\u0000n\u0000g\u0000_\u0000e\u0000x\u0000p\u0000l\u0000i\u0000c\u0000i\u0000t\u0000,\u0000 \u0000<\u0000l\u0000o\u0000r\u0000a\u0000:\u0000I\u0000n\u0000s\u0000e\u0000r\u0000t\u0000i\u0000o\u0000n\u0000P\u0000o\u0000n\u0000y\u0000:\u00001\u0000>\u0000,\u0000 \u0000 \u0000r\u0000e\u0000a\u0000l\u0000i\u0000s\u0000t\u0000i\u0000c\u0000 \u0000p\u0000h\u0000o\u0000t\u0000o\u0000,\u0000 \u0000d\u0000e\u0000t\u0000a\u0000i\u0000l\u0000e\u0000d\u0000 \u0000s\u0000k\u0000i\u0000n\u0000,\u0000 \u00001\u0000g\u0000i\u0000r\u0000l\u0000,\u0000 \u0000c\u0000u\u0000t\u0000e\u0000,\u0000 \u0000p\u0000o\u0000s\u0000i\u0000n\u0000g\u0000,\u0000 \u0000c\u0000h\u0000o\u0000p\u0000p\u0000y\u0000 \u0000b\u0000o\u0000b\u0000 \u0000h\u0000a\u0000i\u0000r\u0000,\u0000 \u0000i\u0000n\u0000 \u0000a\u0000 \u0000l\u0000o\u0000c\u0000a\u0000t\u0000i\u0000o\u0000n\u0000:\u0000 \u0000s\u0000h\u0000i\u0000f\u0000t\u0000i\u0000n\u0000g\u0000 \u0000m\u0000a\u0000z\u0000e\u0000,\u0000 \u0000(\u0000M\u0000a\u0000s\u0000t\u0000e\u0000r\u0000p\u0000i\u0000e\u0000c\u0000e\u0000:\u00001\u0000.\u00003\u0000)\u0000 \u0000(\u0000b\u0000e\u0000s\u0000t\u0000 \u0000q\u0000u\u0000a\u0000l\u0000i\u0000t\u0000y\u0000:\u00001\u0000.\u00002\u0000)\u0000 \u0000(\u0000h\u0000i\u0000g\u0000h\u0000 \u0000q\u0000u\u0000a\u0000l\u0000i\u0000t\u0000y\u0000:\u00001\u0000.\u00001\u0000)\u0000"
image = pipe(prompt).images[0] 
