Попробуй добавить это в позитив и негатив промпты:

Positive prompt: score_9_up, score_8_up, score_7_up, score_6_up,

Negative prompt: score_5, score_4, pony, chibi, 3d

Что за score ты можешь почитать на странице PonyDiffusion, но если кратко, то это триггеры модели для отсеивания "плохих" результатов.

И ещё рекомендую стили указывать, тогда нейронке проще будет понять что требуется. Но эта модеь как раз больше под подобные арты заточена, реализм у неё плох:) Там в целом побаловаться нужно.
Отличная работа, друг! Получилось освоить SDXl?:)
Чтобы контролнет заработал скачай модели для sdxl: https://huggingface.co/lllyasviel/sd_control_collection/tree/main

Здесь openpose модели: https://huggingface.co/thibaud/controlnet-openpose-sdxl-1.0/tree/main

И в целом советую эту модель, она знает почти всех персонажей: https://civitai.com/models/257749/pony-diffusion-v6-xl

Обязательно используй VAE которую советуют к установке.
На самом деле, сразу чудо увидишь) У меня тоже без этих команд генерилось от 5 минут. Сейчас изображение 768-1112 за секунд 15-20 генерится. Видюха 3060ti.
Понял, спасибо. Именно так, SDXL крайне хороша, и требования соответствующие. Но есть оптимизаторы которые позволяют полноценно пользоваться на видеокарте с 8 гб видеопамяти и 16 гб оперы. Вот даже поделюсь: --xformers --medvram-sdxl
Pony Diffusion - это универсальная sfw/nsfw модель под арты на основе SDXL. С ней качество подобных артов в разы выше чем с sd 1.5, как и проработка деталей и композиций/поз. Т.е ты для генерации данного арта просто использовал аниме модель на основе sd 1.5 без LoRA?
Модель Pony Diffusion?
Тай Ли лучшая тянка, имхо.