Даем новую жизнь SD 1.5 с помощью google T5 и современных LLM

На самом деле ноды с моделью ELLA вышли уже давно, но когда я их пробовал на старте, особого восторга они у меня не вызвали и я про них благополучно забыл. Однако время идет... и сейчас я уже понимаю что такое T5 енкодер и как добиться от него хороших результатов... Так что попробовал еще раз и результаты меня мягко говоря удивили.

Для эксперимента берем LLM Joy Capture и просим создать промт по нашей картинке... Затем вбиваем этот длинный неоптимизированный промт в воркфлоу SD 1.5 с Эллой... и о чудо. Получаем практически идентичное изображение...

Даем новую жизнь SD 1.5 с помощью google T5 и современных LLM
Даем новую жизнь SD 1.5 с помощью google T5 и современных LLM

Воркфлоу стандартное, взято из официального репозитория модели (макаронный монстр справа это просто апскейлер, который я к нему добавил).

P.S. для SDXL чуда не будет т.к. авторы решили не выпускать свою разработку под эту модель в открытый доступ... увы

1
Начать дискуссию