"reference" controlnet в качестве "фиксатора пространства воображения" модели

Я уже показывал мощнейшие возможности этого "контролнета" по "удержанию" исходного изображения на примере апскейла, теперь покажу еще кое-что интересное... (напомню, что он в отличие от других старых моделей, он отлично работает с SDXL ).

Тут я работал только со стандартным препроцессором (с остальными двумя получается еще любопытнее, но с ними я пока не разбирался - нужно почитать теорию).

Итак переходим к демонстрации возможностей:

Самое интересное заключается в том, что исходное изображение сгенерировано в Миджорни (т.е. оно не зависит от промта генерации и в качестве него может выступать любая фотография)

Здесь reference отключен (на первом изображении изменения еще терпимы, но на втором при увеличении денойза, картинка начинает кардинально меняться).

Теперь включаем "reference" и постепенно увеличиваем денойз

P.S. Тут я уже добавил немного Canny в качестве доп. модели, для более жесткого удеражания исходной геоеметрии пространства