Нейросеть Flux AI: как использовать LoRA

Тема нашей статьи — "Нейросеть Flux AI: как использовать LoRA". LoRA (Low-Rank Adaptation) представляет собой дополнительные библиотеки данных, которые можно внедрять в нейросети, такие как FLUX, Stable Diffusion XL и Stable Diffusion 1.5. Эти библиотеки увеличивают объем знаний и позволяют улучшать качество генераций, а также создавать объекты, добавлять дизайн и стили, которые ранее не могли быть сгенерированы из-за недостатка знаний нейросети по конкретному аспекту. Цель нашей статьи — предложить вам исчерпывающее руководство по использованию LoRA на примере сервиса Yes AI.

В @yes_ai_bot вы можете ознакомиться с каталогом LoRA. Для этого просто кликните на иконку «🎨 Галерея LoRA», чтобы увидеть все доступные модели, установленные в сервисе Yes AI.

Перейдя к описанию конкретной LoRA, вы сможете перейти по ссылке на civitai.com и ознакомиться с подробной информацией о данной модели.

Вы можете пополнить галерею, используя ваши любимые LoRA. Для этого достаточно отправить адрес нужной модели LoRA с веб-сайта civitai.com в наш бот. Давайте рассмотрим подробнее, как это сделать.

Для поиска LoRA зайдите на сайт https://civitai.com. Настройте необходимые фильтры для поиска интересующих вас LoRA. Выберите период времени — эта опция позволяет отфильтровать LoRA по дате их добавления на сайт. Вы можете выбрать LoRA для Flux, а также LoRA для версий SDXL или SD 1.5.

Найдите LoRA, которая вам нужна или понравилась. Перейдите во вкладку с LoRA и убедитесь, что выбранная вами LoRA совместима с Flux 1.D или с версиями SDXL 1.0 и SD 1.5 соответственно.

После этого скопируйте URL (ссылку) из адресной строки вашего браузера и отправьте её боту, предварительно выбрав в боте нейросеть, в которую хотите добавить LoRA.

Спустя 5-10 минут после отправки сообщения боту LoRA будет интегрирована в сервис Yes AI. Бот уведомит вас, как только LoRA будет готова к использованию, отправив текстовое сообщение.

Для того чтобы создать изображение с использованием LoRA в нейросети Flux, вам нужно добавить к промту ключ LoRA и триггерные слова. Промт для использования с LoRA не должен быть сложным и содержать противоречивые характеристики. Как мы уже говорили ранее, LoRA — это дополнительные библиотеки, которые, условно говоря, представляют собой промт, добавляемый к вашему основному промту. Чтобы минимизировать риск конфликта между ними, старайтесь избегать сложных промтов. На платформе Civitai авторы LoRA предлагают готовые промты, и мы рекомендуем сначала потренироваться на них.

Для примера мы взяли промт автора LoRA и сгенерировали изображение без применения LoRA.

Теперь добавим в промт ключ LoRA и следом за ним триггерные слова. Триггерные слова являются активаторами LoRA. Если автор предусмотрел триггерные слова, а вы не укажете их в тексте промта, то LoRA не сработает так, как задумал автор. Далее мы поговорим о триггерных словах более подробно. Ставить ключ LoRA и триггерные слова в начало или конец промта - значения не имеет.

Такое изображение мы получили с применением LoRA.

Как мы уже говорили ранее, некоторые модели LoRA реагируют на специфические ключевые слова. Авторы LoRA всегда указывают эти ключевые слова в описании к LoRA, если при создании модели они предусмотрели их использование.

Использование вами триггерных слов и фраз в промтах приводит к результатам, сопоставимым с теми, которые были получены автором LoRA.

Отсутствие триггерных слов в промте может привести к значительным изменениям в результате: некоторые детали могут быть утрачены, текстура материала и освещение могут измениться, а стиль, предусмотренный автором, может не проявиться в генерации. Поэтому крайне важно использовать ключевые слова (триггерные слова) в сочетании с LoRA.

Вес LoRA, <lora:245889:1> — число, стоящее после двоеточия, обычно варьируется. Всё зависит от рекомендуемых настроек автора LoRA и указывает на степень воздействия, которую LoRA оказывает на итоговое изображение. В Yes AI обычно используется значение равное 1.

Как правило, большинство LoRA работает с этим весовым коэффициентом. Для достижения качественного результата советуем не полениться и перейти из галереи Yes AI на описание автора, чтобы ознакомиться с рекомендуемыми весовыми коэффициентами. В некоторых случаях весовой коэффициент LoRA может значительно изменяться, достигая даже отрицательных значений, например, в диапазоне от -7 до 7.

Важно понимать, что в различных LoRA могут применяться разные весовые коэффициенты, которые нужно будет отредактировать вручную на основе примеров работ создателя LoRA.

Существует множество LoRA, и их количество продолжает увеличиваться. Для удобства пользователей на нашем сайте была создана галерея LoRA, где вы можете ознакомиться с информацией и выбрать LoRA для своих творческих проектов.

Желаем вам удачных генераций!