Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Это не обучающая статья, но я скажу куда класть гиперсети, и где их включать, просто я последние дни занят тренировкой гиперсетей с довольно крупными датасетами(несколько сотен картинок), и нет, я не сп*здил картинки для них с интернета, не для этих гиперсетей(ранние чекпоинты которых я вам дам).

Я планирую сделать это регулярной(может раз в месяц? Пару недель?) рубрикой, поэтому давайте сделаем тег что ли, #Anzhc_гиперсети и #Anzhc_нейроматериалы

Предисловие
Все генерации будут производиться на неизменённой ACertainModel модели, и без расширений. Используются только пара негативных эмбеддингов, поэтому показанные результаты вы можете повторить практически в точности, если постараетесь.

Навигация

Niji - General Big

Гиперсетка, тренированная на более чем 360 картинках, сгенерированных и отобранных мною из niji midjourney(я кста подписочку за 60 бачей в этом месяце уже взял). Часть стилей генераций так же довольно нестандартны(возможно даже уникальны), но в данные моменты я вдаваться не буду.
Датасет был пропущен через Topaz Gigapixel, дабы убрать шум и некоторый блюр. Апскейл не производился.
Использовались продвинутые параметры тренировки, включая некоторую модификацию AdamW параметров.
Нормализация и дропаут в гиперсети не использовались, дабы не ухудшать результаты при правильных параметрах.

Должна добавлять стилизации и в большинстве случаев позитивно влиять на композицию. Можно использовать в небольших значениях.

Плюсы:
Хорошо влияет на задники при их изначально слабой детализации.
Во многих случаях позитивно меняет композицию генерации.
Может добавить деталей персонажу.
Генерализованная гиперсеть. Имеет и портретные, и широкоформатные, и квадратные картинки в датасете, что в теории позволит улучшить качество генерации различных вариаций соотношения сторон, если это требуется.
Имеет различные вариации как персонажей, так и локаций без них.
Не должна иметь яркой предрасположенности к какому-либо стилю(кроме общего стиля генераций Niji), благодаря крупному датасету.

Минусы:
Возможна сильная стилизация от изначальной генерации.
Датасет имеет небольшой уклон во всякий ретровейв, синт, неон и киберпук, из-за чего генерации с фиолетовым и похожими цветами могут быть более стилизованными. Но сильно это влиять не должно(но может в отдельных случаях).

Нейтральное:
Вы можете не быть любителем маняме, и тогда данная сеть вам не особо нужна.
Если вы любитель более реалистичного стиля генераций, то эта сеть вам не поможет.
Полностью SFW гиперсеть. Датасет не имеет NSFW картинок. Это не повлияет на возможность генерации хентай арта, но и явно не поможет точности генерации такового.

Основные характеристики:
Основная модель: ACertainModel

(По большей части)Совместимые модели: Anything3, ACertainThing, ACertainty, NovelAI, WD1.3 и другие вариации, тюны и миксы, основанные на них.
Создана с модулем 1024, поэтому должна работать с 2.х моделями.
Возможно совместимые: WD1.4 и другие будущие вариации аниме моделей на основе SD2.X
Примерные шаги чекпоинтов(умноженные на градиент):
Ч1 3000
Ч2 6000
Ч3 9000
Ч4 12000
Ч5 15000
Ч6 18000
Ч7 21000
Ч8 24000
Ч9 27000
Текущий финальный ~31500

Возможно продолжение и расширение в будущем.

В конкретные параметры тренировки лезть не буду.

Практическое влияние Niji - General Big на генерацию

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Использовались абсолютно рандомные сиды, при постройке x/y плота, то есть -1.

Делайте свои выводы на основе своих интересов в генерации.
В случае с данными сидами можно видеть сильную стилизацию, но стоит учитывать, что в моём рандомном промпте идёт сразу 2 рандомных стиля с высоким весом, что сильно влияет на это. В последующих генерациях я уберу с них усиленный вес, но сами стили оставлю.

Так же я уберу некоторые промежуточные чекпоинты, да бы не тратить время.

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Стоит так же протестировать разные соотношения сторон.

Начнём с портретного.

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Наверное нужно обязательно сказать, как и раньше, что все совпадения цветов случайны.

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Теперь к широкоформатным тестам.

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Некоторые результаты меня очень приятно удивили, особенно то, как построен второй сид из подборки выше, это же просто офигенная композиция(имхо), которая даже будто имеет под собой идею...
Выбивается чекпоинт 2 на первом сиде, прикольно, волк.

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Стилизация первого сида здесь это просто что-то... Ну, опять же, имхо. Так же удаление людей со второго и стилизация сильно улучшили генерацию. 3 и 4 довольно нейтральны, изначально не очень, с гиперсеткой +- так же, может чуть лучше.

Для интереса сгенерю пару очень широких(2:1), хоть напрямую так делать не стоит.

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Персонажи изначально плохие, ибо их размер мал, поэтому смотрим на комнату и стену :D.

Собственно, чекпоинты Niji - Big General

Да, я даю только первые два.

Я не планирую раздавать последующие чекпоинты когда-либо в ближайшем будущем кроме как на коммерческой основе.

Может бусти для этого открыть? Хз. Но не важно, переходим к следующей сетке, которую я сегодня дам.

Niji-Watercolor - Normal

Основана на небольшом датасете в 50 картинок, тренирована на протяжении 250 эпох(округлённо).

Данная сетка должна делать стиль условной акварелькой, гуашью и их цифровыми вариациями. (Но я мало знаком с натуральной живописью, поэтому относитесь со скептицизмом)
Датасет состоял как и генераций V4, так и Nijijourney, +- пополам.

Плюсы:
Реально стилизует, и делает это на мой вкус, хорошо.

Минусы:
Датасет относительно небольшой и тренировался на протяжении 250 эпох, что может вызвать сильную предрасположенность к картинкам датасета.(Хотя для вам это проблемой не будет, так как вы получите только первый чекпоинт)

Нейтральное:
Вы можете не быть любителем маняме, и тогда данная сеть вам не особо нужна.
Полностью SFW гиперсеть. Датасет не имеет NSFW картинок. Это не повлияет на возможность генерации хентай арта, но и явно не поможет точности генерации такового.

Основные характеристики:

Основная модель: ACertainModel

(По большей части)Совместимые модели: Anything3, ACertainThing, ACertainty, NovelAI, WD1.3 и другие вариации, тюны и миксы, основанные на них.

Создана с модулем 1024, поэтому должна работать с 2.х моделями.
Возможно совместимые: WD1.4 и другие будущие вариации аниме моделей на основе SD2.X
Возможно сработает как просто наложение стиля для не-аниме моделей, но я не проверял.

Примерные шаги чекпоинтов(умноженные на градиент):

Ч1 2000

Ч2 4000

Ч3 6000

Ч4 8000

Ч5 10000

Текущий финальный 12000

Возможно продолжение и расширение в будущем.

Практическое влияние Niji-Watercolor - Normal на генерацию

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Сразу - очевидно, со своей задачей она вполне справляется. Промпт так же полностью рандомный, теги по типу watercolor НЕ указывались.

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня
Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Снова уберу промежуточные ради скорости и сохранения места. Время для тестов не-квадратного разрешения. Портретные:

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня
Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Теперь ландшафтные:

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

На последней генерации первого сида сломалась VAE, как можете видеть, поэтому там результата не будет, но это нормально, смотри на остальные :D

Внезапный доге!<br />
Внезапный доге!

Снова сломалась VAE, поэтому сделаю ещё одну генерацию.

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Собственно, чекпоинты Niji-Watercolor - Normal

Как уже сказал, благотворительностью заниматься не буду, только первые чекпоинты, дабы вы смогли ознакомиться с работой гиперсеток.

Мои другие проприетарные сетки ;)

Данные сетки только для визуального ознакомления, их раздач вообще не будет, чекпоинты к ним утеряны в связи с экономией памяти. Так же они экспериментальны, а повторение невозможно, так как код для тренировок был множество раз переделан с поры их создания.

Их названия я бы так же оставил неизвестными, да и значения это не имеет.

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Первая строка - без сети для референса. Каждая следующая - абсолютно другая гиперсеть. Они очень старые и не продвинутые, как те две, которые вы видели выше, но я часть их использую, особенно пред-предпоследнюю, для лёгкого фикса изображения, очень лёгкая сеть.

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня
Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Как поставить и использовать гиперсети

Я буду думать, что вы используете AUTOMATIC1111, по другим не знаю.\

Просто кидаем файл в X:\...\stable-diffusion-webui\models\hypernetworks

Он автоматически подберётся, далее просто выставляем его в настройках, или верхнем быстром меню, если вы уже следовали моему совету, как его настроить.

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня

Выбираем нужную, генерируем. Всё.

Конец

На этом пост окончен. Если вы пролистали, что бы найти ссылки в конце - листайте вверх, лул, они в конце отдельных гиперсетей.Если кому есть дело - что думаете? Делать какой-либо способ коммерческого распространения полных гиперсетей, да и других материалов? Просто так я их один хер не дам, таки труд вложен, и не совсем малый. Ранние чекпоинты мне не жалко, играйтесь. Может условный бусти? Я бы смог распространять различные эмбеддинги, гиперсети, ЛОРА и т.д. Да и эксклюзивные материалы по находкам тоже туда бы отправились.

(Да, зажрался, что поделать. На что-то оплачивать счета за электричество после тренировок надо. xD)

Если где ошибки есть, то извините, у меня трясутся руки, холодно. Уже третий день под -33, а у меня продувает комнату...

Картинка для ленты.

Различные гиперсетки, сравнение их чекпоинтов + пробные гиперсети от меня
3K3K показов
807807 открытий
11 репост
Контент для взрослых
27 комментариев

Спасибо за гиперсетки. Интересно теперь попробовать. Отдельно спасибо за инструкцию из коробки, а то иногда тяжело разобраться. Если решишь продвигать через бусти или ещё как-то, то я бы взял.
Однозначно лайк.

Ответить
Автор

Да вот думаю, да. Не планирую делать что-то дорогое, рублей 150-200 за подписку может, что бы как-то покрыть время, затраченное на тренировку.

Каждый шаг при моих настройках занимает в среднем +-0.75 секунд, даже та маленькая гиперсетка, на стиль с акварелью, занял примерно 2.5 часа, а большая так 6 с лишним, и есть ещё потенциал на продолжение, не считая сбора датасета конечно, а это тоже деньги ведь, ибо в данном случае я не использовал картинки из сети, только личные, отобранные генерации с MJ.
И это всё конечно не учитывает затраченное время на тесты и изучение материала xD

Если всё-таки как-то покрывать расходы, то можно и по запросу людей тренировать, а пока только по моим интересам.

Всегда пожалуйста. И спасибо за фидбэк.

Ответить

Не читал
Лайк поставил
Жду ещё, только размером бы поменьше. Лонги для людей, у которых много свободного времени:(

Ответить

Астанависб блятб

Ответить

Найс. Но имхо Ани может давать такое и без гиперсеток

Ответить
Автор

Вот генерация на Ани. АСМ и Ани довольно похожи, просто АСМ более редактируемая и точнее реагирует на промпт, поэтому пересел на неё. Данные гиперсетки на обоих работают, специально добавил watercolor в промпт и убрал другие стили, что бы сравнить, как она делает его без и с гиперсетью.

Ответить

Я не планирую раздавать последующие чекпоинты когда-либо в ближайшем будущем кроме как на коммерческой основе.Может бусти для этого открыть? Хз. Но не важно, переходим к следующей сетке, которую я сегодня дам.

Ты обучил модель на 360 снимках и хочешь это продавать? А чего не продавать модель обученную на 10 снимках?

Стилизация первого сида здесь это просто что-то... Ну, опять же, имхо.

Добавился румянец и желтый фильтр? Ради этого всё затевается?

По итогу статьи я особой разницы не увидел, поэтому смысла всего этого не понимаю. Пара сотен снимков - это можно собрать за один день. Рано продавать такой продукт.

Ответить