Леди Вамп. Качество нейронных фильтров растет

Совсем недавно писал про новый способ качественного апскейла с помощью controlnet, но у меня совсем вылетело из головы то что теперь его можно использовать совместно с temporalkit. Спасибо реддитору который все же догадался до этого. Люблю SD сообщество. Кто не знает, темпоралкит нужен для техники когда вы берете несколько ключевых кадров из видео и обрабатываете их как один создав сетку.

Леди Вамп. Качество нейронных фильтров растет

Благодаря этому у вас крайне высокая согласованность между кадрами. Затем это добавляется в специальный софт Ebsynch который накладывает изображение попиксельно. Что на самом деле костыль который мы имеем из-за того что просто не может обработать одновременно все кадры из-за того что не хватит видеопамяти. Но думаю скоро такой способ появится и консистентность увеличится в разы.

Использованные инструменты: ControlNet 1.1 Face Only, Line Art и Tiling для апскейла. TemporalKit для удобного создания сетки кадров. Ebsynth для накладывания ключевых кадров.

Канал (источник) где выкладываю картинки и видео и при наличии инструкции рассказываю как это сделано.

Мой канал с гайдами по нейросетям. Где бесплатно обучаю с нуля и до самостоятельного обучения моделей.

2222
9 комментариев

А рот закрывать всё ещё не умеют 🙃

1

Обычно добавить зубы в негатив помогает

А че Оксимирон не в адидасе?

Судя по тому, что он в больничном халате, - проходит химиотерапию

1

Комментарий недоступен

Фильтры это конечно хорошо, но ждём плотно следующие наработки от RunWay.
Кстати, с ними кто-нибудь плотно соревнуется в text to video?
Именно безреференсное создание видео контента интересует.