[Гайд] Как бесплатно стать аниме-вайфу за 2 минуты (Собираем ИИ-VTuber'а в браузере)

Быть витубером нынче дорого: заказ арта, Live2D риггинг, покупка камеры с трекером лица — всё это выливается в сотни долларов. А платные нейро-приложения требуют мощную "пекарню" и подписки по 20 баксов.

Мы с товарищем-инженером решили, что корпорации обойдутся без наших денег. Мы собрали свой собственный генератор из открытых нейросетей, прикрутили к нему изменитель голоса и засунули всё это в Google Colab, чтобы оно работало абсолютно бесплатно прямо в браузере.

Чтобы протестировать систему, мы взяли из интернета видео сурового мужика, который на серьезных щах рассуждает про мировую политику и стабильность. Загрузили его в нашу нейронку вместе с картинкой аниме-девочки.

Результат убил. Смотреть со звуком

Аниме-тян идеально открывает рот в такт словам, моргает и делает это писклявым, синтетическим голосом. Идеальный генератор шитпоста готов!

⚙ Как работает наша коробка с магией:

  1. Зрение (LivePortrait): Нейронка берет "скелет" лица с вашего видео (губы, брови, повороты головы) и намертво натягивает его на любую статичную 2D-картинку (аниме, мемы, коты).
  2. Голос: Наш самописный скрипт выдирает ваш басистый голос с видео и на лету делает из него голос "Аниме Вайфу" (или Кибер-Демона).
  3. Безопасность: Чтобы бесплатные сервера Гугла не сгорели, длинные видео автоматически обрезаются до 12 секунд. Идеально для мемов.
  4. 📖 ИНСТРУКЦИЯ ДЛЯ ЧАЙНИКОВ: Как запустить (0 рублей, без VPN)
  5. Вам не нужен мощный комп. Мы будем легально использовать сервера Google. Главное — строго следовать инструкции и включить видеокарту, иначе видео будет генерироваться до второго пришествия.

    🔗 ССЫЛКА НА НАШ ГЕНЕРАТОР (Google Colab)

    Шаг 1. Отбираем у Гугла видеокарту (ОЧЕНЬ ВАЖНО!)

    Переходите по ссылке выше (нужно быть залогиненым в Google).

    В самом верхнем меню нажимаете: Среда выполнения -> Сменить среду выполнения.

    В открывшемся окне выбираете T4 GPU и нажимаете Сохранить. (Если этого не сделать — ничего не сработает!).

    Шаг 2. Запуск двигателя

    Снова жмете в меню: Среда выполнения -> Выполнить всё.

    Google спросит: "Этот блокнот создали не мы, вы уверены?" — смело жмите Выполнить.

    Шаг 3. Магия

    Прокручиваете страницу в самый низ и ждете около 2 минут (нейронке нужно скачать 5 ГБ "мозгов" при первом запуске).

    Как только загрузка закончится, внизу появится синяя ссылка формата https://какие-то-буквы.gradio.live.

    Кликаете по ней!

    Откроется стильный черный интерфейс.Слева загружаете любую картинку (хоть Шрека, хоть Райана Гослинга). Справа загружаете видео со своим лицом (лицо должно быть хорошо видно!). Выбираете фильтр голоса и жмете кнопку "ОЖИВИТЬ".

    Закидывайте в комментарии свои самые упоротые генерации! Посмотрим, у кого получится самый смешной кроссовер. 👇


3
2
2
1
1