LUMA AI - нейросеть для оживления картинок и фото
LUMA AI - нейросеть для оживления картинок и фото. В этой статье мы поговорим о процессе анимации статичных изображений и фотографий на примере сервиса Yes Ai в Telegram, с использованием возможностей нейросети LUMA AI, без регистрации и VPN.
Важно отметить, что нейросеть LUMA AI может создавать анимацию по промту без исходного изображения. Этот метод мы не будем рассматривать, так как нейросеть LUMA AI ориентирована в первую очередь на анимацию уже существующих изображений.
Целесообразно для генерации изображений высокого качества использовать другие нейросети, которые справляются с этой задачей гораздо лучше, чем LUMA AI. Например, Stable Diffusion, MidJourney и DALLE. После того как вы создали изображение в одной из упомянутых нейросетей, которое вас устроило, вы можете его анимировать. С примерами генераций этих нейросетей вы можете ознакомиться на нашем форуме в разделе 👉 «Галерея».
В нейросети Luma AI запрещено создавать анимации:
- содержащие материалы (18+)
- содержащие сцены насилия
- которые могут быть сочтены оскорбительными по политическим и религиозным темам.
Как оживить картинку или фото в нейросети LUMA AI на основе текстового запроса (промта)
Следуйте инструкции:
- в Telegram зайдите в сервис @yes_ai_bot
- в нижнем меню нажмите на кнопку «нейросети: [изменить]»
- выберите «Yes Video (для работы с видео)»
- затем выберите «Ani-Image»
- загрузите в бот картинку, убедившись, что ее размеры не превышают 2000 пикселей (по высоте и ширине)
- далее в меню выберите «🐠 Luma».
- чтобы добавить текстовый запрос (промпт), выберите кнопку «Prompt», а затем функцию «♻ Изменить»
- после того, как отправите готовый промт, воспользуйтесь функцией «⬅ Вернуться назад»
- запустите создание видео, выбрав «🎞 Анимировать изображение»
- Дождитесь результата; обычно на генерацию 6-секундного видео уходит несколько минут.
Напишите в промте краткое описание предполагаемых действий в кадре. Здесь важно упомянуть, что LUMA AI может частично проигнорировать ваш промт. Чтобы действия были по вашему сценарию, возможно, придется сделать несколько попыток с анимацией по промту.
Как создать промт для оживления картинки или фото в нейросети Luma AI
При создании анимации на основе исходного изображения и промта нейросеть Luma AI попытается дополнить описанные вами действия в видео. Анимация статичной картинки по промту требует тщательной проработки различных деталей, таких как выделение главного объекта на видео, его действия и взаимодействие между объектами, если их несколько.
Для достижения хороших результатов обычно требуется несколько попыток, поэтому крайне важно оттачивать свои способности в создании промтов и умело выбирать исходные изображения. Решение об исходном изображении имеет решающее значение. Выбирайте четкие изображения или фотографии, на которых ясно различимы люди и другие обьекты. В противном случае, если изображения нечеткие или искаженные, анимация может получиться с ошибками. Опишите действия главного объекта в кадре: его поведение, траекторию движения, хореографию и т. д.
Далее уточните маршрут камеры: должна ли она фокусироваться (zoom in), отодвигаться (zoom out) или сдвигаться по горизонтали или вертикали.
Уточните фон, игру света и дополнительные тонкости для вашего видео.
В сервисе Yes Ai вы можете составлять текстовые описания (промты) на вашем родном языке.
Как оживить картинку или фото в нейросети LUMA AI с помощью функции «финальный кадр»
Пользоваться на практике этим методом довольно просто, однако качество созданного видео во многом зависит от исходного и финального изображения. В данном случае нейросеть будет пытаться сделать переход от начального изображения к финальному.
Важно отметить, что при использовании данной функции объекты на изображениях должны быть похожи для плавного перехода от одного кадра к другому.
Чтобы оживить картинку с помощью нейросети Luma AI, используя начальное и финальное изображение, следуйте инструкции:
- откройте сервис @yes_ai_bot и выберите в нижнем меню опцию «Yes Video»
- после этого выберите «Ani-Image»
- отправьте боту исходное изображение, которое станет начальным кадром в вашем видео
- в меню выберите вариант «Финальный кадр», а затем нажмите «📥 Загрузить», как показано на скриншоте
- отправьте боту второе изображение (финальный кадр для вашего видео)
- после загрузки второго изображения вы можете добавить промт с описанием действий или использовать функцию финального кадра без описания действий. В этом случае нейросеть сама анимирует переход от одного кадра к другому
- нажмите «↖ Вернуться назад», чтобы начать создание видео.
Важно! Убедитесь, что начальный и финальный кадры отличаются друг от друга, чтобы предотвратить появление статических кадров в анимации.
Подумайте о создании видео в различных стилях. Вы можете делиться своими видео в специальном разделе Luma в нашем 👉 сообществе.
Как продлить видео, созданное ранее в нейросети LUMA AI
Следуйте указаниям в данной инструкции:
- дождитесь создания видео в нейросети LUMA AI
- в нижнем меню, под созданным видео, выберите «⏩ Продлить видео»
- затем выберите «⏩ Продолжить видео»
- вы должны добавить промпт для описания действия в предстоящем 5-секундном сегменте вашего видео
- дождитесь окончания создания расширенной анимации.
Вы можете повторять цикл продления видео несколько раз, чтобы поэтапно увеличивать свой видеопроект на 5 секунд. Каждый сегмент анимации можно оживить с помощью различных промптов. Если продленный сегмент видео вас не устроил, вернитесь в чате бота к более раннему сегменту видео.
Управление движением камеры в видео, созданном с помощью нейросети Luma AI v.1.6
Последняя версия нейросети Luma v.1.6 предлагает пользователям возможность управления углом обзора камеры во время видео. Чтобы использовать эту функцию, включите в промт фразу, определяющую желаемое движение камеры.
Вот список токенов (фраз для промта), доступных для настройки угла обзора камеры в нейросети Luma AI:
- camera move left (движение камеры влево)
- camera move right (движение камеры вправо)
- camera move up (движение камеры вверх)
- camera move down (движение камеры вниз)
- camera push in (приближение камеры)
- camera pull out (отдаление камеры)
- camera pan left (поворот камеры вокруг влево)
- camera pan right (поворот камеры вокруг вправо)
- camera orbit left (камера вращается вокруг объекта слева)
- camera orbit right (камера вращается вокруг объекта справа)
- camera crane up (камера вращается вокруг объекта вверх)
- camera crane down (камера вращается вокруг объекта вниз)
Создавая видео в 👉 LUMA, убедитесь, что вы включили токены угла обзора камеры в свой промт.
Достижения нейросети Luma AI очевидны по сравнению с ее предшественником Stable Video Diffusion. Прогресс проявляется в расширенном наборе возможностей, интеграции промтов и возможности указывать как начальный, так и финальный кадры.
Нейросеть Luma достигла успехов, но всё же остаётся ряд проблем:
- LUMA AI может игнорировать промты, когда сталкивается с двусмысленностью интерпретации визуального контента
- черты лица человека могут искажаться на протяжении всего сегмента видео
- движения объекта в кадре могут не передавать убедительного ощущения реальных движений.
Несмотря на существующие недостатки, следует признать, что прогресс нейросетей происходит очень быстро. Это позволяет сделать вывод о том, что функционал LUMA AI будет значительно расширен в обозримом будущем и доработан.