Настоящее предназначение OpenAI SORA: как и зачем симулировать «Матрицу» для ChatGPT
Ну что, уже успели прочитать восхищения небывалым качеством видео от нейросетки SORA у всех блогеров и новостных изданий? А теперь мы вам расскажем то, о чем не написал никто: чего на самом деле пытается добиться OpenAI с помощью этой модели, как связана генерация видео с самоездящими машинами и AGI, а также при чем здесь культовая «Матрица».
Разговаривал как-то с другом про новомодные нейронки (а он 2д-аниматор работающий с разными кино и рекламными студиями: эффекты, цветокор, убрать изъяны - это всё он), считает что все эти нейронки в самом лучшем случае годятся для тиктока. Сделать видосик на несколько секунд, чтобы был вау-эффект их предел. А если дело доходит до более-менее продакшн-уровня, так нефига подобного. Ибо даже в дешманских русских сериальчиках тербуется без артефактов в КАЖДОМ кадре качественно ретушировать, а нейронка так не умеет. Верёвку у каскадёра нейронка удаляет накасячив с соседними пикселями - а это недопустимый брак. Причем и после его ретуши тоже какие-то косячки остаются, но он, в любом случае, может тщательнее заморочиться, применяя уже точечные решения. А неронка на лопате вывалит лепёху и всё - жри, не жалуйся. Изменить 0,5 процентика того или сего в ней не получится - начинай играться с изанчальным запросом, потом дроби его на подзадачи, шинкуй ролик на сегменты (а после доп. задача как их склеить, если с каждым нейронка чуть иначе работала). А вишенкой на торте окажется тот факт, что исходник выдан в профессиональном прорез-формате 8к с определенным цветокором, разрешением, частотой, цветовым профилем - и именно в таком виде надо и отдать результат. И это уже жесть - нейрухи в HD-то не все умеют работать, а про прочие нюансы они вообще не слышали.
Но для нетребовательных (!) видов своих личных работ вполне могут сгодится. Так он для своих мультов стал экономить время. Набросал неряшливыми мазками: пещеру, озеро, дом, горы, лес и нейронка нагенерила разных пейзажей. Выбрал приемлемый вариант - работает дальше. Нужно озвучить кошко-девочку - без проблем и с этим нейронка справится - нет необходимости задействовать профессионального актёра.
блин такие комментарии мне напоминают всегда что-то из разряда - тебе показывают плащ-неведимку а ты говоришь что фасон не тот и рукава широковаты.
Пару лет назад нейронка не могла сделать вообще ничего нормального, сейчас делает видосы которые ну для продакшена рановатооооо
братан через 3-4 года твой друг аниматор может уже дворы мести, не факт конечно, я больше про то, что темп развития сейчас очень быстрый
Ну это этап развития, не более. Со временем они будут улучшать и улучшаться, тут прогресс будет лимитирован лишь мощностями.
Всё так. Нейрогенератор может высрать что-то из своего датасета, но заставить его сгенерить то, что тебе нужно, либо затратно по времени, либо невозможно, если такого в датасете нет. В тиктоках выкладывают красивые анимации, которые по факту никак подправить нельзя.
Говорю как авторитетный дядька от мира VFX индустрии: нейронки топчик, постоянно юзаю в работе. И в студии и на фрилансе, без ручной доработки никак, но количество потраченного времени на каждый шот в разы меньше. Runway, генерация фш, ModNet и прочее. Sora оч жду, уже знаю где она мне поможет ускорить работу)
Не знаю на счёт анимации, но в давинчи есть несколько нейронок, и всё они работают просто шикарно. Типо на посте поправить свет немного или вычистить звук по-быстрому, это всё очень и очень идёт на пользу скорости продакшена, ориентированного на новости.
AI вовсю используют в озвучке и липсинге: https://youtu.be/iQ1OPpj8gPA?si=7piWXj-LtTBx3pU8