Жизнь Вадим Елистратов
16 935

Специалисты Samsung научились создавать правдоподобную лицевую анимацию на основе одного исходного кадра

Так можно оживить даже картины.

В закладки

Алгоритм разработали сотрудники центра исследования ИИ Samsung. Он позволяет перенести движение с лица одного человека на лицо другого, обладая лишь одним статичным изображением последнего.

Само собой, в идеале у исследователей должно быть много фото и видео человека, которому они хотят передать движение, однако в некоторых случаях это невозможно — например, когда речь идёт о портретах.

Как отмечает TechCrunch, технология Samsung отличается от аналогов тем, что для её работы нужно минимум входных данных. Но даже если количество исходных кадров увеличить до восьми, качество итоговой анимации резко повышается.

Чтобы добиться такого результата, специалисты «скормили» своему алгоритму огромные объёмы данных, позволяющие ему точно расставить ключевые точки на лице (линия бровей, глаза, нос, губы и овал лица) по всего одному кадру.

Аналогичная технология, позволяющая перенести движение с одного видео на другое, набрала в 2016 году большую виральную популярность — в том числе потому, что авторы исследования использовали ролики с мировыми лидерами.

#технологии #нейросети

{ "author_name": "Вадим Елистратов", "author_type": "editor", "tags": ["\u0442\u0435\u0445\u043d\u043e\u043b\u043e\u0433\u0438\u0438","\u043d\u0435\u0439\u0440\u043e\u0441\u0435\u0442\u0438"], "comments": 120, "likes": 519, "favorites": 154, "is_advertisement": false, "subsite_label": "life", "id": 51465, "is_wide": false, "is_ugc": false, "date": "Thu, 23 May 2019 19:27:29 +0300" }
Подкаст «Жиза ГД»:
Press X to win
Слушать фоном🎧
{ "id": 51465, "author_id": 3351, "diff_limit": 1000, "urls": {"diff":"\/comments\/51465\/get","add":"\/comments\/51465\/add","edit":"\/comments\/edit","remove":"\/admin\/comments\/remove","pin":"\/admin\/comments\/pin","get4edit":"\/comments\/get4edit","complain":"\/comments\/complain","load_more":"\/comments\/loading\/51465"}, "attach_limit": 2, "max_comment_text_length": 5000, "subsite_id": 128871, "last_count_and_date": null }

120 комментариев 120 комм.

Популярные

По порядку

Написать комментарий...
209

Даже так лучше, чем в Андромеде (͡° ͜ʖ ͡°)

Ответить
–46

Вы хоть указывайте что речь о "Масс Эректе".
Фанаты сайфая могут вас неправильно понять.

Ответить
217

Возможно ты первый человек на DTF, который при слове «Андромеда» подумал не про ME.

Ответить
–25

Я не живу на ДТФ, возможно в этом суть. ))

Ответить
175

ЗАМЕТНО

Ответить
–9

Тссс, родителям не показывай! Я уроки не доделал.

Ответить
30

Да просто козырнуть решил не к месту.

Ответить
0

Думаю, что кому надо, тот поймёт, о какой Андромеде идёт речь)

Ответить
2

Юмор уже пять человеков не поняли, так что не уверен.
В следующий раз скобочки поставлю, чтобы наверняка. ))

Ответить
3

Да, жалко, что не поняли юмора. (залайкаю тебя, пока никто не видит, чтобы вернуть репутацию xd)

Ответить
81

Колдовство ебаное

Ответить
25

(с) Патриарх любой из церквей

Ответить
0

Любой актёр о незавидном будущем своей профессии.

Ответить
65

правдоподобную лицевую анимацию

Дейсвительно, прям как в жизни

Ответить
44

Пучков совсем поехал.

Ответить
30

Он просто категорически приветствует нас, не обращайте внимания.

Ответить
1

Сальников совсем поехал на диете

Ответить
0

а можно видос, откуда это?

Ответить
1

Да таких видосов полно, забиваешь в youtube "too high on mdma" и пошла руда. Зрелище, конечно, жуткое )))

Ответить
38

Можно было хотя бы указать, что этого добились российские разработчики, которые также являются сотрудниками Сколково, а не просто специалисты Самсунг...

Ответить
22

Ну, учитывая, что они используют лицо Нагиева, это и так понятно.

Ответить
5

Это же Кристофер Ламберт, камон.

Ответить
59

Ламберт Ламберт хер моржовый
Ламберт Ламберт вредный хуй

Ответить
12

Вполне, вполне

Ответить
2

Бля, только сегодня дошёл до этого квеста в Ведьмаке и понял откуда это около мемное выражение)))

Ответить
1

И это самые лучшие моменты во всей игре связаные с попойкой.

Ответить
13

для меня лучший момент, когда Ламберт предложил позвонить чародейкам:) я в таком восторге был:)

Ответить
3

Да. Там вся арка событий в Каер Морхане до нападения прекрасна.

Ответить
1

На польском все таки лучше и лаконично:
Ламбер Ламберт ты хуй.

Ответить
0

Паша Воля же

Ответить
24

Вот кстати да, хорошо было бы - из самой статьи: Egor Zakharov, Aliaksandra Shysheya, Egor Burkov, Victor Lempitsky, Samsung AI Center, Moscow, Skolkovo Institute of Science and Technology.
Уж не так часто Сколково упоминается в положительном контексте :)

Ответить
5

O, oni iz Anglii?

Ответить
1

Статья на английском, скорее всего.

Ответить
0

Ну Елистратов считает что да, но на самом деле нет - только статья на английском:
https://arxiv.org/abs/1905.08233

Ответить
–4

Главное тут, как раз Самсунг. Ибо нет пророка в своем отечестве. Самсунг отечественный (РФ) бренд.

Ответить
0

У Самсунга есть центр разработок в Сколково.

Ответить
10

Отличная технология для создания фейков, думаю скоро мы увидим её в действии по всему миру.
Ещё есть технология склейки изображений с видео, она создавалась для порно изначально, но я позабыл название.
Это когда лицо с фотографии переносится на любое тело в видео ролике и всё выглядит, как одно целое, при должном качестве, отличить подделку не просто.

Ответить
44

Мне вот эта крипотень вспомнилась.

Ответить
9

Даже волосы пропадают - вот это магия!

Ответить
1

Жуть какая

Ответить
2

А вдруг уже видели, просто не заметили подвоха.

Ответить
1

DeepFake вроде

Ответить
0

фейс свап как и дипфейк требует овердохуя фотографий, а лучше раскадрированного видео-источника. Я тестировал на фотках знакомой - получается крипота и мясо вместо лица. С одной фотографии точно ничего не выйдет, а самсунг умудрился.

Ответить
20

Эффект зловещей долины >_<

У картин расстояние меж глазами меняется, это жуть)

Ответить
6

Ну а что вы хотели - на лицо одного человека просто наложили текстуру другого.

Ответить
0

чем ближе черты лица к исходному донору - тем меньше разницы

Ответить
14

Так и до картин из Гарри Поттера не далеко О_о

Ответить
3

Да хоть сейчас: ставишь плазму на стену вертикально, обклеиваешь картинной рамой, пускаешь на луп изображение и voila!👌🏻

Ответить
1

Ну так в картине были живые личности которые могли общаться и наблюдать. Этого ты не учел)

Ответить
3

Прикрути к этому чат-бота.

Ответить
1

тоже именно они вспомнились

Ответить
2

Куда алгоритм дел усы Дали?

Ответить
18

усы оказались в дали

Ответить
0

Туда же, куда бороду Генри Кавилла.

Ответить
7

Ждем на порнхабе видео с Мона Лизой

Ответить
4

Скорее на мимику живого человека натянули Мону Лизу, как всегда припизднуть хотят

Ответить
0

Собственно, именно это и сделали.

Ответить
1

но в заголовке написано о генерации правдоподобной анимации, а не использовании существующий, так что технически он прав

Ответить
4

Крипота, конечно. Но средняя Джоконда в профиль на паре кадров смахивает на Натали Портман :D

Ответить
4

Исходный код еще не в паблике, если кто-то ищет

Ответить
0

блин я лет 5 назад видел видео-обращение путина , потом задник съезжает наверх , они с медведевым на пляжу начинают тусить и там была эта фича. если кто найдет видос, киньте сюда под коммент

Ответить
0

Ну тут-то наверно просто скомпозитили отдельно снятое тело на готовую голову из видоса.

Ответить
0

Ты опоздал.

Ответить
7

а сообщения не удаляются здесь. живи с этим.

Ответить
0

там просто лицо (голову) из реального новогоднего обращения прицепили к всему остальному, вообще никак не связано с этой фичей.

Ответить
0

А по моему просто двойника нашли .. хотя у Димы это их куча . Хотя он сам на Николая 2го похож.

Ответить
0

ну это было вон в 2011 , со временем у меня в голове представление изменилось. на то время это было очень удивительно для меня

Ответить
1

Мне как-то не по себе от двигающейся Мона Лизы.

Ответить
1

Теперь картины будут как в Гарри Поттере? "Выключите свет! Вы вобще в своем уме?!" (с).

Ответить
0

Комментарий удален по просьбе пользователя

Ответить
1

Эта тема была ещё в "поколении Пе".

Ответить
1

Ну все, скоро видео не сможет стать доказательством в судах

Ответить
1

Так нас ВВП и без того вечно будет поздравлять в каждом Новом году🎄

Ответить
1

- Здравствуйте, мистер Депп, мы хотели бы пригласить вас для участия в нашем новом фильме, каковы ваши ориентировочные расценки?
- От десяти миллионов долларов.
- Хм-м-м... А можно мы выкупим одну вашу фотографию?
- Одну фотку?
- Да.
- Десять баксов.
- Отлично!

Ответить
0

Фотограмметрия и мокшен кэпчур. Правда пока нужно подождать когда актёр умрет , как это было в ЗВ или небесном капитане и мире будущего

Ответить
0

Не ждем, а готовим(ся).

Ответить
0

пока нужно подождать когда актёр умрет

Можно и помочь, все равно дешевле будет.

Ответить
0

пиздец какая крипота

Ответить
0

Как по мне, так это круто! Лично я бы "оживил" несколько домашних фотографий. На них - много людей, которых не застал, но которых хотел бы увидеть на мгновение вновь живыми.

Ответить
0

Помяните моё слово, ТВ будет сертифицированным источником информации, а интернет завален всевозможными подобными фейками. ))) Или что называется - не верь глазам своим.

Ответить
1

Никто не мешает разработать микросхему для записывающих устройств, которая будет подписывать каждый снимаемый кадр в реальном времени по принципу блокчейн шифрования, так что можно будет установить факт того, что видеофайл не изменялся.

Ответить
2

Всё можно подделать если очень хочется. Особенно если технологию этих микросхем будут контролировать нужные люди.

Ответить
0

"Quis custodiet ipsos custodes?"
По крайней мере, с такой технологией можно попытаться исключить вероятность кампаний против медийных личностей с применением подобных фейков, если только это не входит в интересы "хранителей" алгоритмов подписи.

Ответить
0

Эта чипа кого надо чипа

https://i.imgur.com/FXozhzN.gif

Ответить
0

Сразу вспоминаются разоблачения из 90х после которых приходилось находить двойника и делать ещё видосики

Ответить
0

Если я верно помню, диски для 1 плэйстейшен имели характерный для исключительно их завода дефект по краям или вроде того, который использовался для проверки лицензии и региона. И хрен ты такое повторишь. А сделать легко.

Ответить
0

А потом они закупили новое оборудование ...

Ответить
0

Да нет. Я могу ошибаться, но такого рода защиты все ещё используются с теми же блюреями. Дешево и эффективно.

Ответить
0

ТВ, источник информации, ну насмешил😂😂😂

Ответить
0

Жаль, что обычно всё это киснет где-то в недрах исследовательских центров, а потом уходит куда-то в коммерческую область. Очень мало вылетает в свободный доступ. Могу только пока вспомнить waifu2x, ESRGAN и различные аналоги Deepfake. А мне бы как раз пригодилась подобная технология)

Ответить
1

Прям тайные знания, ага
https://arxiv.org/pdf/1905.08233.pdf

Вообще в deep learning сообществе часто реальные прорывы почти всегда выкладывают в открытый доступ, либо в виде формул, либо прямо в виде кода. Конкретные реализации могут лежать внутри компаний, но новые подходы обычно везде распространяются.

Ответить
0

Не знал, спасибо. Правда, для меня всё ещё бесполезно) В моей голове нейросети – это магия, и формулы ничего не дадут)

Ответить
1

На торрентах качай нейросеть да запускай. Можешь хоть свою голову к новогоднему президенту прилепить

Ответить
0

Если честно – знать бы, что искать. Я в своё время только качал DeepFaceLab, вроде (какую-то из реализаций deepfakes, не помню, какую именно). Но оно не подходило для моих целей, т.к. рассчитано на большое количество материала с лицом реципиента, а мне бы наоборот по одной - двум фотографиям. Я хотел проверить, можно ли перенести игру с лица человека на лицо с его детской фотографии. "Омолодить" актёра таким образом. Классический способ (сканировать, моделить лицо, риггить, анимировать через захват движений) я, понятное дело, не вывезу (я же не Digital Domain в одном лице), а вот нейросетки могли бы меня выручить.
Ешще пробовал качать нейросетки для построения трёхмерной модели головы по фотографиям, но это для другой цели (надо было сделать цифровых дублеров для нескольких актёров), и их нужно было самому разворачивать, да и результат по трёхмерной сетке был такой себе.

Ответить
0

я faceswap тестил. На рутрекере есть.

Ответить
0

Монеточка, Гудков...

Ответить
0

Мона все-таки прекрасна))

Ответить
0

Сообщение удалено

Ответить
0

Порно с Папичем! Жизнь прожита не зря

Ответить
0

Давным давно уже клепают порнуху из разряда deep fake по этому алгоритму и явно лучше чем тут

Ответить

Комментарий удален

0

Дубль.

Ответить
0

Андромеда: масс эффект плачет в стороне. Где ж вы были самсунги!!))

Ответить
0

Конец профессии актёра всё ближе...

Ответить
0

Блин, оч хочется попробовать.

Ответить
0

Крипово
Долина та еще

Ответить
0

Боюсь включать воображения )

Ответить
0

В статье почему-то забыли написать, что этот алгоритм разработали исследователи из ̰м̰о̰с̰к̰о̰в̰с̰к̰о̰г̰о̰ Центра искусственного интеллекта Samsung.

Ответить
0

Ну все, теперь Путина по ящику будут еще лет 100 показывать. А после него сразу Сталин придет.

Ответить
0

Офигенно ли это? Да!

Ответить
–3

Я такое в 9ом классе на информатике делал

Ответить
0

Здравствуй Самсунг.

Ответить
0

Прямой эфир

[ { "id": 1, "label": "100%×150_Branding_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox_method": "createAdaptive", "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "ezfl" } } }, { "id": 2, "label": "1200х400", "provider": "adfox", "adaptive": [ "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "ezfn" } } }, { "id": 3, "label": "240х200 _ТГБ_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fizc" } } }, { "id": 4, "label": "240х200_mobile", "provider": "adfox", "adaptive": [ "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "flbq" } } }, { "id": 5, "label": "300x500_desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "ezfk" } } }, { "id": 6, "label": "1180х250_Interpool_баннер над комментариями_Desktop", "provider": "adfox", "adaptive": [ "desktop" ], "adfox": { "ownerId": 228129, "params": { "pp": "h", "ps": "clmf", "p2": "ffyh" } } }, { "id": 7, "label": "Article Footer 100%_desktop_mobile", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fjxb" } } }, { "id": 8, "label": "Fullscreen Desktop", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fjoh" } } }, { "id": 9, "label": "Fullscreen Mobile", "provider": "adfox", "adaptive": [ "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fjog" } } }, { "id": 10, "label": "Native Partner Desktop", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fmyb" } } }, { "id": 11, "label": "Native Partner Mobile", "provider": "adfox", "adaptive": [ "phone" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fmyc" } } }, { "id": 12, "label": "Кнопка в шапке", "provider": "adfox", "adaptive": [ "desktop", "tablet" ], "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fdhx" } } }, { "id": 13, "label": "DM InPage Video PartnerCode", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox_method": "createAdaptive", "adfox": { "ownerId": 228129, "params": { "pp": "h", "ps": "clmf", "p2": "flvn" } } }, { "id": 14, "label": "Yandex context video banner", "provider": "yandex", "yandex": { "block_id": "VI-250597-0", "render_to": "inpage_VI-250597-0-1134314964", "adfox_url": "//ads.adfox.ru/228129/getCode?pp=h&ps=clmf&p2=fpjw&puid1=&puid2=&puid3=&puid4=&puid8=&puid9=&puid10=&puid21=&puid22=&puid31=&puid32=&puid33=&fmt=1&dl={REFERER}&pr=" } }, { "id": 15, "label": "Плашка на главной", "provider": "adfox", "adaptive": [ "desktop", "tablet", "phone" ], "adfox": { "ownerId": 228129, "params": { "p1": "byudo", "p2": "ftjf" } } }, { "id": 17, "label": "Stratum Desktop", "provider": "adfox", "adaptive": [ "desktop" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fzvb" } } }, { "id": 18, "label": "Stratum Mobile", "provider": "adfox", "adaptive": [ "tablet", "phone" ], "auto_reload": true, "adfox": { "ownerId": 228129, "params": { "pp": "g", "ps": "clmf", "p2": "fzvc" } } } ]
В лутбоксы начали включать багфиксы
Подписаться на push-уведомления