Новите технологии могат да разменят израженията на лицето в реално време

Не забравяйте, че приложението „Myidol“ на Bizarro World, което стана вирусно през пролетта, поради способността му да използва софтуер за разпознаване на лица, за да направи цифров аватар, който изглежда и се движи точно най-вече като теб? Това ще стане реалност… нещо като.

Изследователите от Станфорд са разбрали как да прехвърлят изражението на лицето на един човек върху друго лице в реално време чрез видео.

Моделът, показан в демонстрационното видео на Станфорд, използва само персонален компютър и камера за дълбочина за всеки актьор, което означава, че не е задължително да се нуждаете от фантастично оборудване, за да изпълните този тромп.

Изследователите разработиха нов алгоритъм в реално време, който взема висококачествени визуализации на лицата на всеки участник и ги използва за транспониране на изрази от „източник на актьор“ (лицето, което предоставя изражението на лицето и / или речта) на „целеви актьор“ (лицето, чието лице ще бъде манипулирано според това, което прави актьорът източник). Визуалната информация на актьора-източник преминава през програмата и се изобразява върху видеопотока на целевия актьор, така че изглежда, че целевият актьор се усмихва, говори, притиска езика си или каквото и да е друго.

Благодарение на поредица от референтни точки, очертани около лицето (подобно на приложението Myidol), видовете визуална информация, измерени от системата, включват форма на лицето и характеристики (като очите, носа, устата и дори бръчките), както и текстура и дълбочина на лицето. След това програмата съвпада с референтните точки на актьора-източник към целевия участник и налага тези изрази на целта за хипер-реалистичен видео канал.

Тъй като тази система е все още в процес на разработка (и се използва доста елементарно оборудване), крайните резултати все още са малко необичайни - като полу-смущаващите изкуствени зъби, които програмата е насложена в устата на целта, така че не съществува зейналата черна дупка, когато тя е отворен ”(виж ​​по-горе)… както и вида на празния поглед в очите на целта. Но това са малки пържени картофи в сравнение с онези готини неща, които развитието на тази програма означава за нас.

Ето няколко идеи за това, което бихме могли да използваме за тази технология:

• Имате важно интервю за работа в Skype и не сте облечени за успех. Просто използвайте въображаем вид, докато предоставяте израженията на лицето и отговорите на интервюто за убиец.

• Гледате лекция от топ-професор в Германия - единственият проблем е, че не говорите немски. Не се притеснявайте, благодарение на преводача в реално време, който използва този софтуер, можете да гледате как профът изнася речта си на родния ви език, без да се отказвате от ужасното забавяне в дублирането.

Гледайте израза-размяна в действие: