Nova tehnologija može zamijeniti izraze lica u stvarnom vremenu

$config[ads_kvadrat] not found

Satsanga With Brother Chidananda—2019 SRF World Convocation

Satsanga With Brother Chidananda—2019 SRF World Convocation
Anonim

Zapamtite tu Bizarro World “Myidol” aplikaciju koja je ovog proljeća postala virusna zbog svoje sposobnosti korištenja softvera za prepoznavanje lica za izradu digitalnog avatara koji izgleda i pomiče se točno uglavnom kao ti? To će postati stvarnost … nekako.

Istraživači sa Stanforda shvatili su kako prenijeti izraze lica jedne osobe na drugu osobu u stvarnom vremenu putem videa.

Model prikazan na Stanfordovom demonstracijskom videozapisu samo koristi osobni PC i duboku kameru za svakog glumca - što znači da ne morate nužno opremiti opremu za izvršavanje ovog tromp l'oeila, samo trebate složene algoritme.

Istraživači su razvili novi algoritam u stvarnom vremenu koji uzima vizualne prikaze visokog kvaliteta lica svakog sudionika i koristi ih za transponiranje izraza iz “izvornog glumca” (osobe koja pruža izraze lica i / ili govora) “ciljnom glumcu” (osoba čije će lice biti manipulirano prema onome što izvorni glumac radi). Vizualni podaci izvornog glumca prolaze kroz program i dobivaju se na vrhu video stream-a ciljnog glumca, tako da izgleda kao da se ciljani glumac smiješi, govori, zabada jezik ili što god mu padne na pamet.

Zahvaljujući nizu referentnih točaka mapiranih oko lica (slično aplikaciji Myidol), vrste vizualnih informacija izmjerenih sustavom uključuju oblik lica i značajke (kao što su oči, nos, usta, pa čak i bore), kao i tekstura i dubina lica. Program zatim uspoređuje referentne točke izvornog glumca s ciljnim akterima i stavlja te izraze na cilj za hiper-realističan video feed.

Budući da je ovaj sustav još uvijek u izradi (i korištena je prilično rudimentarna oprema), krajnji rezultati su još uvijek pomalo nevjerojatni - poput polu-uznemirujućih promašenih zubaca koji se program prekrivaju unutar usta cilja tako da nema zjapeće crne rupe kad je “ otvorena ”(vidi gore)… kao i vrsta praznog pogleda u očima mete. No, to su mali krumpirići u usporedbi s onim što je za nas značilo razvoj ovog programa.

Evo nekoliko ideja za ono što bismo mogli koristiti ovu tehnologiju za:

  • Imate važan intervju za posao na Skypeu i niste obučeni za uspjeh. Samo upotrijebite privlačno mjesto za boravak dok dajete izraze lica i odgovore na intervju ubojice.
  • Gledate uživo predavanje vrhunskog profesora u Njemačkoj - jedini problem je što ne govorite njemački. Bez brige, zahvaljujući prevoditelju u stvarnom vremenu koji koristi ovaj softver, možete gledati kako profesor isporučuje svoj govor na vašem materinjem jeziku bez užasnog kašnjenja presnimavanja u vizualama.

Pogledajte izraz zamjena izraza na djelu:

$config[ads_kvadrat] not found