Pozorovat na demo videu někoho prožívajícího zážitek virtuální reality působí podivně: místo, abychom viděli člověku do tváře, pozorujeme půl obličeje zakrytého neprůhlednými brýlemi pro virtuální realitu. Totéž samozřejmě platí pro aktéry VR her s dvěma a více účastníky nebo virtuální videokonference.
Pro demo videa virtuální reality přišli vývojáři Google a Daydream Labs s řešením, které dokáže z pozice pozorovatele téměř zneviditelnit VR brýle na hlavě jejich nositelů a odhalit jejich tvář. Pro tento účel tým nejprve zkonstruuje 3D model tváře nositele brýlí a to prostřednictvím hloubkové barevné kamery. Tento krok zabere jednu minutu. Upravené HTC Vive brýle zaznamenávají pohyb očí jejich nositele a propojený synchronizovaný systém mezi kamerou pro demo videa a VR brýlemi dokáže nahradit neprůhledné brýle 3D modelem tváře. Výsledkem je velmi realistický pohled na obličej zakrytý namísto neprůhlednými VR brýlemi obrazem téměř nerušících "potápěčských" brýlí.
Týmu se tím podařilo posunout dopředu technologii 3D modelování tváře, zásadně vylepšit dojem z demo videí VR reality a udělat i krok k budoucímu virtuálnímu odstranění brýlí účastníků komunikační, herní a sociální interakce postavené na smíšené realitě.
Originální článek