211service.com
Oculus Rift Hack pārnes jūsu sejas izteiksmes uz jūsu iemiesojumu
Virtuālā realitāte ir paredzēta, lai iegūtu būtisku sociālo realitāti.
Programmatūra apvieno datus no sensoriem, kas izseko sejas augšējo un apakšējo daļu, un saskaņo rezultātu ar sejas 3-D modeli.
Pētnieki no Dienvidkalifornijas universitātes un Facebook Oculus nodaļas ir parādījuši veidu, kā izsekot kāda cilvēka sejas izteiksmēm, kas valkā virtuālās realitātes austiņas, un pārnest tās uz virtuālo personāžu. Tas varētu radīt daudz atalgotāku socializēšanos, darbu vai rotaļas virtuālajās pasaulēs, jo virtuālā ķermeņa dubultā vai citas pasaules iemiesojuma izteiksme varētu lieliski atdarināt cilvēka īstās sejas izteiksmi.
Sistēma izseko cilvēka mutes kustību, izmantojot 3D kameru, kas pievienota austiņām ar īsu izlici. Sejas augšdaļas kustības tiek mērītas, izmantojot sprieguma mērītājus, kas pievienoti putu polsterējumam, kas pieguļ austiņām pie sejas. Kad abi datu avoti ir apvienoti, precīzu lietotāja sejas kustību 3-D attēlojumu var izmantot, lai animētu virtuālu personāžu neatkarīgi no tā, vai tas ir ersatz cilvēks vai kas cits, nevis cilvēks (skatiet video).
Tas varētu padarīt apdzīvošanu un mijiedarbību virtuālajās pasaulēs saistošāku, saka Hao Li , Dienvidkalifornijas universitātes docents, kurš vadīja projektu. Lai iegūtu virtuālu sociālo vidi, jūs vēlaties nodot šo uzvedību citiem cilvēkiem, viņš saka. Šī ir pirmā sejas izsekošana, kas ir demonstrēta, izmantojot uz galvas piestiprinātu displeju. Li tika nosaukts par vienu no MIT tehnoloģiju apskats Jaunie novatori 2013. gadā.
Facebook izpilddirektors Marks Cukerbergs ir teicis, ka ir ieinteresēts, lai Oculus Rift austiņas nodrošinātu jaunus socializācijas veidus, lai gan viņš nav atklājis nekādu informāciju. Sociālais tīkls iegādājās Oculus pagājušajā gadā (skatiet Ko Cukerbergs redz Oculus Rift).
Li saka, ka Oculus pētnieki ar viņu strādāja tikai kā pētnieciskā darbība, taču nebūtu pārāk grūti noslīpēt viņu izstrādāto sistēmu un padarīt to par komerciālu produktu. Viņš saka, ka, ja cilvēki domā, ka tas patiešām ir svarīgs svarīgos slepkavas lietojumos, jūs to varētu ieviest ražošanā salīdzinoši ātri.
Tas ir patiešām forši, saka Filips Rouzdeils, kurš iepriekš nodibināja Second Life un tagad ir virtuālās pasaules startup izpilddirektors. Augsta precizitāte . Uzņēmums strādā pie tā, lai nodrošinātu reālistisku virtuālu sociālo mijiedarbību, izmantojot tīmekļa kameras un citas sensoru tehnoloģijas, lai izsekotu sejas izteiksmes un roku un roku žestus (skatiet sadaļu “Meklējumi, lai virtuālajā realitātē ievietotu vairāk realitātes”).
Ir labi pierādījumi, ka liekot cilvēku iemiesojumiem parādīt viņu reālās pasaules ķermeņa valodu, viņi palīdz sazināties ar citiem cilvēkiem virtuālajā pasaulē, saka Rouzdeils. Viņš piekrīt Li, ka vajadzētu būt iespējai racionalizēt pirmo koncepcijas pierādījumu. Piemēram, kameru var integrēt austiņu apakšā. Pētnieku un jaunuzņēmumu centieni virtuālās realitātes austiņās ievietot acu izsekošanas kameras var piedāvāt alternatīvu veidu, kā vākt datus par sejas augšējo daļu.
Li sistēmas atslēga ir programmatūra, kas var apvienot datus no sensoriem, kas izseko sejas augšējo un apakšējo daļu, un saskaņot rezultātu ar sejas 3-D modeli.
Pagaidām šai programmatūrai ir nepieciešams veikt īsu kalibrēšanas procesu, kad pirmo reizi izmantojat sistēmu. Vispirms jūs sniedzat sejas muskuļiem 10 sekunžu treniņu, izgriežot tos dažās atšķirīgās izteiksmēs, vienlaikus valkājot austiņas ar noņemtu displeja daļu 3D kameras priekšā, lai tā varētu pilnībā redzēt seju. Pēc tam uzvelciet visas austiņas un vēl 10 sekundes trenējiet seju. Apkopotie dati palīdz programmatūrai noskaidrot, kā pareizi saskaņot datu straumes no augšējās un apakšējās sejas.
Li saka, ka viņš strādā, lai novērstu šo darbību, ievadot programmatūrai vairāk datu par dažādām sejām. Viņš strādā arī pie citiem paņēmieniem, kas varētu atvieglot jūsu īstā sevis kopēšanu virtuālajā pasaulē. Jau ir izstrādāti daudzi rīki, lai izveidotu cilvēku ķermeņu un seju 3D kopijas, izmantojot parastās un 3D kameras. Li nesen izveidoja sistēmu, kas risina sarežģītāku uzdevumu – izveidot reālistisku cilvēka frizūru 3D formātā. Viņa programmatūra to var izdarīt, izmantojot tikai viena fotogrāfija . Gan šis projekts, gan sejas izsekošanas pētījums tiks prezentēti Siggraph datorgrafikas konference augustā Losandželosā.