Key takeaways
- Forskare har utarbetat en mekanism för att kontrollera VR-avatarer genom ansiktsuttryck.
- Forskarna fann att ansiktsuttryck skapade mycket mer uppslukande upplevelser.
-
Tekniken kan hjälpa till att göra VR tillgänglig för personer med funktionshinder.
Efter att ha revolutionerat biometri, är ansikten redo att stärka en annan teknik: virtuell verklighet (VR).
I en nyligen genomförd studie använde ett internationellt team av forskare från Australien, Nya Zeeland och Indien vanliga ansiktsuttryck, som ett leende och en rynka pannan, för att interagera och utlösa specifika handlingar i VR-miljöer, med överraskande resultat.
"Sammantaget förväntade vi oss att de handhållna kontrollerna skulle prestera bättre eftersom de är en mer intuitiv metod än ansiktsuttryck", konstaterade professor Mark Billinghurst från University of South Australia, en av forskarna som var involverade i experimentet, i en nyhetssläpp. "Men folk rapporterade att de kände sig mer uppslukade av VR-upplevelser som styrs av ansiktsuttryck."
Intuitiv fördjupning
Forskarna, ledda av University of Queensland-forskaren Dr. Arindam Dey, som arbetar med Prof. Billinghurst vid Australian Research Center for Interactive and Virtual Environments, hävdade att de flesta VR-gränssnitt kräver fysisk interaktion med handhållna kontroller.
I sin uppsats noterar forskarna att de tänkte använda en persons uttryck för att manipulera objekt i VR utan att använda en handhållen kontroller eller pekplatta. De utarbetade en mekanism för att identifiera olika ansiktsuttryck, inklusive ilska, lycka och överraskning, med hjälp av ett Electroencephalogram (EEG) headset.
Till exempel användes ett leende för att utlösa kommandot för att flytta användarens virtuella avatar, medan en rynkad panna skulle utlösa ett stoppkommando och en knäppning användes för att utföra en fördefinierad åtgärd, istället för att använda en handhållen kontroller för att styra avataren, förklarade prof. Billinghurst i pressmeddelandet.
Som en del av forskningen designade gruppen tre virtuella miljöer, två som var glada och skrämmande och en tredje som var neutrala. Detta gjorde det möjligt för forskarna att mäta varje deltagares kognitiva och fysiologiska tillstånd medan de var nedsänkta i vart och ett av de tre scenarierna.
I den glada miljön log deltagarna för att röra sig genom en park för att fånga fjärilar med knuten käke och rynkade pannan för att stanna. På samma sätt, i den läskiga miljön, användes samma uttryck för att navigera genom en underjordisk bas för att skjuta zombies, medan ansiktsuttrycken i den neutrala miljön hjälpte användarna att flytta över en verkstad och plocka upp olika föremål.
Forskarna sammanställde sedan de neurologiska och fysiologiska effekterna av användarens interaktion i de tre VR-miljöerna med hjälp av ansiktsuttryck och jämförde dem med interaktioner som utfördes via vanliga handhållna kontroller.
Prof. Billinghurst noterade att i slutet av experimentet drog forskarna slutsatsen att även om det är hårt arbete för hjärnan att förlita sig på enbart ansiktsuttryck i en VR-miljö, ger det deltagarna en mer uppslukande och realistisk upplevelse än att använda handhållna kontroller.
En ren gimmick?
Forskarna hävdar att interaktion med VR genom ansiktsuttryck inte bara ger ett nytt sätt att använda VR, utan tekniken kommer också att göra den mer tillgänglig. Genom att avstå från handhållna kontroller kommer personer med funktionshinder, från personer med motorneuronsjukdom till amputerade, äntligen att kunna uppleva VR.
Även när de arbetar för att göra den mer användbar, föreslår forskarna att tekniken också kan användas för att komplettera handhållna kontroller, särskilt för VR-miljöer där ansiktsuttryck är en mer naturlig form av interaktion.
"Det mesta av mänsklig kommunikation är faktiskt kroppsspråk [och] ansiktsmikrouttryck som vi ofta är omedvetna om, så korrekt ansiktsspårning kan säkert ta virtuella sociala interaktioner till en helt ny nivå." Lucas Rizzotto, orädd skapare och YouTuber, berättade för Lifewire via e-post.
Rizzotto, vars mest kända skapelse är en VR-tidsmaskin, tror att ansiktsspårning definitivt har en roll att spela när det kommer till social VR och Augmented Reality (AR) och metaversen, även om han har sina reservationer mot att det ska vinna mainstream acceptans.
"När det gäller att rent kontrollera upplevelser med ditt ansikte, är jag säker på att det finns några kreativa möjligheter här när det kommer till konst och tillgänglighet", sa Rizzotto. "Men det kan också lätt sluta som en gimmick när vi har så många mer pålitliga former av input."
