Key takeaways
- Forskare har föreslagit ett nytt sätt att skriva i virtuell verklighet som använder AI för att analysera dina bens vibrationer.
- TapID kunde låta folk skriva med virtuella headset på vilken yta som helst.
- Oculus utvecklar teknik för att använda kamerorna på sitt headset för att läsa dina fingerrörelser när du skriver på ett virtuellt tangentbord.
Att skriva medan du bär ett virtuell verklighetsheadset kan bli enklare tack vare en ny uppfinning som analyserar vibrationerna i dina ben.
Att använda ett tangentbord i VR är knepigt eftersom du verkligen inte kan se var fingrarna landar. Den nya TapID-gadgeten är ett armband som bär två rörelsesensorer, med en på varje handled, enligt forskare som nyligen publicerade en artikel om deras uppfinning. Enheten upptäcker tryck från var och en av användarens fingrar individuellt.
"Just nu använder de flesta VR-användare en handhållen kontrollenhet som fungerar ungefär som en laserpekare", sa Scott Camball, en entusiast för telekommunikation och telekonferenser, i en e-postintervju. "De måste peka på varje bokstav på det virtuella tangentbordet, och det kan ta väldigt lång tid att skriva ut saker. Detta fungerar för videospel, men inte för arbetsrelaterade uppgifter. TapID skulle tillåta användare att ha en virtuell arbetsyta med stora skärmar utan större delen av en stationär dator.”
Låt fingrarna tala
TapID fungerar genom att analysera vibrationerna genom ditt skelettsystem med hjälp av en maskininlärningsalgoritm. I VR-miljöer kan användare skriva på ett virtuellt tangentbord eller interagera med virtuella objekt på en yta med sina fingrar.
"TapID skulle tillåta användare att ha en virtuell arbetsyta med stora skärmar utan större delen av en stationär dator."
"Vi föreslår att all direkt interaktion i VR flyttas till passiva ytor", skrev författarna i sin tidning. "Jämfört med interaktion i luften ger beröringsinteraktion på ytor användare en möjlighet att vila armarna mellan interaktioner samtidigt som de erbjuder fysiskt stöd under långvariga interaktioner."
Andra sätt att skriva in VR
Virtual reality-företag hoppas kunna göra användarna mer produktiva genom att erbjuda alternativ till de nuvarande pekarsystemen. Facebook Reality Labs utvecklar teknik för att använda kameror på Oculus-headsetet för att läsa dina fingerrörelser när du skriver på ett virtuellt tangentbord, påpekade Camball.
"Fördelen med detta är att inget armband behövs, men Facebook Labs handspårning fungerar för närvarande inte tillräckligt bra för mainstreamadoption", tillade han."För närvarande är ergonomin för att skriva i VR ett stort problem, eftersom vanliga inmatningsmetoder med ett virtuellt tangentbord är tröttsamma på grund av behovet av att hålla en handkontroll eller händerna i kamerans vy."
Tillverkare arbetar också på en ringformad gadget som användare av virtuell verklighet kan sätta på fingret, sa Ivan Pleshkov, utvecklare på ScienceSoft, ett mjukvaruutvecklingsföretag, i en e-postintervju. "Det är ännu bekvämare att bära och mer intuitivt att använda - användaren kan rita tecken i luften och är inte beroende av kamerans placering", tillade han.
En annan inmatningsmetod under utveckling är ett virtuellt tangentbord som använder eye-tracking. "Tack vare sensorn som fångar och bearbetar ögonens plats kan en användare skriva tecken genom att vila blicken på dem för att skriva in dem", sa Pleshkov. "Det lovar att bli en mindre tröttsam upplevelse, även om skrivhastigheten är ifrågasatt - metoden kräver lite anpassning för att öka den.”
Att använda ett riktigt tangentbord i VR är ett alternativ, även om det är svårt för tillfället. Appen Immersed for the Oculus Quest är en delad virtuell arbetsyta som erbjuder ett sätt att kalibrera ett fysiskt tangentbord så att du kan skriva medan du är i VR. I en demonstration som lades ut på Reddit visade Immerseds grundare Renji Bijoy att han skrev med 164 ord per minut med hjälp av funktionen.
Vissa utvecklare hoppas att röststyrning kan vara bättre än vilket tangentbord som helst.
Klumpiga handkontroller avskräcker ofta nya VR-användare, sa Ottomatias Peura, tillväxtchef på mjukvaruföretaget Speechly för röststyrning, i en e-postintervju. "Detta är särskilt problematiskt i vissa VR-miljöer som bara kan användas en eller två gånger, till exempel miljöer för fastigheter eller livemusik", tillade han.
Övning kan förbättra hur användare kontrollerar standardkontroller, men att manipulera VR genom tal är ännu bättre, sa Peura.
"Röst är ett bra alternativ för att förbättra användarupplevelsen i VR också, eftersom det är den mest naturliga interaktionsmodaliteten för oss människor", tillade han. "Även om det kan vara svårt att klicka på B med vänster handkontroll med dina VR-glasögon på, är det väldigt intuitivt att säga "öppen dörr."
