Key takeaways
- Mixed reality kan snart låta dig styra robotar på distans.
- Mixed reality, eller ett liknande koncept som kallas utökad verklighet, kan tillåta militären att använda robotar i strid.
-
Stora tillverkare använder blandad verklighet för att ha en mekaniker på en plats som hjälper någon över hela landet vid den slutliga monteringen av ett plan.
Virtual reality-headset kan en dag låta dig styra en robot var som helst från slagfältet till en operationssvit.
Forskare vid Microsoft Mixed Reality and AI Lab och ETH Zurich utvecklade nyligen en ny metod som kombinerar mixed reality och robotik. Termen "blandad verklighet" (MR eller MxR) syftar på sammanslagning av verkliga och virtuella världar för att skapa nya miljöer, och det är en del av ett växande arbete för att hitta bättre sätt att använda robotar på distans.
"Nuvarande system kräver träning och övning för operatörer att lära sig de abstraherade kommandona", sa Todd Richmond, en IEEE-medlem och chef för Tech + Narrative Lab vid Pardee RAND Graduate School, till Lifewire i en e-postintervju. "MxR kan ge en operatör ett mer "förkroppsligt" kontrollsystem och kan använda mer bokstavliga kroppsrörelser för kommando och kontroll (t.ex. människor som rör en arm för att flytta robotarmen)."
Virtuella kontroller
MR- och robotsystemet som utvecklats av forskarna testades med ett HoloLens MR-headset. En metod är utformad för att planera uppdrag där en robot inspekterar en miljö.
Den mänskliga användaren rör sig i miljön de vill inspektera med ett HoloLens-headset och placerar hologram formade som waypoints som definierar en robots bana. Användaren kan också markera specifika områden där den vill att en robot ska samla in bilder eller data.
Mixed reality-robotik kommer att möjliggöra tillverkning, operationer, alla möjliga saker som kan utföras av robotar som fjärrstyrs av människor.
"Kombinationen av rumslig beräkning och egocentrisk avkänning på enheter med blandad verklighet gör det möjligt för dem att fånga och förstå mänskliga handlingar och översätta dessa till handlingar med rumslig mening, vilket erbjuder spännande nya möjligheter för samarbete mellan människor och robotar", forskarna skrev i deras tidning.
Mixed reality, eller ett liknande koncept som kallas utökad verklighet, kan tillåta militären att använda robotar i strid, sa Gregory Thomas, chef för Center for Design Research vid University of Kansas, i en e-postintervju.
"Robotarna skulle inte bara kunna samla in data om miljön, utan även analysera direkta faror, kartlägga passager, robotiskt hantera säkerhetsproblem (tänk på en bombdetekteringsenhet som kan röra sig som en människa och tillhandahålla en enormt mycket mer information till kontrollanten), " sa han.
Fredligare användning av tekniken är ett pågående projekt med robotar på sjukhus. Thomas och hans team använde en robot på ett sjukhus i Kansas för att bli "vänner" med pediatriska patienter.
"För ett barn fann vi att ångest, frustration [och] ensamhet alla var vanliga, och roboten kunde programmeras med en medicinsk barnlexikon för att kunna förklara en kommande "procedur", som gjorde dem mer bekväma", sa Thomas.
Future Robots to the Rescue
Om blandad verklighet tar fart kan det så småningom hjälpa dig att arbeta hemifrån också. Stora tillverkare använder blandad verklighet för att ha en mekaniker på ett ställe som hjälper någon över hela landet vid slutmonteringen av ett plan, påpekade Bob Bilbruck, VD för teknikkonsultföretaget Captjur i en e-postintervju.
"Mixed reality-robotik kommer att möjliggöra tillverkning, operationer, alla möjliga saker som kan göras av robotar som fjärrstyrs av människor", tillade han.
Forskare vid Imperial College London utvecklade nyligen en formbar robotarm som kan vridas till form med hjälp av augmented reality (AR). Robotarmen kan vridas i alla riktningar för användning inom områden som underhåll av rymdfarkoster, tillverkning och skaderehabilitering.
Mixed reality kan en dag till och med tillåta människor att förkroppsliga en fysisk avatar i form av en robot.
"De här har uppenbara användningsområden i farliga situationer (t.ex. brandbekämpning, explosiva ammunitionsdetaljer, etc.) men kan också leda till mer rekreationsanvändningar som hybridsport [och] underhållning", sa Richmond. "Kinderna kommer att fortsätta suddas ut mellan analogt och digit alt, människa och maskin."
