Hands-on med Microsoft Mesh: Collaboration in Mixed Reality

Det finns en fantastisk scen i Kingsman: The Golden Circledär Eggsy och de andra ledarna för den hemliga spionbyrån (Också Channing Tatum förstås) samlas runt ett styrelsebord - förutom att de inte är där. Var och en av dem är ett hologram, tack vare otrolig teknik instoppad i ett par vanliga glasögon.

Det är en vanlig trope inom film, något som James Bond och Ethan Hunt också har använt. Och det är helt enkelt inte möjligt med dagens augmented reality-teknik.

Var inte möjligt menar jag.

Idag på Microsoft Ignite utvecklarkonferens, den tekniska innovatören presenterade Microsoft Mesh, en tvärteknologisk plattform som låter apputvecklare bygga beständiga virtuella miljöer för samarbete, kommunikation och mer.

Mesh driver styrelserummet ännu längre, vilket gör att människor från hela världen kan dela med sig hologram. Ja, du kan slänga en virtuell nyckel till någon annan. Det låter dumt, men det öppnar stora nya världar, tack vare beräkningar som är så komplexa att det är svårt att förstå.

Kul med hologram

För att få en känsla för den nya tekniken skickade Microsoft mig en låda med en mycket snygg HP Omen gaming laptop, a Hololens 2 headset, och ett mixed-reality-headset från HP som heter Reverb G2. De två sista enheterna skapar två väldigt olika virtuella miljöer. Hololens är i första hand en förstärkt verklighetsenhet; det är i huvudsak ett pannband med ett tydligt visir som de du kanske kommer ihåg från butiksklassen, som enheten kan stråla bilder på. Dina ögon samlar världen framför dig och de virtuella bilderna till en ny verklighet, en bättre än den vanliga värld du lever i.

Headsetet med blandad verklighet är en virtuell verklighetsenhet, menad att helt transportera dig till en ny värld. Microsoft Mesh fungerar i båda, såväl på stationära datorer (PC och Mac) som inom kort Android och iPhone-enheter, säger Microsoft.

För att testa det tog jag på mig en Hololens 2 och tände den. Headsetet bygger en detaljerad karta över din miljö, inklusive dina händer – inget behov av kontroller här. Du startar appar och justerar inställningar via en meny som du kommer åt genom att trycka på en flytande Windows-ikon som är mappad på din handled.

Jag lanserade testappen (som heter Fenix ​​medan den fortfarande var i beta) och träffade den flytande avataren av Greg Sullivan, chef för blandad verklighet hos Microsoft, runt en skimrande arbetsyta, som vi individuellt kunde placera och ändra storlek på i vår fysiska miljö. Jag släpade det virtuella bordet mellan min riktiga säng och dörröppningen, låste det till marken och riktade min uppmärksamhet mot maneterna, jorden och valhajen som svävade ovanför den.

Hololens är unikt intuitivt; du tar tag i alla hologram med händerna, antingen nyper eller bara rycker dem som en flugboll, och roterar, växer eller krymper dem precis som du förväntar dig. Och visst kunde Sullivan och jag skicka hologram fram och tillbaka. Jag plockade upp hajen, som hotfullt virvlade svansen, och expanderade den för att få en bättre titt på dess bleka undersida. Jag skickade den över bordet till en annan reporter, som tog tag i den och staplade den ovanpå maneten.

Kul med hologram! Jag stötte bara på ett problem: Jag tenderar att stänga mina händer när jag sänker armarna åt sidan, och jag fortsatte att ta tag i hologram av misstag. Appen kraschade en eller två gånger också, men det är bara ett tekniskt bevis på konceptet mer än något annat. Betrakta konceptet bevisat.

Visst, vi kunde inte knytnävna stöta för att rädda våra liv - fan, vi var trots allt bara avatarer - men det här var samarbete från en annan dimension.

"Det är som metaversen," sa Sullivan till mig. "När någon som inte är i rummet med dig ger dig ett hologram är det en ganska kraftfull upplevelse."

Ny plattform på gång

Jag upplevde Mesh genom Fenix-appen, men Microsoft tänker på det som en plattform och säger att det kommer att släppa SDK: er att tillåta vilken utvecklare som helst att lägga till denna funktion till sina appar – därav tillkännagivandet från Ignite-utvecklaren konferens.

Den första demon apar en designrecension med flit. Det är en naturlig möjlighet för den här typen av samarbete, sa Sullivan, och varje gång du kan undvika att flyga någon till en fabrik för att inspektera en prototypprodukt, kommer ett företag att spara pengar. Andra potentiella applikationer inklusive fjärrsupport och utbildning, tillverkning och mer.

Arkitekter och ingenjörer kunde fysiskt gå igenom en holografisk modell av ett fabriksgolv under konstruktion, se hur alla delar av utrustning passar ihop i tre dimensioner, potentiellt undvika kostsamma misstag. Ingenjörs- eller medicinstudenter som lär sig om elbilsmotorer eller mänsklig anatomi kunde samlas som avatarer runt en holografisk modell och ta bort delar av motorn eller dra tillbaka musklerna för att se vad som är under.

Microsoft lovade också att släppa Mesh-drivna versioner av sina egna appar inom en snar framtid, även om en tidslinje var frustrerande frånvarande. En mesh-driven Teams-miljö verkar trots allt vara en no-brainer, och det har företaget redan gjort bibliotek av 3D-objekt inbyggd i sin programvara, inklusive Office-paketet.

Redaktörens rekommendationer

• Det visar sig att Microsofts HoloLens 3 kanske inte är död trots allt
• Microsoft och Samsung skulle kunna gå ihop om ett nytt AR-headset
• HoloLens 2 kommer att ha mörkt läge, 5G-stöd när den lanseras globalt i höst
• Microsofts futuristiska HoloLens 2-headset levereras nu, från 3 500 $
• Microsofts nya HoloLens hologramteknik kan göra språköversättning