Praktyczne doświadczenie z Microsoft Mesh: współpraca w rzeczywistości mieszanej

Jest tam fantastyczna scena Kingsman: Złoty krągw którym Eggsy i inni przywódcy tajnej agencji szpiegowskiej (oczywiście Channing Tatum) zbierają się wokół stołu w sali konferencyjnej – tyle że tak naprawdę ich tam nie ma. Każdy z nich jest hologramem, dzięki niesamowitej technologii ukrytej w parze zwyczajnie wyglądających okularów.

To powszechny trop w kinie, z którego korzystali także James Bond i Ethan Hunt. A przy dzisiejszej technologii rzeczywistości rozszerzonej po prostu nie jest to możliwe.

nie było możliwe, mam na myśli.

Dzisiaj o Microsoft Ignite konferencja programistów, innowator technologii zaprezentował Microsoft Mesh, platforma obejmująca wiele technologii, która umożliwia twórcom aplikacji tworzenie trwałych środowisk wirtualnych do współpracy, komunikacji i nie tylko.

Mesh popycha scenę konferencyjną jeszcze dalej, umożliwiając ludziom z całego świata udział hologramy. Tak, możesz podrzucić wirtualny klucz innej osobie. Brzmi to głupio, ale otwiera nowe, ogromne światy dzięki obliczeniom tak złożonym, że trudno je pojąć.

Zabawa z hologramami

Aby zapoznać się z nową technologią, Microsoft wysłał mi skrzynkę z bardzo fantazyjnym HP Omenem laptop do gier, A Zestaw słuchawkowy Hololens 2oraz zestaw słuchawkowy do rzeczywistości mieszanej firmy HP o nazwie Pogłos G2. Te dwa ostatnie urządzenia tworzą dwa bardzo różne środowiska wirtualne. Hololens to przede wszystkim urządzenie wykorzystujące rzeczywistość rozszerzoną; jest to zasadniczo opaska na głowę z przezroczystym wizjerem, podobna do tych, które pamiętasz z zajęć w sklepie, na którą urządzenie może przesyłać obrazy. Twoje oczy łączą świat przed tobą i wirtualne obrazy w jedną nową rzeczywistość, lepszą niż zwykły świat, w którym żyjesz.

Zestaw słuchawkowy do rzeczywistości mieszanej jest urządzenie wirtualnej rzeczywistości, mający na celu całkowite przeniesienie Cię do nowego świata. Microsoft Mesh działa w obu przypadkach, także na komputerach stacjonarnych (PC i Mac), a wkrótce także i dalej Android i iPhone’ów – twierdzi Microsoft.

Aby to przetestować, założyłem Hololens 2 i odpaliłem. Zestaw słuchawkowy tworzy szczegółową mapę otoczenia, w tym dłoni — nie ma potrzeby stosowania kontrolerów. Uruchamiasz aplikacje i dostosowujesz ustawienia za pomocą menu, do którego dostęp można uzyskać, naciskając pływającą ikonę systemu Windows umieszczoną na nadgarstku.

Uruchomiłem aplikację testową (o nazwie Fenix, gdy była jeszcze w wersji beta) i spotkałem pływającego awatara Grega Sullivana, dyrektora ds. rzeczywistość mieszana w Microsoft, wokół połyskującej powierzchni roboczej, którą mogliśmy indywidualnie umieszczać i zmieniać rozmiar w naszym fizycznym środowisku środowisko. Wsunęłam wirtualny stół pomiędzy moje prawdziwe łóżko a drzwi, przytwierdziłam go do podłoża i skierowałam swoją uwagę na unoszące się nad nim meduzy, ziemię i rekina wielorybiego.

Hololens jest wyjątkowo intuicyjny; chwytasz rękami dowolne hologramy, ściskając je lub po prostu chwytając je jak fruwającą piłkę, i obracasz, powiększasz lub zmniejszasz je dokładnie tak, jak tego oczekujesz. I rzeczywiście, Sullivan i ja mogliśmy przekazywać hologramy tam i z powrotem. Podniosłem rekina, który groźnie zakręcił ogonem, i rozwinąłem go, żeby lepiej przyjrzeć się jego blademu spodowi. Podałem go przez stół innemu reporterowi, który chwycił go i ułożył na meduzie.

Zabawa z hologramami! Napotkałem tylko jeden problem: mam tendencję do zamykania rąk, kiedy opuszczam ramiona na boki i przez przypadek chwytam hologramy. Aplikacja również uległa awarii raz lub dwa razy, ale to tylko technologiczny dowód koncepcji, bardziej niż cokolwiek innego. Rozważ sprawdzoną koncepcję.

Jasne, nie mogliśmy uderzyć się pięścią, żeby uratować nam życie – do cholery, w końcu byliśmy tylko awatarami – ale to była współpraca z innego wymiaru.

„To jest jak metaświat” – powiedział mi Sullivan. „Kiedy ktoś, kogo nie ma z tobą w pokoju, wręcza ci hologram, jest to naprawdę potężne przeżycie”.

Nowa platforma w przygotowaniu

Doświadczyłem Meshu poprzez aplikację Fenix, ale Microsoft myśli o niej jak o platformie i twierdzi, że wyda pakiety SDK aby umożliwić każdemu programiście dodanie tej możliwości do swoich aplikacji — stąd ogłoszenie u dewelopera Ignite konferencja.

Wstępne demo celowo naśladuje recenzję projektu. Sullivan powiedział, że to naturalna szansa na tego typu współpracę, a za każdym razem, gdy uda się uniknąć konieczności wysyłania kogoś do fabryki w celu sprawdzenia prototypowego produktu, firma zaoszczędzi pieniądze. Inne potencjalne zastosowania, w tym zdalne wsparcie i szkolenia, produkcja i nie tylko.

Architekci i inżynierowie mogli fizycznie przejść przez holograficzny model hali produkcyjnej konstrukcji, sprawdzając, jak wszystkie elementy wyposażenia pasują do siebie w trzech wymiarach, potencjalnie unikając kosztowne błędy. Studenci inżynierii lub medycyny, którzy uczą się o silnikach samochodów elektrycznych lub anatomii człowieka, mogą gromadzić się jako awatary wokół holograficznego modelu i usuń części silnika lub odsuń mięśnie, aby zobaczyć, co się dzieje pod.

Microsoft zobowiązał się także do wypuszczenia w najbliższej przyszłości wersji swoich aplikacji opartych na technologii Mesh, choć frustrująco brakowało harmonogramu. W końcu środowisko Teams oparte na technologii Mesh wydaje się oczywiste i firma już to zrobiła biblioteki obiektów 3D wbudowane w oprogramowanie, w tym w pakiet Office.

Zalecenia redaktorów

• Okazuje się, że HoloLens 3 firmy Microsoft może jednak nie być martwy
• Microsoft i Samsung mogą połączyć siły w zakresie nowego zestawu słuchawkowego AR
• HoloLens 2 będzie miał tryb ciemny i obsługę 5G, gdy zostanie wprowadzony na rynek na całym świecie jesienią tego roku
• Futurystyczny zestaw słuchawkowy HoloLens 2 firmy Microsoft jest już dostępny w cenach zaczynających się od 3500 dolarów
• Nowa technologia hologramów HoloLens firmy Microsoft umożliwia tłumaczenie językowe