Platforma rzeczywistości rozszerzonej ARKit firmy Apple to zabójcza funkcja w iOS 11

Niektóre z największych firm technologicznych – między innymi Apple, Google i Microsoft – wydają się być pewne, że rzeczywistość rozszerzona (AR) przeniesie smartfony na wyższy poziom. Na razie o tym tylko mówiono, ale może się to zmienić przed końcem tego roku. Apple przygotowuje się do uwolnienia ARKit, zupełnie nowe ramy do tworzenia tego rodzaju treści.

AR od jakiegoś czasu jest dla Apple priorytetem. Firma włożyła w to mnóstwo czasu i wysiłku zatrudnianie personelu oraz przejmowanie start-upów, aby zapewnić sobie cały potrzebny talent, gdy technologia będzie wystarczająco dojrzała dla mas. Teraz jesteśmy o krok od imprezy promującej AR firmy Apple: premiery iOS 11.

Aby zrozumieć implikacje ARKit, rozmawialiśmy z programistą, który pracował nad technologią rzeczywistości rozszerzonej przez większą część dekady i spędził już trochę czasu na testowaniu zestawu deweloperskiego Apple.

Parter AR

Jan-Hein Pullens i jego zespół tworzą treści AR dla klientów z branży wyposażenia wnętrz i nieruchomości branżach, a popyt na ich pracę może gwałtownie wzrosnąć, gdy Apple będzie próbował wprowadzić tę technologię do odbiorców szerokie rzesze.

Jednak kiedy założyli Pullens i Pieter Aarts Pokój w 2009 roku krajobraz technologiczny był zupełnie inny. Minęły jeszcze trzy lata, zanim kampania Oculus Rift na Kickstarterze w ogóle wprowadziła wirtualną rzeczywistość do świadomości publicznej. Google Glass, jeden z pierwszych głośnych projektów AR, który się rozpoczął, został pomyślnie prototypowany dopiero w połowie 2011 roku.

Pullens i Aarts byli początkowo podekscytowani perspektywą umożliwienia ludziom sprawdzenia, jak duże meble mogą wyglądać we własnym domu za pomocą AR. Jednak sprzęt do uruchamiania tego rodzaju oprogramowania po prostu nie był dostępny publicznie.

„Na przykład osiem lat temu nie było iPada” – powiedział Pullens podczas rozmowy telefonicznej z Digital Trends w zeszłym miesiącu. „Ludzie mieli komputery stacjonarne i telefony”.

Komputery stacjonarne nie są idealne do treści AR, ponieważ nie można ich przesuwać, aby oglądać pod różnymi kątami. A wtedy smartfony nie były dużo lepsze. Po prostu nie mieli mocy (ani czujników) potrzebnej do zaprezentowania oprogramowania AR.

Niezależnie od tego, czy próbujesz sprzedać komuś luksusową sofę, czy luksusowy apartament, ważne jest, aby Twoja wirtualna wizualizacja odzwierciedlała mocne strony produktu. „Musi być bardzo realistyczny, w przeciwnym razie będzie wyglądać śmiesznie i przypomina grę” – wyjaśnił.

Obecnie niektórzy właściciele telefonów mają wystarczającą ilość sprzętu i infrastruktury, aby móc wyświetlać wysokiej jakości treści AR. Google Tango to obecnie najbardziej ugruntowana platforma na scenie. Niestety jest kompatybilny tylko z dwoma smartfonami – Lenovo Phab2 Pro i Asus Zenfone AR. Czy znasz kogoś, kto jest właścicielem tych telefonów? My też nie. Ale kiedy iPhone wszedł do walki, nagle ogromna część smartfon użytkownicy będą mogli korzystać z AR.

Apple otwiera bramy

ARKit będzie obsługiwany przez urządzenia iOS korzystające z procesorów Apple A9 lub A10 – iPad 2017, iPhone'a 6Si dalej. Trzeba przyznać, że powoduje to, że miliony użytkowników ze starszym sprzętem nie mogą uzyskać dostępu do treści AR utworzonych przy użyciu platformę, ale całkowicie przyćmiewa bazę użytkowników Google Tango, Microsoft HoloLens i każdej innej platformy AR.

Jest jeszcze jedna komplikacja. Niektóre z najbardziej wyrafinowanych funkcji AR wymagają wyspecjalizowanych czujników, np aparat wykrywający głębokość. Prawdą jest, że iPhone'a 7 Plus ma pewne możliwości wykrywania głębi, wykorzystując dwie zsynchronizowane soczewki do pomiaru względnej odległości. Jednak w większym schemacie technologii AR jest to stosunkowo prymitywne rozwiązanie.

W lutym 2017 roku pojawiły się pogłoski, że następny iPhone będzie wyposażony w czujnik podczerwieni podobny do tego, który jest używany w akcesorium Microsoft Kinect do konsoli Xbox 360, jak donosi portal Krawędź. Ten rodzaj czujnika zapewniłby znacznie bardziej szczegółowe informacje na temat względnego położenia obiektu względem urządzenia niż obecna konfiguracja z dwoma obiektywami. Krążą także pogłoski, że Apple wprowadzi jakiś komponent służący do tego celu w ramach odświeżenia iPhone'a w 2017 roku (przeczytaj najnowsze Plotki na temat iPhone'a 8), ale nie ma jeszcze nic oficjalnego.

Te nowe urządzenia będą uważane za punkt odniesienia dla przyszłych twórców AR, szczególnie ze względu na zalety związane z kamerami wykrywającymi głębokość. Jednak połączenie ARKit i obecnego sprzętu już przynosi owoce. Pullens i jego zespół spędzili trochę czasu z wczesną wersją zestawu deweloperskiego i podobało im się to, co zobaczyli.

„Pierwsze ustalenia, jakie uzyskaliśmy dzięki Apple ARKit, są obiecujące, w rzeczywistości są bardzo obiecujące” – powiedział Pullens. Pochwalił sposób, w jaki platforma radzi sobie z okluzją i zdolność zapobiegania wzajemnemu zakłócaniu się obiektów wirtualnych.

Dla Pullensa najbardziej imponującym aspektem ARKit jest jego stabilność. Wirtualne obiekty często mogą „dryfować”, jeśli nie są odpowiednio dopasowane do ich rzeczywistego świata otoczenia, co może stanowić duży problem dla typu wizualizacji, przy których on i jego zespół pracują RoOomy produkt.

„Przez driftowanie rozumiem na przykład krzesło w widoku AR” – powiedział. „Chciałbyś, żeby to krzesło było bardzo stabilne – nie chciałbyś, żeby się przesuwało lub drżało. Zatem pierwsze ustalenia, które poczyniliśmy w przypadku Apple, są bardzo obiecujące, ponieważ system jest dość stabilny”.

Wirtualne skórzane krzesło nie jest zbyt pomocne, jeśli upiera się, że unosi się w stronę sufitu lub chwieje się, jakby pod poduszką siedział kot.

Chociaż Pullen wyraził wiele pochwał, wspomniał także o obszarach, w których Apple może wprowadzić ulepszenia. Zauważył, że sposób, w jaki ARKit renderuje mapy światła i cienia, jest w porządku, ale dodał, że spodziewa się, że będzie jeszcze lepiej, gdy platforma będzie gotowa do wydania. Zasugerował również, że jego możliwości wykrywania powierzchni zostaną znacząco udoskonalone dzięki technologii ulepszony aparat wykrywający głębokość – więc idealnie byłoby, gdyby pogłoski o kamerze na podczerwień w iPhonie 8 okazać się prawdą.

ARKit sprawia, że ​​wszystko staje się łatwiejsze

Twórcy AR są podekscytowani ARKitem, ponieważ powinien udostępnić tę technologię znacznie szerszemu gronu odbiorców. Apple wydaje się mocno zainwestował w AR, więc możemy się spodziewać, że tego rodzaju treści będą priorytetem dla iPhone'a i iPada. To atrakcyjna propozycja dla osób tworzących doświadczenia AR.

Jednak większa publiczność to nie jedyna zaleta zestawu deweloperskiego Apple. ARKit ma również na celu odciążenie tworzenia oprogramowania, pozwalając programistom skoncentrować się na tym, w jaki sposób mogą wykorzystać tę funkcjonalność, aby zapewnić nowe i wciągające doświadczenia.

„Pomaga programistom takim jak my udostępniać nowe funkcje i dobrze wykorzystywać technologię AR” – powiedział Pullens. „W przeciwnym razie trzeba będzie wszystko zbudować samemu”.

Na przykład każda aplikacja AR wymaga wykrywania powierzchni, co pozwala wirtualnemu obiektowi usiąść na stole lub podłodze. Wcześniej programiści mogli spędzać miesiące na tworzeniu własnych algorytmów wykrywania powierzchni lub korzystać z oprogramowania pośredniego dostarczonego przez inną firmę. Dzięki ARKit mają dostęp do wysoce wyrafinowanego rozwiązania, które jest już dostosowane do systemu iOS.

„W tym zestawie wiele funkcji jest już dostępnych za darmo” – dodał Pullens, odnosząc się do takich funkcjonalności, jak okluzja oraz mapy światła i cienia. „To będzie duży impuls dla społeczności programistów, aby pojawiły się nowe rozwiązania AR”.

Wczesne dzieła ARKit już robią wrażenie

Programiści zainteresowani podglądem ARKit mogą go pobrać, pobierając plik wersja beta Xcode 9, który zawiera zestaw SDK dla systemu iOS 11. To już prowadzi do nowych pomysłów. Kanał AR i VR Projekt mieszanej rzeczywistości założyła stronę internetową o nazwie Wykonane w ARKicie, która jest kuratorem wybranych najlepszych projektów.

Nieco przerażające „Robot tańczący w moim salonie” demonstruje wyjątkową stabilność, o której mówił Pullens. Jakiś android wykonuje płynne ruchy taneczne przed sofą i mimo że kamera się porusza, scena wygląda niesamowicie naturalnie. Szczególnie imponujący jest cień, który robot rzuca na podłogę.

„Portal międzywymiarowy” umieszcza okno do innego świata na środku ulicy miasta. Grafika użyta do renderowania tej wirtualnej przestrzeni nie jest zbyt wyrafinowana, ale ogólny efekt jest porywający, szczególnie gdy użytkownik przejdzie przez portal. Łatwo jest zobaczyć, jak tego rodzaju pomysł można wykorzystać w grze opartej na lokalizacji, na wzór Pokemon Go.

Chociaż te dwa przykłady są zabawne, „ARKit zmieni sposób zamawiania jedzenia” jest o wiele bardziej praktyczny. Zamiast oglądać płaskie obrazy na papierowym menu, aplikacja tworzy wizualizacje 3D wyborów bezpośrednio na stole. Inną praktyczną implementacją jest „Demo aplikacji AR Measure” który oferuje wirtualną miarkę.

Projekty te mają ostre krawędzie, od niewygodnych interfejsów użytkownika po brzydkie zasoby. Należy pamiętać, że są to wczesne koncepcje tworzone przy użyciu narzędzi dostępnych od kilku tygodni. Mimo to ARKit zapewnia solidną podstawę, która pozwala na urzeczywistnienie kilku intrygujących pomysłów.

Apple, jak to zwykle bywa, poświęciło trochę czasu na dopracowanie AR, zamiast być pierwszym. Pierwsza fala wyników sugeruje, że jest to krok dalej niż Google Tango i inne podobne rozwiązania. Następnym krokiem będzie udostępnienie zaawansowanego sprzętu przyjaznego AR szerokiemu gronu użytkowników i wszystko wskazuje na to, że stanie się to po ogłoszeniu kolejnego iPhone’a.

Zalecenia redaktorów

• Ta ukryta funkcja Apple Watch jest lepsza, niż mogłem sobie wyobrazić
• Mam nadzieję, że Apple wprowadzi tę funkcję Vision Pro do iPhone'a
• 6 największych funkcji iOS 17, które Apple ukradł Androidowi
• Apple w końcu naprawiło mój największy problem z iPhonem 14 Pro Max
• iOS 17: Apple nie dodał jednej funkcji, na którą czekałem