Платформа доповненої реальності Apple ARKit — це вбивча функція iOS 11

Деякі з найбільших технологічних компаній — Apple, Google і Microsoft, зокрема, — впевнені, що доповнена реальність (AR) виведе смартфони на новий рівень. Поки що про це говорили, але це може змінитися до кінця цього року. Apple готується до виходу на волю ARKit, абсолютно нова основа для створення такого вмісту.

Доповнена реальність була пріоритетом для Apple протягом деякого часу. Компанія витратила багато часу та зусиль наймання персоналу і придбання стартапів, щоб переконатися, що вони мають усі необхідні таланти, коли технологія стане достатньо зрілою для мас. Зараз ми стоїмо на порозі випуску Apple AR: випуску iOS 11.

Щоб зрозуміти наслідки ARKit, ми поговорили з розробником, який працював над технологією доповненої реальності для більшу частину десятиліття, і вже витратив деякий час на тестування набору розробників Apple.

Перший поверх АР

Ян-Хейн Пулленс і його команда створюють AR-контент для клієнтів у сфері меблів і нерухомості промисловості – і попит на їх роботу може різко зрости, оскільки Apple намагатиметься перенести цю технологію на маси.

Однак, коли Пулленс і Пітер Артс заснували Кімната у 2009 році технологічний ландшафт був зовсім іншим. Минуло ще три роки, перш ніж кампанія Oculus Rift на Kickstarter навіть принесла віртуальну реальність у суспільну свідомість. Google Glass, один із перших гучних проектів доповненої реальності, який розпочався, не буде успішно створено до середини 2011 року.

Пулленс і Артс спочатку були в захваті від перспективи дати людям можливість побачити, як можуть виглядати великі предмети меблів у їхньому будинку за допомогою AR. Однак апаратне забезпечення для запуску такого програмного забезпечення просто не було доступним для громадськості.

«Вісім років тому, наприклад, не було iPad», — сказав Пулленс, коли він говорив по телефону з Digital Trends минулого місяця. «У людей були комп’ютери та телефони».

Настільні комп’ютери не ідеальні для вмісту AR, оскільки ви не можете пересувати їх, щоб побачити різні ракурси. І тоді смартфони були не набагато кращими. Вони просто не мали кінських сил (або датчиків), необхідних для представлення програмного забезпечення AR.

Незалежно від того, чи намагаєтеся ви продати комусь розкішний диван чи розкішну квартиру, надзвичайно важливо, щоб ваша віртуальна візуалізація враховувала сильні сторони продукту. «Це має бути дуже реалістичним, інакше це буде виглядати химерно та схоже на гру», — пояснив він.

Сьогодні у деяких власників телефонів є достатньо апаратного забезпечення та інфраструктури для запуску високоякісного AR-контенту. Google Tango зараз є найбільш усталеною платформою на сцені. На жаль, він сумісний лише з двома смартфонами – з Lenovo Phab 2 Pro та Asus Zenfone AR. Ви знаєте когось, хто володіє цими телефонами? Ми також. Але коли iPhone вступив у бій, раптово величезний шматок смартфон користувачі будуть підтримувати AR.

Apple відкриває ворота

ARKit підтримуватиметься пристроями iOS, які використовують процесори Apple A9 або A10 – iPad 2017 року, iPhone 6S, і далі. Слід визнати, що мільйони користувачів зі старішим обладнанням не можуть отримати доступ до AR-контенту, створеного за допомогою платформи, але вона абсолютно затьмарює базу користувачів Google Tango, Microsoft HoloLens та будь-якої іншої платформи AR.

Є ще одна складність. Деякі з найскладніших функцій доповненої реальності потребують спеціальних датчиків, як-от a камера з датчиком глибини. Це правда, що iPhone 7 Плюс має певні можливості визначення глибини, використовуючи дві синхронізовані лінзи для вимірювання відносної відстані. Однак у грандіозній схемі технології AR це відносно примітивне рішення.

У лютому 2017 року з’явилися чутки про те, що наступний iPhone матиме інфрачервоний датчик, подібний до того, який використовується в аксесуарі Microsoft Kinect для Xbox 360, як повідомляв The Verge. Цей тип датчика надасть набагато більш детальну інформацію про відносне положення об’єкта щодо пристрою, ніж поточна установка з двома лінзами. Ходять також чутки, що Apple представить якийсь компонент, який служить для цієї мети, як частину свого оновлення iPhone 2017 (читайте останню версію Чутки про iPhone 8), але поки що немає нічого офіційного.

Ці нові пристрої будуть вважатися базовими для розробників доповненої реальності, які просуваються вперед, зокрема через переваги, пов’язані з камерами для визначення глибини. Однак поєднання ARKit і поточного обладнання вже дає свої плоди. Пулленс і його команда провели деякий час із ранньою версією набору для розробки, і їм подобається те, що вони побачили.

«Перші висновки, які ми отримали з Apple ARKit, є багатообіцяючими, вони насправді дуже багатообіцяючі», — сказав Пулленс. Він високо оцінив те, як платформа справляється з оклюзією, і її здатність запобігати взаємодії віртуальних об’єктів один з одним.

Для Пулленса найбільш вражаючим аспектом ARKit є його стабільність. Віртуальні об’єкти часто можуть «дрейфувати», якщо вони належним чином не узгоджуються з реальним світом оточення, що може бути великою проблемою для типу візуалізацій, якими займається він та його команда Просторий продукт.

«Під дрейфом я маю на увазі, наприклад, стілець у режимі AR», — сказав він. «Ти хотів би, щоб це крісло було дуже стійким – ти б не хотів, щоб воно дрейфувало чи тремтіло. Отже, перші висновки, які ми маємо з Apple, дуже багатообіцяючі, оскільки вони досить стабільні».

Віртуальне шкіряне крісло не дуже допоможе, якщо воно наполегливо пливе до стелі або хитається, наче під подушкою сидить кіт.

Незважаючи на те, що Пуллен отримав багато похвали, він також підняв деякі аспекти, де Apple може внести покращення. Він зазначив, що те, як ARKit відображає карти світла та тіні, є нормальним, але додав, що він очікує, що це буде ще краще, коли платформа буде готова до випуску. Він також припустив, що може побачити, як його можливості виявлення поверхні значно вдосконалюються за допомогою покращена камера з датчиком глибини – тому було б ідеально, якщо чутки про інфрачервону камеру на iPhone 8 довести правду.

ARKit робить усе простіше

Розробники AR в захваті від ARKit, оскільки він має відкрити технологію для набагато ширшої аудиторії. Apple здається важким інвестовано в AR, тож ми можемо очікувати, що такий контент буде пріоритетним для iPhone та iPad. Це приваблива пропозиція для людей, які створюють досвід AR.

Проте більша аудиторія — не єдина перевага комплекту розробки Apple. ARKit також має на меті усунути велику кількість напруженої роботи зі створення програмного забезпечення, дозволяючи розробникам зосередитися на тому, як вони можуть використовувати функціональні можливості, щоб надавати нові та привабливі враження.

«Це допомагає таким розробникам, як ми, надавати нові функції та ефективно використовувати технологію AR», — сказав Пулленс. «Інакше доведеться все будувати самому».

Наприклад, кожна програма AR потребує виявлення поверхні, яка дозволяє віртуальному об’єкту сидіти на столі чи підлозі. Раніше розробники могли витрачати місяці на створення власних алгоритмів виявлення поверхні або обходитися таким собі проміжним програмним забезпеченням, наданим іншою компанією. Завдяки ARKit вони мають доступ до надзвичайно складного рішення, яке вже адаптовано для iOS.

«У цьому комплекті ви вже отримуєте багато функцій безкоштовно», — додав Пулленс, маючи на увазі такі функції, як оклюзія та карти світла й тіні. «Це дасть великий поштовх для спільноти розробників для появи нових рішень AR».

Ранні творіння ARKit вже вражають

Розробники, які зацікавлені в попередньому перегляді ARKit, можуть отримати його, завантаживши файл бета-версія Xcode 9, який включає пакет SDK для iOS 11. Це вже веде до нових ідей. Стрічка AR і VR MixedRealityDesign створив дубльований веб-сайт Зроблено за допомогою ARKit, який курує добірку найкращих проектів.

Трохи моторошно «Робот танцює в моїй вітальні» демонструє чудову стабільність, про яку говорив Пулленс. Ан android виконує кілька плавних танцювальних рухів перед диваном, і, незважаючи на рух камери, сцена виглядає неймовірно природно. Особливо вражає тінь, яку робот відкидає на підлогу.

«Міжвимірний портал» розміщує вікно в інший світ посеред міської вулиці. Графіка, яка використовується для візуалізації цього віртуального простору, не надто витончена, але загальний ефект захоплює, особливо коли користувач проходить через портал. Легко зрозуміти, як таку ідею можна використати в грі на основі визначення місця розташування Pokemon Go.

Хоча ці два приклади веселі, «ARKit змінить спосіб замовлення їжі» набагато практичніше. Замість того, щоб дивитися на плоскі зображення на паперовому меню, програма створює тривимірні візуалізації вибору прямо на столі. Ще одна практична реалізація «Демонстрація програми вимірювання AR» який пропонує віртуальну рулетку.

Ці проекти мають гостроти, починаючи від незручного інтерфейсу користувача і закінчуючи потворними ресурсами. Важливо пам’ятати, що це ранні концепції, створені за допомогою інструментів, які були доступні протягом кількох тижнів. Тим не менш, ARKit забезпечує міцну основу, яка дозволяє втілити деякі інтригуючі ідеї в життя.

Замість того, щоб бути першою, Apple, як зазвичай, знадобилася час, щоб правильно налагодити AR. Перша хвиля результатів свідчить про те, що Google Tango та інші аналоги стали кроком вперед. Наступним кроком стане розширене обладнання, зручне для доповненої реальності, у руки широкого кола користувачів, і, схоже, це станеться, коли буде оголошено наступний iPhone.

Рекомендації редакції

• Ця прихована функція Apple Watch краща, ніж я міг собі уявити
• Я сподіваюся, що Apple принесе цю функцію Vision Pro на iPhone
• 6 найбільших функцій iOS 17, які Apple вкрала в Android
• Apple нарешті вирішила мою найбільшу проблему з iPhone 14 Pro Max
• iOS 17: Apple не додала єдину функцію, на яку я чекав