Apples Augmented-Reality-Plattform ARKit ist das Killer-Feature von iOS 11

Apples Arkit soll Augmented Reality dem Massen-Apple-Auto näher bringen
Einige der größten Technologieunternehmen – um nur einige zu nennen – Apple, Google und Microsoft – scheinen sicher zu sein, dass Augmented Reality (AR) Smartphones auf die nächste Stufe heben wird. Bisher ist alles nur Gerede, aber das könnte sich noch in diesem Jahr ändern. Apple bereitet sich auf die Entfesselung vor ARKit, ein brandneues Framework zum Erstellen dieser Art von Inhalten.

AR hat für Apple schon seit einiger Zeit Priorität. Das Unternehmen hat viel Zeit und Mühe investiert Personal einstellen und die Übernahme von Startups, um sicherzustellen, dass das Unternehmen über alle benötigten Talente verfügt, sobald die Technologie ausgereift genug für die breite Masse ist. Jetzt stehen wir kurz vor Apples AR-Coming-out-Party: der Veröffentlichung von iOS 11.

Um die Auswirkungen von ARKit zu verstehen, haben wir mit einem Entwickler gesprochen, der an Augmented-Reality-Technologie gearbeitet hat fast ein Jahrzehnt und hat bereits einige Zeit damit verbracht, Apples Entwickler-Kit auf Herz und Nieren zu testen.

Verwandt

  • 17 versteckte iOS 17-Funktionen, die Sie kennen müssen
  • Besitzen Sie ein iPhone, iPad oder eine Apple Watch? Sie müssen es sofort aktualisieren
  • 11 Funktionen in iOS 17, die ich kaum erwarten kann, auf meinem iPhone zu nutzen

Das Erdgeschoss von AR

Jan-Hein Pullens und sein Team produzieren AR-Inhalte für Kunden aus der Einrichtungs- und Immobilienbranche Industrien – und die Nachfrage nach ihrer Arbeit könnte in die Höhe schnellen, wenn Apple versucht, die Technologie auf den Markt zu bringen Massen.

Heutzutage gibt es ausreichend Hardware und Infrastruktur, um Benutzern die Ausführung hochwertiger AR-Inhalte zu ermöglichen.

Als Pullens und Pieter Aarts jedoch gründeten RoOomy Im Jahr 2009 war die technologische Landschaft noch ganz anders. Es sollte noch drei Jahre dauern, bis die Oculus Rift Kickstarter-Kampagne die virtuelle Realität überhaupt ins öffentliche Bewusstsein brachte. Google Glass, eines der ersten hochkarätigen AR-Projekte, das gestartet wurde, sollte erst Mitte 2011 erfolgreich prototypisiert werden.

Pullens und Aarts waren zunächst begeistert von der Aussicht, den Menschen mithilfe von AR die Möglichkeit zu geben, zu sehen, wie große Möbelstücke in ihrem eigenen Zuhause aussehen könnten. Allerdings war die Hardware zum Ausführen dieser Art von Software einfach nicht für die Öffentlichkeit verfügbar.

„Vor acht Jahren gab es zum Beispiel noch kein iPad“, sagte Pullens, als er letzten Monat mit Digital Trends telefonierte. „Die Leute hatten Desktops und Telefone.“

Desktop-PCs sind nicht ideal für AR-Inhalte, da man sie nicht bewegen kann, um verschiedene Blickwinkel zu betrachten. Und damals ging es den Smartphones nicht viel besser. Sie hatten einfach nicht die Leistung (oder die Sensoren), die nötig waren, um AR-Software zu präsentieren.

1 von 2

AR-Möbeldemonstration von roOmy
AR-Möbeldemonstration von roOmy

Unabhängig davon, ob Sie jemandem ein Luxussofa oder ein Luxusapartment verkaufen möchten, ist es entscheidend, dass Ihre virtuelle Visualisierung die Stärken des Produkts ausspielt. „Es muss sehr realistisch sein, sonst sieht es wie eine Spielerei aus“, erklärte er.

Heutzutage gibt es für einige Telefonbesitzer ausreichend Hardware und Infrastruktur, um hochwertige AR-Inhalte anzuzeigen. Google Tango ist derzeit die etablierteste Plattform der Szene. Leider ist es nur mit zwei Smartphones kompatibel – dem Lenovo Phab 2 Pro und das Asus Zenfone AR. Kennen Sie jemanden, der diese Telefone besitzt? Tun wir auch nicht. Aber als das iPhone in den Kampf eintrat, war plötzlich ein riesiger Teil davon Smartphone Benutzer werden AR-fähig sein.

Apple öffnet die Tore

ARKit wird von iOS-Geräten unterstützt, die die Apple A9- oder A10-Prozessoren verwenden – das iPad 2017, das iPhone 6S, und weiter. Zugegebenermaßen führt dies dazu, dass Millionen von Benutzern mit älterer Hardware nicht auf AR-Inhalte zugreifen können, die mit dem erstellt wurden Plattform, aber es stellt die Nutzerbasis für Google Tango, Microsoft HoloLens und jede andere AR-Plattform absolut in den Schatten.

Anspruchsvolle AR-Funktionalität erfordert spezielle Sensoren, wie zum Beispiel eine Tiefenerkennungskamera.

Es gibt noch eine weitere Komplikation. Einige der anspruchsvollsten AR-Funktionen erfordern spezielle Sensoren, wie z Tiefenerkennungskamera. Es ist wahr, dass die iPhone 7 Plus verfügt über einige Tiefenerkennungsfunktionen, bei denen zwei synchron arbeitende Linsen zur Messung der relativen Entfernung verwendet werden. Im größeren Rahmen der AR-Technologie handelt es sich jedoch um eine relativ primitive Lösung.

Im Februar 2017 gab es Gerüchte, dass das nächste iPhone einen Infrarotsensor enthalten würde, ähnlich dem, der im Kinect-Zubehör von Microsoft für die Xbox 360 verwendet wird, wie von berichtet Der Rand. Diese Art von Sensor würde viel detailliertere Informationen über die relative Position eines Objekts zum Gerät liefern als die derzeitige Konfiguration mit zwei Linsen. Es gibt auch Gerüchte, dass Apple im Rahmen seiner iPhone-Aktualisierung 2017 eine Komponente einführen wird, die diesem Zweck dient (lesen Sie die neueste Version). Gerüchte über das iPhone 8), aber es gibt noch nichts offizielles.

Diese neuen Geräte werden als Basis für künftige AR-Entwickler gelten, insbesondere aufgrund der Vorteile, die mit Tiefenerkennungskameras verbunden sind. Allerdings trägt die Kombination aus ARKit und aktueller Hardware bereits Früchte. Pullens und sein Team haben einige Zeit mit einer frühen Version des Entwicklungskits verbracht und ihnen gefällt, was sie gesehen haben.

„Die ersten Erkenntnisse, die wir mit Apple ARKit haben, sind vielversprechend, sie sind tatsächlich sehr vielversprechend“, sagte Pullens. Er lobte die Art und Weise, wie die Plattform mit Okklusion umgeht, und ihre Fähigkeit, zu verhindern, dass virtuelle Objekte einander stören.

Geräumiges Schlafzimmer AR-Möbel
AR-Schlafzimmerdemonstration von roOmy

Für Pullens ist der beeindruckendste Aspekt von ARKit seine Stabilität. Virtuelle Objekte können oft „driften“, wenn sie nicht richtig an ihrer realen Welt ausgerichtet sind Umgebung, was für die Art der Visualisierungen, an denen er und sein Team arbeiten, ein großes Problem darstellen kann RoOomy-Produkte.

„Was ich mit Driften meine, ist zum Beispiel ein Stuhl in einer AR-Ansicht“, sagte er. „Sie möchten, dass der Stuhl sehr stabil ist – Sie möchten nicht, dass er driftet oder zittert. Daher sind die ersten Erkenntnisse, die wir mit Apple haben, sehr vielversprechend, da es recht stabil ist.“

Ein virtueller Ledersessel hilft nicht viel, wenn er unbedingt zur Decke schwebt oder wackelt, als ob eine Katze unter dem Kissen wäre.

Pullen lobte zwar viel, sprach aber auch einige Bereiche an, in denen Apple Verbesserungen vornehmen könnte. Er bemerkte, dass die Art und Weise, wie ARKit Licht- und Schattenkarten rendert, in Ordnung sei, fügte aber hinzu, dass er erwartet, dass sie noch besser wird, sobald die Plattform zur Veröffentlichung bereit ist. Er deutete auch an, dass er sich vorstellen kann, dass die Oberflächenerkennungsfähigkeiten mit einem erheblich verbessert werden verbesserte Tiefenerkennungskamera – es wäre also ideal, wenn die Gerüchte über eine Infrarotkamera auf dem iPhone 8 sich als wahr erweisen.

ARKit macht alles einfacher

AR-Entwickler sind von ARKit begeistert, da es die Technologie einem viel breiteren Publikum zugänglich machen soll. Apple scheint schwer in AR investiertDaher können wir davon ausgehen, dass diese Art von Inhalten für das iPhone und iPad Priorität haben wird. Dies ist ein attraktives Angebot für die Menschen, die AR-Erlebnisse schaffen.

Wir können davon ausgehen, dass diese Art von Inhalten für das iPhone und iPad Priorität haben wird.

Doch ein größeres Publikum ist nicht der einzige Vorteil des Entwicklungskits von Apple. ARKit zielt außerdem darauf ab, einen Großteil der mühsamen Arbeit bei der Erstellung von Software abzunehmen, sodass sich Entwickler darauf konzentrieren können, wie sie die Funktionalität nutzen können, um neue und ansprechende Erlebnisse bereitzustellen.

„Es hilft Entwicklern wie uns, neue Funktionen bereitzustellen und die AR-Technologie sinnvoll zu nutzen“, sagte Pullens. „Sonst muss man alles selbst bauen.“

Beispielsweise benötigt jede AR-App eine Oberflächenerkennung, die es einem virtuellen Objekt ermöglicht, auf einem Tisch oder dem Boden zu sitzen. Früher haben Entwickler möglicherweise Monate damit verbracht, ihre eigenen Oberflächenerkennungsalgorithmen zu entwickeln, oder sie haben sich mit mittelmäßiger Middleware begnügt, die von einem anderen Unternehmen bereitgestellt wurde. Mit ARKit haben sie Zugriff auf eine hochentwickelte Lösung, die bereits auf iOS zugeschnitten ist.

„In diesem Kit erhalten Sie viele Funktionen bereits kostenlos“, fügte Pullens hinzu und verwies auf Funktionen wie Okklusion sowie Licht- und Schattenkarten. „Dies wird der Entwicklergemeinschaft einen großen Schub geben, damit neue AR-Lösungen auf den Markt kommen.“

Die ersten ARKit-Kreationen sind bereits beeindruckend

Entwickler, die an einer Vorschau von ARKit interessiert sind, können diese durch Herunterladen erhalten Betaversion von Xcode 9, das das iOS 11 SDK enthält. Es führt bereits zu neuen Ideen. AR- und VR-Feed MixedRealityDesign hat eine Website mit dem Namen eingerichtet Hergestellt mit ARKit, das eine Auswahl der allerbesten Projekte kuratiert.

Das etwas Gruselige „Ein Roboter tanzt in meinem Wohnzimmer“ demonstriert die überlegene Stabilität, von der Pullens sprach. Ein Android führt einige fließende Tanzbewegungen vor einem Sofa aus und obwohl sich die Kamera bewegt, sieht die Szene unglaublich natürlich aus. Besonders beeindruckend ist der Schatten, den der Roboter auf den Boden wirft.

„Interdimensionales Portal“ platziert ein Fenster zu einer anderen Welt mitten auf einer Stadtstraße. Die zur Darstellung dieses virtuellen Raums verwendeten Grafiken sind nicht sehr raffiniert, aber der Gesamteffekt ist beeindruckend, insbesondere wenn der Benutzer durch das Portal geht. Es ist leicht vorstellbar, wie diese Art von Idee in einem ortsbasierten Spiel im Sinne von verwendet werden könnte Pokémon Go.

Auch wenn diese beiden Beispiele Spaß machen, „ARKit wird die Art und Weise verändern, wie wir Essen bestellen“ ist viel praktischer. Anstatt flache Bilder auf einer Papierkarte anzusehen, erstellt eine App 3D-Visualisierungen der Auswahl direkt auf dem Tisch. Eine weitere praktische Umsetzung ist die „Demo der AR-Measure-App“ das ein virtuelles Maßband bietet.

Diese Projekte haben Ecken und Kanten, die von umständlichen Benutzeroberflächen bis hin zu hässlichen Assets reichen. Es ist wichtig zu bedenken, dass es sich hierbei um frühe Konzepte handelt, die mit Tools erstellt wurden, die bereits seit einigen Wochen verfügbar sind. Dennoch bietet ARKit eine solide Grundlage, die die Verwirklichung einiger faszinierender Ideen ermöglicht.

Apple hat sich in üblicher Weise Zeit genommen, AR richtig hinzubekommen, anstatt der Erste zu sein. Die ersten Ergebnisse deuten darauf hin, dass Google Tango und andere Anbieter einen Schritt weiter sind. Der nächste Schritt wird darin bestehen, fortschrittliche AR-freundliche Hardware in die Hände einer breiten Palette von Benutzern zu geben, und das wird voraussichtlich geschehen, wenn das nächste iPhone angekündigt wird.

Empfehlungen der Redaktion

  • Diese versteckte Apple Watch-Funktion ist besser, als ich es mir hätte vorstellen können
  • Ich hoffe, dass Apple diese Vision Pro-Funktion auf das iPhone bringt
  • Die 6 größten iOS 17-Funktionen, die Apple von Android geklaut hat
  • Apple hat endlich mein größtes Problem mit dem iPhone 14 Pro Max behoben
  • iOS 17: Apple hat die eine Funktion, auf die ich gewartet habe, nicht hinzugefügt