Ik hoop dat Apple deze Vision Pro-functie naar de iPhone brengt

Digitaal vervaardigde alternatieve realiteiten kunnen opwindend of ongemakkelijk zijn, afhankelijk van hoe u ze zich voorstelt. Maar Apple, naast andere bedrijven die hebben geïnvesteerd in een AR- en VR-dominante toekomst, wil duidelijk dat je je op de positieve kant concentreert. Daarom heeft Apple er een aanzienlijk deel van de tijd aan besteed WWDC 2023 ontwikkelaarsconferentie om de verschillende kenmerken van de Apple VisionPro — De extravagante nieuwe mixed reality-headset van Apple.

Volgens het zelfverzekerde verhaal van Apple tijdens het evenement, brengt de Vision Pro ons naar een nieuw tijdperk in computers en push buiten de grenzen van vaste beeldschermen. De promotionele walkthroughs overtuigen ons gemakkelijk dat de headset in veel opzichten zowel visueel als functioneel uniek is.

Van het uitbreiden van uw workflow met talloze schermen die zich verspreiden in de omringende ruimte om jezelf onder te dompelen in hyperrealistische natuurgateways, de headset heeft vele fascinerende functies. En we hopen zeker dat enkele van zijn functies hun weg vinden naar andere apparaten, vooral de iPhone.

De nieuwe FaceTime-avatars van Apple zien er fantastisch uit

Er wordt beweerd dat de Vision Pro echte en fantasierijke scenario's naadloos combineert, wat de menselijke geest kan overtuigen om de grenzen tussen de fysieke en virtuele rijken daadwerkelijk te vergeten. Dit wordt bereikt door virtuele elementen die niet zomaar rondzweven in je fysieke ruimte, maar ook je fysieke omgeving versterken. Een van de manieren is door kleine details, zoals schaduwen van die zwevende ramen, over echte objecten in uw omgeving te laten werpen.

Een andere manier waarop Apple niet-gebruikers lijkt te verbazen (maar ook te verwarren) is door virtuele avatars te gebruiken in FaceTime. Met de headset luidt Apple het nieuwe tijdperk van 'ruimtelijke FaceTime' in, waarbij video's van elke deelnemer verschijnen in vensters die de echte omgevingen van de Vision Pro-gebruikers doorkruisen. Maar de mensen aan de andere kant zullen je gezicht niet zien gewikkeld in het hoofddeksel.

De Vision Pro zal in plaats daarvan kunstzinnig realistische - en tegelijkertijd vreemd zenuwslopende - virtuele representaties van de gebruiker creëren. Deze avatars worden weergegeven in plaats van de daadwerkelijke weergave en worden gemaakt met de twee TrueDepth-camera's op de headset. Met name de TrueDepth-camera is een uniek camerasysteem dat oorspronkelijk op de iPhone X is geïntroduceerd. Het bestaat uit een infrarood-schijnwerper, een puntprojector en een infraroodcamera. Alle drie deze systemen combineren om een ​​3D-kaart van het gezicht van de gebruiker te maken die kan worden gebruikt om de iPhone te ontgrendelen met Face ID.

De avatar repliceert je gezichtsuitdrukkingen, oogbewegingen en gebaren om er natuurlijker uit te zien. Dit lost het probleem op van het constant in je hand houden van je iPhone of het kijken naar het scherm van je Mac terwijl je aan staat FaceTime - of verschijnen als de gekke tech-enthousiasteling die graag losgeslagen blijft terwijl hij het nieuwste uitprobeert gadgets.

Voor Apple is dit ook een tastbare manier om meer mensen aan te trekken om aan boord te gaan met zijn ontluikende ideologie van ruimtelijk computergebruik - zo niet om een ​​andere reden dan om de angst om iets te missen (FOMO) te vermijden. Maar naast het overtuigen van bestaande Apple-gebruikers om $ 3.500 uitgeven aan een stukje opkomende technologie, is er een andere manier waarop Apple deze hyperrealistische avatars meer gewoon kan laten lijken - door ze naar de iPhone en iPad te brengen.

Ze mogen niet exclusief zijn voor Vision Pro

Er zijn goede redenen waarom Virtual FaceTime-avatars net zo geschikt zijn voor andere Apple-apparaten als de Vision Pro.

Ten eerste komt het brengen van ruimtelijke FaceTime naar alle apparaten overeen met het door Apple voorgestelde nieuwe tijdperk van 'ruimtelijk computergebruik'. Tot een tastbare toekomst waarin augmented reality andere interacties met computers en computers volledig overneemt speciaal vervangt onze geliefde smartphones, kan Apple van deze gelegenheid gebruik maken om de bekendheid met de technologie te vergroten.

Behalve dat het in lijn is met het elimineren van grenzen tussen de echte en de virtuele wereld, zit het bieden van een ruimtelijke FaceTime-ervaring precies binnen Apple's principes van een ecosysteem, waar alle apparaten - in ieder geval de beste - op dezelfde manier werken en in overeenstemming zijn met elk ander. Gerenommeerd analist Ming Chi Kuo bevestigt ook de noodzaak om harmonie tot stand te brengen tussen de Vision Pro en andere apparaten binnen het Apple-ecosysteem, en noemt dit cruciaal voor het aanvankelijke succes van de headset.

Om een ​​convergerende software-ervaring te stimuleren, zal Apple bovendien werken aan het versterken van de hardware op zijn andere apparaten, met name de iPhone. Uiteraard zal de iPad (althans de Pro-variant) volgen. Dit maakt de iPhone en de iPad Pro waardige kandidaten om ervaringen met de Vision Pro te delen, en een ruimtelijke FaceTime-ervaring staat bovenaan de lijst van onze verwachtingen.

Apple heeft de trucjes al achter de hand

Apple heeft al de basis gelegd voor deze overgang naar realistische avatars, en heeft jarenlang werk gestoken in het creëren en verbeteren Animoji. Deze grote geanimeerde emoji's op Apple-apparaten bootsen iemands gezichtsuitdrukkingen en hoofdbewegingen na.

Als je niet bekend bent, biedt Apple ook een gespecialiseerde versie van Animoji aan - genaamd Memoji - waarmee een 3D-karikatuur van het gezicht van de iPhone-gebruiker wordt gemaakt. Deze karikatuur kan vervolgens worden gebruikt voor gepersonaliseerde emoji's, als geanimeerde reacties in iMessage, of zelfs in - tromgeroffel - FaceTime om hun gezicht te versluieren.

Het is niet allemaal verrassend als we bedenken dat Memoji de voorbode is van de geanimeerde avatars van Vision Pro. Net als de geanimeerde avatar op de Vision Pro, gebruikt Memoji de TrueDepth-camera op de iPhone of iPad Pro om de bewegingen van het hoofd te volgen.

Naast Face ID en Animoji gebruikt Apple de TrueDepth-camera ook voor extra camerafuncties, zoals studiobelichtingseffecten op de iPhone en de Middelste podium functie op de iPad Pro. Bovendien stelt het externe ontwikkelaars in staat om een ​​nieuwe dimensie van gegevens van de TrueDepth-sensoren naar hun applicaties via een API. Het is alleen maar logisch dat Apple voortbouwt op deze bestaande functies om ondersteuning op te nemen voor een verbeterde FaceTime-ervaring vergelijkbaar met de Vision Pro.

Voor ons argument is ook het feit dat Apple het uiterlijk van Animoji de afgelopen jaren niet heeft bijgewerkt. De laatste Animoji-update in de buurt van de iPhone 14 lancering had alleen nieuwe animaties en een paar meer gezichtsuitdrukkingen toegevoegd, waardoor er ruimte was voor verbetering.

De iPhone en iPad zijn klaar

Naast de TrueDepth-camera is een ander aspect dat in overeenstemming is met het idee de hardware op de mobiele apparaten van Apple. Het merendeel van de iPhone- en iPad Pro-modellen wordt aangedreven door dezelfde (of vergelijkbaar) krachtige hardware onder de motorkap als op de Vision Pro-headset, die Apple's aangepaste M2 silicium. Hetzelfde is te zien op de MacBook Air, 13-inch MacBook Pro en de 2022 iPadPro.

Evenzo de A16 Bionische chipset die de iPhone 14 Pro En iPhone 14 Pro Max modellen is identiek aan de M2, zij het met iets minder verwerkingskracht dankzij een relatief minder krachtige CPU en GPU. Ondanks een minder krachtige prestatie op de iPhone, is hij niettemin krachtig genoeg om een ​​3D-versie van jezelf weer te geven terwijl je gezichtsuitdrukkingen en handgebaren in realtime naspeelt.

Met de opvolger van de A16 wordt van Apple verwacht dat het structurele verbeteringen aan de chipset aanbrengt door over te stappen op een veel efficiënter fabricageproces van 3 nanometer (3 nm). Gebaseerd op een reeks geruchten over benchmarkresultaten, heeft de A17 Bionic kon verder sluiten op de M2.

Mobiele apparaten zijn de toegangspoort tot AR

Naast het gebruik van de TrueDepth-camera van de iPhone om virtuele persona's voor FaceTime te maken, de iPad Pro en iPhone Pro modellen zijn goed uitgerust om de tegels van elke deelnemer in FaceTime geometrisch verspreid over de Vision te repliceren Pro. De iPad Pro (2020 en nieuwer) en iPhone (12 Pro en nieuwer) hebben een lidar-scanner en camera's aan de achterkant.

De lidar-scanner (afkorting van Light Detection and Ranging) kan nauwkeurig de afstand tot de iPhone en iPad Pro naar elk fysiek object door er licht op te laten schijnen en de gereflecteerde hoeveelheid te meten rug. Dit maakt de lidar-scanner enorm handig voor augmented reality (AR)-toepassingen.

Bij eerdere iPhone- en iPad-lanceringen heeft Apple uitgebreide demo's aan gewijd AR-games en -apps. De uitbreiding van de technologie naar Apple's eigen FaceTime is volkomen logisch om de ruimtelijke FaceTime verder uit te breiden dan de Vision Pro.

Apple kan nog steeds teleurstellen

Ondanks onze wishful thinking, zien we dit jaar mogelijk geen ruimtelijke FaceTime op andere apparaten. Voor Apple om de FaceTime-ervaring van de Vision Pro naar andere apparaten te brengen vóór de lancering, dat is gepland voor "begin 2024", zou het betekenen dat de opwinding en nieuwigheid die gepaard gaan met zijn futuristische hoofdtelefoon. Niet alleen dat, het zou ook niet anders zijn dan Apple als deze functies beperkt blijven tot de Vision Pro om uitsluitend de verkoop van de extravagante gadget te stimuleren.

Als Apple besluit om ruimtelijke FaceTime naar andere apparaten te brengen, zouden de iPad Pro uit 2024 of de iPhone 16 de eerste begunstigden zijn. Maar als dat waar blijkt te zijn, zal ruimtelijke FaceTime op iPhone 16 profiteren van een verbeterd TrueDepth-systeem dat gespeculeerd om weggestopt en verborgen te worden onder het display.

Ik wil ruimtelijke FaceTime op mijn iPhone

Gedeelde ervaringen zijn bij de kern van de filosofie van Apple, wat ons onredelijk hoopvol maakt dat deze belangrijke Vision Pro-functie naar de iPhone en andere ondersteunde apparaten wordt gebracht. Terwijl onze verwachting gedeeltelijk wordt geschraagd door de pure wens om FaceTime op een nieuwe en opwindende manier te ervaren zonder uit te schelden $ 3.500, het wordt ook ondersteund door het feit dat recente iPhone- en iPad Pro-modellen de hardware hebben die nodig is om die droom waar te maken realiteit.

Er is echter een gelijke - of waarschijnlijk grotere - kans dat dit niet gebeurt, gewoon zo Apple kan meer mensen dwingen om zijn visie (bedoelde woordspeling!) te delen voor het surrealistische maar toch digitaal geweven toekomst. Per slot van rekening levert een enkele eenheid van de Vision Pro ongeveer driemaal zoveel inkomsten op als een iPhone of iPad Pro voor de geldbeluste koe. Geruchten wijzen ook op een relatief goedkopere headset met visionOS, maar het zal verre van een SE-fied-versie zijn die aanzienlijk goedkoper is.

Misschien is de beste manier om nu te handelen, te wachten tot een paar maanden in 2024. Dit zal de periode zijn waarin de Vision Pro (hopelijk) al op de markt is gelanceerd en Apple de kans heeft gegeven - en voldoende statistieken - om te beoordelen of de headset kan winstgevend goed verkopen als een op zichzelf staand apparaat (met een duidelijk bloedend randje) of heeft ondersteuning nodig van zijn oudere broers en zussen, ondersteund door een gevoel van vertrouwdheid.

Aanbevelingen van de redactie

• iPadOS 17 heeft zojuist mijn favoriete iPad-functie nog beter gemaakt
• Ik heb mijn iPad Pro gedumpt voor een Android-tablet - dit is waarom
• Deze vouwtelefoon is lichter dan de iPhone 14 Pro Max
• Apple's 32-inch M3 iMac kan weer een vertraging oplopen
• Er is veel slecht nieuws over de Vision Pro-headset van Apple