Jeg håper Apple bringer denne Vision Pro-funksjonen til iPhone

Digitalt lagde alternative virkeligheter kan være spennende eller ubehagelige, basert på hvordan du ser for deg dem. Men Apple, blant andre selskaper som er investert i AR- og VR-dominerende fremtid, vil tydeligvis at du skal fokusere på den lyse siden. Det er derfor Apple brukte en betydelig del av tiden på det WWDC 2023 utviklerkonferanse for å fremheve de ulike funksjonene i Apple Vision Pro — Apples ekstravagante nye mixed reality-headset.

I henhold til Apples sikre narrativ på arrangementet, leverer Vision Pro oss inn i en ny æra innen databehandling og push utover grensene til faste skjermer. Kampanjegjennomgangene overbeviser oss enkelt om at headsettet er både visuelt og funksjonelt unikt på mange måter.

Fra å la deg utvide arbeidsflyten din med utallige skjermer som sprer seg ut i det omgivende rommet for å fordype deg i hyperrealistiske naturporter, har headsettet mange fascinerende funksjoner. Og vi håper absolutt at noen av funksjonene kommer til andre enheter, spesielt iPhone.

Apples nye FaceTime-avatarer ser utrolige ut

Vision Pro er utropt til å blande ekte og fantasifulle scenarier sømløst, noe som kan overtale menneskesinnet til å faktisk glemme grensene mellom det fysiske og virtuelle riket. Dette oppnås gjennom virtuelle elementer som ikke enkelt flyter rundt i ditt fysiske rom, men som også forbedrer dine fysiske omgivelser. En av måtene er å la små detaljer, som skygger fra de flytende vinduene, kaste over virkelige objekter i omgivelsene dine.

En annen måte Apple ser for å forbløffe (så vel som forvirrede) ikke-brukere er ved å bruke virtuelle avatarer i FaceTime. Med hodesettet hyller Apple den nye æraen av «romlig FaceTime», hvor videoer av hver deltaker vil vises i vinduer som spenner inn ekte miljøer til Vision Pro-brukere. Men folkene på den andre siden vil ikke se ansiktet ditt pakket inn i hodeplagget.

Vision Pro vil i stedet skape kunstferdig realistiske – og samtidig merkelig nervepirrende – virtuelle representasjoner av brukeren. Disse avatarene vises i stedet for den faktiske visningen og er laget med de to TrueDepth-kameraene på headsettet. Spesielt er TrueDepth-kameraet et unikt kamerasystem som opprinnelig ble introdusert på iPhone X. Den består av en infrarød flombelysning, en prikkprojektor og et infrarødt kamera. Alle disse tre systemene kombineres for å bidra til å lage et 3D-kart av brukerens ansikt som kan brukes til å låse opp iPhone ved hjelp av Face ID.

Avataren vil gjenskape ansiktsuttrykk, øyebevegelser og bevegelser for å fremstå mer naturlig. Dette løser problemet med å hele tiden holde iPhone i hånden eller vendt mot Mac-skjermen mens den er på FaceTime – eller fremstå som den looney teknologientusiasten som liker å holde seg uhengende mens han prøver ut det siste dingser.

For Apple er dette også en håndgripelig måte å tiltrekke flere mennesker til å komme ombord med sin begynnende ideologi om romlig databehandling – om ikke av noen annen grunn, men for å unngå frykten for å gå glipp av noe (FOMO). Men foruten å overbevise eksisterende Apple-brukere til bruke $3500 på et stykke fremvoksende teknologi, det er en annen måte Apple kan få disse hyperrealistiske avatarene til å føles mer vanlige – ved å bringe dem til iPhone og iPad.

De bør ikke være eksklusive for Vision Pro

Det er gode grunner til at Virtual FaceTime-avatarer passer like godt for andre Apple-enheter som Vision Pro.

For det første er det å bringe romlig FaceTime til alle enheter på linje med Apples foreslåtte nye tidsalder for "romlig databehandling." Inntil en håndgripelig fremtid når utvidet virkelighet fullstendig overtar andre interaksjoner med datamaskiner og spesielt erstatter våre elskede smarttelefoner, Apple kan bruke denne muligheten til å forbedre kjennskapen til teknologien.

Foruten å være i tråd med å eliminere grensene mellom den virkelige og den virtuelle verdenen, tilbyr en romlig FaceTime-opplevelse rett innenfor Apples prinsipper for et økosystem, der alle enheter - i det minste de øverste - fungerer på samme måte og i samsvar med hver annen. Kjent analytiker Ming-Chi Kuo bekrefter også behovet for å etablere harmoni mellom Vision Pro og andre enheter i Apples økosystem, og siterer det som avgjørende for hodesettets første suksess.

Videre, for å drive en konvergerende programvareopplevelse, vil Apple jobbe for å styrke maskinvaren på sine andre enheter, spesielt iPhone. Naturligvis vil iPad (i hvert fall Pro-varianten) følge etter. Dette gjør iPhone og iPad Pro verdige kandidater til å dele erfaringer med Vision Pro, og en romlig FaceTime-opplevelse topper listen over forventningene våre.

Apple har allerede triksene i ermene

Apple har allerede lagt grunnlaget for denne overgangen til realistiske avatarer, og har lagt ned mange års arbeid i å skape og forbedre Animoji. Disse store animerte emojiene på Apple-enheter etterligner en persons ansiktsuttrykk og hodebevegelser.

Hvis du ikke er kjent, tilbyr Apple også en spesialisert versjon av Animoji - kalt Memoji – som lager en 3D-karikatur av iPhone-brukerens ansikt. Denne karikaturen kan deretter brukes til personlige emojier, som animerte reaksjoner i iMessage, eller til og med innenfor - trommerulle - FaceTime for å skjule ansiktet deres.

Det er ikke overraskende når vi tenker på at Memoji er forkynneren av Vision Pros animerte avatarer. I likhet med den animerte avataren på Vision Pro, bruker Memoji TrueDepth-kameraet på iPhone eller iPad Pro for å spore hodets bevegelser.

Foruten Face ID og Animoji, bruker Apple også TrueDepth-kameraet for ekstra kamerafunksjoner, som studiolyseffekter på iPhone og Sentrum scene funksjon på iPad Pro. I tillegg lar det tredjepartsutviklere legge til en ny dimensjon av data fra TrueDepth-sensorene til applikasjonene deres gjennom en API. Det er bare fornuftig for Apple å bygge videre på disse eksisterende funksjonene for å inkludere støtte for en forbedret FaceTime-opplevelse som ligner på Vision Pro.

For å favorisere argumentet vårt er også det faktum at Apple ikke har oppdatert det visuelle utseendet til Animoji de siste årene. Den siste Animoji-oppdateringen nær den iPhone 14 lanseringen hadde bare lagt til nye animasjoner og noen flere ansiktsuttrykk, noe som ga rom for forbedring.

iPhone og iPad er klare

Foruten TrueDepth-kameraet, er et annet aspekt i samsvar med ideen maskinvaren på Apples mobile enheter. Flertallet av iPhone- og iPad Pro-modellene drives av den samme (eller tilsvarende) kraftige maskinvaren under panseret som på Vision Pro-headsettet, som pakker Apples tilpassede M2 silisium. Det samme kan sees på MacBook Air, 13-tommers MacBook Pro og 2022 iPad Pro.

På samme måte A16 Bionic brikkesett som driver iPhone 14 Pro og iPhone 14 Pro Max modellene er identiske med M2, men med litt mindre prosessorkraft på grunn av en relativt mindre kraftig CPU og GPU. Til tross for en mindre kraftig ytelse på iPhone, er den likevel kraftig nok til å gjengi en 3D-versjon av deg mens du gjenskaper ansiktsuttrykk og håndbevegelser i sanntid.

Med A16s etterfølger forventes Apple å gjøre strukturelle forbedringer av brikkesettet ved å gå over til en mye mer effektiv 3-nanometer (3nm) produksjonsprosess. Basert på et sett med ryktede referanseresultater, A17 Bionic kan nærme seg M2 ytterligere.

Mobile enheter er inngangsporten til AR

I tillegg til å bruke iPhones TrueDepth-kamera for å lage virtuelle personas for FaceTime, iPad Pro og iPhone Pro modellene er godt rustet til å gjenskape hver deltakers fliser i FaceTime geometrisk spredt ut på Vision Pro. iPad Pro (2020 og nyere) og iPhone (12 Pro og nyere) har en lidar-skanner sammen med kameraene på baksiden.

Lidar-skanneren (forkortelse for Light Detection and Ranging) kan nøyaktig oppdage avstanden fra iPhone og iPad Pro til enhver fysisk gjenstand ved å skinne lys på den og måle mengden reflektert tilbake. Dette gjør lidar-skanneren enormt nyttig for utvidet virkelighet (AR)-applikasjoner.

Ved tidligere lanseringer av iPhone og iPad har Apple dedikert forseggjorte demoer til AR-spill og apper. Teknologiens utvidelse til Apples egen FaceTime gir perfekt mening for å utvide romlig FaceTime utover Vision Pro.

Apple kan fortsatt skuffe

Til tross for ønsketenkningen vår, ser vi kanskje ikke romlig FaceTime på andre enheter når som helst i år. For at Apple skal bringe Vision Pros FaceTime-opplevelse til andre enheter før lanseringen, dvs beregnet til «tidlig 2024», ville det bety å utvanne spenningen og nyheten knyttet til dens futuristiske headset. Ikke bare det, det ville heller ikke være ulikt Apple hvis disse funksjonene er begrenset til Vision Pro for utelukkende å drive salget av den ekstravagante gadgeten.

Hvis Apple bestemmer seg for å bringe romlig FaceTime til andre enheter, vil de tidligste mottakerne være 2024 iPad Pro eller iPhone 16. Men hvis det viser seg å være sant, vil romlig FaceTime på iPhone 16 dra nytte av et forbedret TrueDepth-system som er spekulert å bli gjemt bort og gjemt under skjermen.

Jeg vil ha romlig FaceTime på min iPhone

Delte opplevelser er på kjernen i Apples filosofi, noe som gjør oss urimelig håpefulle om det å bringe denne viktige Vision Pro-funksjonen til iPhone og andre støttede enheter. Mens forventningene våre delvis støttes av det rene ønsket om å oppleve FaceTime på en ny og spennende måte uten å kaste ut $3 500, det støttes også av det faktum at nyere iPhone- og iPad Pro-modeller har den nødvendige maskinvaren for å gjøre den drømmen til en virkelighet.

Imidlertid er det en like stor - eller sannsynligvis større - sjanse for at dette ikke skjer, bare for det Apple kan tvinge flere til å dele sin visjon (ordspill ment!) for det surrealistiske, men digitalt vevde framtid. Tross alt vil en enkelt enhet av Vision Pro gi omtrent tre ganger så mye inntekt som en iPhone eller iPad Pro til den pengehungrige kua. Ryktene peker også på en relativt billigere headset med visionOS, men det vil langt fra være en SE-fied versjon som er vesentlig rimeligere.

Kanskje den beste handlingen akkurat nå er å vente til noen måneder inn i 2024. Dette vil være perioden da Vision Pro (forhåpentligvis) allerede har lansert på markedet og gitt Apple en sjanse – og rikelig med beregninger – til å vurdere om headsettet kan selge lønnsomt som en frittstående enhet (med en klar blødningskant) eller trenger støtte fra sine eldre søsken støttet av en følelse av familiær.

Redaktørenes anbefalinger

• iPadOS 17 har nettopp gjort min favoritt-iPad-funksjon enda bedre
• Jeg droppet iPad Pro for et Android-nettbrett - her er grunnen
• Denne sammenleggbare telefonen er lettere enn iPhone 14 Pro Max
• Apples 32-tommers M3 iMac kan bli utsatt for enda en forsinkelse
• Det er en haug med dårlige nyheter om Apples Vision Pro-headset