The Future of Augmented Reality-appar (det är fantastiskt)

Augmented reality (AR) har funnits i science fiction i decennier. Tack vare smartphones är tekniken äntligen här för att få det att hända, men det har gått nästan två år sedan vi skrev om den outnyttjade potentialen hos förstärkt verklighet och det väntar fortfarande på en mördande applikation. Ändå fortsätter mobiltekniken att gå mot AR. Den känns skräddarsydd för bärbar teknologi, särskilt smarta glasögon. Ny akademisk forskning har gett oss en inblick i de spännande framtida möjligheterna för AR-webbläsare, men den lyfter också fram de barriärer som måste övervinnas.

"De riktigt övertygande applikationerna som kommer att få AR att ta fart har helt enkelt inte byggts ännu," förklarade Jules White, assisterande professor i datavetenskap vid Vanderbilt University. "Istället är det vi främst har på marknaden gimmickiga reklamupplevelser."

Varje föremål runt dig kan ge dig sina data

"AR handlar om att visa dig information som är relevant för de fysiska föremålen omkring dig", säger White.

Föreställ dig att din bil går sönder och du kan piska ut din telefon och använda en diagnostisk app som kan vägleda dig i en reparation. Det kan visa dig var startkablarna är och markera var du ska ansluta dem på batteriet. Med rätt nivå av visuell medvetenhet kan appen fastställa att ditt däcktryck är lågt, eller inse att en del är farligt sliten och behöver bytas ut.

Kanske är du ute och handlar i en butik och vill köpa några glödlampor, men du har ingen aning om vilka LED-lampor som är bäst. Du tar fram din smartphone, berättar att du vill ha något under 20 $ vid 40 watt med minst en 4-stjärnig recension, och den framhäver de relevanta alternativen som finns på hyllan, precis där på din skärm.

Volkswagen gör det redan

Potentialen för förstärkt verklighet är enorm, och den börjar äntligen komma till liv.

De Volkswagen MARTA app (Mobile Augmented Reality Technical Assistance) är utformad för att visa överlagd information om fordonet och göra det möjligt för tekniker att slutföra en reparation eller vägleda dem när de servar ett fordon. Det täcker bara en bil just nu och det är för professionella mekaniker, men det är så vettigt att det kommer att spridas. Det finns också Audi AR app, som är som en användarmanual, som gör det möjligt för användare att se bilen med sin iPhone och få popup-fönster om vad de tittar på.

 "Vad som verkligen tar AR till nästa nivå är när du har domänexperten och datorvisionsexperten som arbetar tillsammans för att bygga applikationer som är användbara för specifika branscher," förklarar White.

Professor White var gästredaktör för det senaste specialnumret från Proceedings of the IEEE on Applications of Augmented Reality och han säger att de har haft intresse från olika branscher, inklusive medicin, fordon, teknik, underhåll och reparation, konstruktion och detaljhandeln.

Detta kan bana en väg mot en mördande AR-app för allmänheten. Kanske kommer det ut från detaljhandeln. Som White föreslår, "kan de börja med lagerhantering och planogramhantering och sedan inse att det är underbart och gå vidare och låta kunderna utnyttja samma databas med kunskap."

Förstärka den verkliga världen bättre

Aktuella AR-webbläsare, som Wikitude och Layar, tenderar att lägga över bilder och text i platta block. Positionen är baserad på geotaggar och den information som erbjuds flyter helt enkelt ovanpå den verkliga världen. Kvalitet och användbarhet är dålig och det finns ingen standardiserad plattform.

Tänk om du kunde se bilderna, texten eller till och med videoinnehållet, och det faktiskt var överlagrat på ytan av en byggnad? Du kan ha en virtuell ledig skylt på ett hotell med recensionsdata, eller en gigantisk post-it på 34:e våningen i en närliggande byggnad med information om mötet du ska ha där. Det är en idé som lagts fram "Nästa generations Augmented Reality-webbläsare: rika, sömlösa och adaptiva," en av tidningarna från IEEE-tidskriften.

Detta involverar kartläggning av miljöer och rumslig medvetenhet, i huvudsak framsteg inom datorseende. Det intressanta med detta är att det inte nödvändigtvis behöver förlita sig på GPS eller andra sensorer i telefonen. Algoritmer för datorseende och snabbt förbättrad kamerahårdvara är faktiskt mer exakta än GPS för konsumenter, även när det stöds av Wi-Fi.

Om du har en databas med bilder kan en server i molnet analysera bilder från din telefon och jämföra dem med vad som finns i databasen och potentiellt bestämma din position ner till millimetern.

Logistiskt är det ett svårt förslag, men det hindrade inte Google från att utveckla gatuvy. Vilken detaljnivå du behöver beror på vad du försöker göra. Att bygga databasen kan vara dyrt, och du måste täcka alla vinklar och perspektiv som folk sannolikt kommer att se en miljö från om du vill ha fin granularitet. Då måste du tänka på att den verkliga världen förändras hela tiden, även om White föreslår att crowdsourcing skulle kunna lösa det här problemet, "när AR når den kritiska massan och alla använder den hela tiden blir det lätt eftersom folk tar bilder av allt ständigt."

Identifiera objekt bättre än Google Goggles

Det finns en annan sida av detta och det är Google Goggles-metoden, där din AR-webbläsare kan känna igen objekt och produkter och erbjuda användbar information om dem. Vi har gått bortom det gamla tillvägagångssättet att skanna ett enda objekt med något som streckkodsläsarens app.

Som White förklarar "AR ökar bandbredden avsevärt, istället för att skanna en bild kan du ta en bild av hela gången" och detta kan ge en lista över de 10 bästa produkterna av 1 000 som du kan filtrera efter recensionsresultat, pris och om det finns i stock. Det handlar inte bara om att berätta för dig vad saker är, det handlar om att tillhandahålla "intelligens som hjälper dig att fatta ett beslut."

Hur är det med smarta glasögon?

Det råder ingen tvekan om det smarta glasögon kan vara en viktig drivkraft för AR, men är de redo för bästa sändningstid? De tekniska funktionerna hos smarta glasögon just nu skulle utesluta saker som realtidsvideokompositering, vilket skulle kunna vara möjligt på en smartphone. Det finns också problem med gränssnittet som röstkontroller inte alltid kan lösa. Om du tittade på en motor, till exempel, skulle du vilja kunna peka på en specifik del, speciellt om du inte vet vad det är.

Vi ser redan koncept för hur en ny typ av gränssnitt kan fungera. Samsung patenterade nyligen ett AR-tangentbord som skulle projicera ut på dina fingrar, och eye tracking förbättras hela tiden.

White föreslår "ju mer uppslukande upplevelserna blir, desto naturligare förväntar vi oss att gränssnittet ska vara."

Den nivån av nedsänkning väcker också säkerhetsproblem. Vad händer om en AR-skärm eller animation distraherar dig från en händelse i verkligheten och orsakar en olycka? Sedan finns det cybersäkerhet. Vad händer om någon hackar sig in i din AR-skärm och ändrar information? Det kommer att ta lite tid att lösa dessa saker.

White erkänner den roll som projekt som Google Glass har spelat för att höja profilen för AR, men han tror att mobiltelefoner och surfplattor kommer att driva AR på kort tid term för att "det inte kräver att människor ändrar sitt beteende... människor är vana vid att använda sina telefonkameror för att ta bilder av saker runt dem som intresserar dem dem."

Hur nära är vi egentligen?

Uppsatsen "Nästa generations Augmented Reality Browsers: Rich, Seamless and Adaptive" föreslår att för att AR ska nå mainstream måste det vara lättare att registrera intressanta platser. Innehållet måste gå bortom statiska bilder/text till video, ljud och till och med 3D-modeller och animationer, och vi behöver bättre användargränssnitt för att hjälpa oss interagera och extrahera användbar information.

"Medan mer arbete återstår att göra, tror vi att dessa utmaningar kan hanteras och lösas inom en någorlunda nära framtid, vilket förhoppningsvis leder till storskalig användning av AR", avslutar artikeln.

Vi är sålda. Om någon med tillräckligt djupa fickor lägger resurserna på det, kan vi börja se några riktigt häftiga AR-applikationer. Förhoppningsvis om två år kommer någon och vi kan prata om hur framgångsrik AR har blivit.

Redaktörens rekommendationer

• Pokémon Go-skapare tillkännager Pikmin augmented-reality-spel
• De bästa apparna för hemdesign för Android och iOS
• Qualcomm XR2 augmented reality-chipset kommer att driva nästa generations headset med 5G
• Google Pixel 4-låda döljer påskägg med förstärkt verklighet: Så här hittar du det
• Patent tyder på att Apple kan ha löst ett stort problem med augmented reality-glasögon