Googles livsændrende AR-smartbrilledemo gav mig rystelser

Sundar Pichai står foran et Google-logo på Google IO 2021.
Denne historie er en del af vores komplette Google I/O-dækning

Da Viva og Yoshiko, den ene engelsktalende og den anden mandarin-kinesisk, prøvede Googles prototype smarte briller under et smugkig på Google I/O 2022, Jeg fik gysninger ned ad ryggen. Udtrykkene på deres ansigter, den pludselige evne til meningsfuldt at kommunikere med en person, der før ikke helt forstod, hvad der blev sagt, bevægede mig meget. Det er et eksempel på den type teknologi, som jeg virkelig elsker: En, der kan ændre liv.

Indhold

  • 'Undertekster for verden'
  • Potentielle anvendelser
  • Sandsynligvis ikke Google Glass 2

Anbefalede videoer

'Undertekster for verden'

Du ville blive tilgivet, hvis du var gået glip af dette særlige øjeblik under Google I/O, da det kom lige i slutningen af ​​maratonbegivenheden og varede i blot et par minutter. De egentlige smarte briller blev ikke navngivet, kun vist i en demonstrationsvideo, og egentlig kun afsløret som et koncept. Google viste os ikke engang selve grænsefladen eller antydede, at de smarte briller nogensinde vil blive frigivet som et faktisk produkt.

Nedbrydning af sprogbarrierer med augmented reality | Google

Det behøvede det ikke. Google solgte drømmen. Bæret som et normalt par briller har objektivet en lille skærm, der viser en realtidsoversættelse af et andet sprog i augmented reality (AR), så det overlejrer det, du normalt ser. Googles produktchef Max Spear opsummerede funktionaliteten perfekt og sagde, at det var som "undertekster for verden." Siddende overfor nogen, der ikke taler samme sprog som dig, vil brillerne give en tekstbaseret oversættelse af samtalen, som den sker.

Du tænker måske, at det ligner anden oversættelsesteknologi - Googles Pixel Buds har en oversættelsesfunktion, for eksempel - men der er nogle klare fordele her. Til at begynde med betyder det at se tekst på en skærm inde i et par briller, at du kan bevare øjenkontakten, det kan du Følg med uden at trykke på knapper eller en lang, akavet stilhed, mens en maskine oversætter, hvad der bliver til sagde. Tekst er mindre påtrængende end at høre en anden stemme, og fordi ingen hører oversættelsen, føles det ikke unaturligt.

Potentielle anvendelser

Enhver, der har rejst til udlandet eller brugt tid i samfund, hvor sprog er forskellige, vil øjeblikkeligt forstå, hvordan denne form for teknologi ville være til gavn. Jeg fik gys ikke kun på grund af glæden i ansigterne på dem, der testede brillerne, men fordi jeg tænkte straks på, hvordan tider mit eget liv ville have ændret sig, hvis jeg havde adgang til det samme teknologi.

Jeg kan huske, at jeg spiste middag med en ven i Japan, og selvom vi begge havde en grundlæggende beherskelse af hinandens sprog, kunne samtalen ikke flyde. Vi endte med at bruge Google Translate på en telefon og skrive i stedet for at bruge stemme gennem appen, fordi miljøet var ret støjende. Det virkede og var ret sjovt, men det var ikke perfekt, og til tider var det ret akavet. De smarte briller ville have ændret den situation fuldstændig.

I app-oversættelse på den nye Google Pixel 6.

Jeg boede i Grækenland i mange år, og selvom jeg forstår en del græsk, kan jeg slet ikke tale det godt. Jeg spekulerer på, hvordan Googles smarte briller og oversættelsessystemet ville have ændret min tid der? Men da jeg undrer mig over både disse situationer og mange andre, er jeg personligt stødt på, hvor de smarte briller ville have været virkelig hjælpsom, når jeg hurtigt den store barriere, der ikke kun er Googles prototypebriller, men enhver bærbar oversættelse tech.

Problemet med enhver bærbar enhed, der giver visuelle oversættelser til to personer, der taler forskellige sprog, er, at alle parter skal eje og bære en af ​​dem. Samtaler er to-vejs ting, og hvis kun én af jer forstår, hvad der bliver sagt, så bliver det kun nyttigt i situationer, hvor et svar ikke er påkrævet. Så for at få det til at fungere til mine scenarier, skal alle, jeg kender i Japan og Grækenland, bære smarte briller med Googles oversættelsesteknologi indeni. Det virker… usandsynlig.

Hvor de ville arbejde, uden at alle parter havde dem på, er ikke til oversættelse, men til transskription. Denne form for visuel transskription og forbedring kunne helt klart være livsændrende for døve eller hørehæmmede. Min far bruger høreapparater, men jeg ved, at han ville have gavn af at "se" ordene, og han ville ikke gå glip af den irriterende lydfeedback, der følger med høreapparater i nogle situationer. Det minder mig om, hvordan transformationsprodukter som eSight smarte briller er for blinde og svagsynede.

Sandsynligvis ikke Google Glass 2

Så meget som jeg gerne vil tro, at vi ser en tidlig version af Google Glass 2, tror jeg ikke, vi er det. I stedet har vi set en fantastisk demonstration af Googles hurtige fremskridt i hastigheden og nøjagtigheden af ​​dets oversættelses- og transskriptionsteknologi.

Googles AR smartglasses oversættelsesfunktion demonstreret.

Der var flere andre eksempler på, at Googles sprogfærdigheder blev forbedret under Google I/O 2022. Det blev annonceret yderligere 24 sprog er blevet tilføjet til Google Oversæt for at betjene 300 millioner nye mennesker rundt om i verden. Det tager det samlede antal til 133 understøttede sprog og er blevet muliggjort af et nyt AI-system kaldet Zero-Shot Machine Translation, som lærer nye sprog gennem en kombination af eksisterende viden og ny information, selvom kilden til den information er begrænset.

Googles AI bliver bedre til at forstå naturligt sprog og den måde, det bruges generelt på, såsom med Se og tal-funktion på Nest Hub Max, også annonceret under I/O 2022. Det er før nogen med en Google Pixel 6 prøver Google Assistantevne til at transskribere din stemme til beskedsvar eller se video med liveoversættelser. Begge er hurtige, og især i tilfælde af beskedsvarene, chokerende nøjagtige.

Jeg bruger Google Oversæt på tværs af forskellige enheder hver dag, og jeg oversætter normalt japansk, koreansk og kinesisk til engelsk. Disse er meget udfordrende at lave, og at bruge dem effektivt i samtale kræver virkelig en viden om, hvordan sproget fungerer, ellers vil der blive begået pinlige fejl. At høre og nu se, hvordan Google innoverer og forbedrer sin oversættelsesteknologi, betyder min verden fortsætter med at åbne sig endnu mere, og jeg tror, ​​at det langsomt vil gøre det rent faktisk at lære disse sprog også nemmere.

Det er enormt kraftfuldt at integrere Googles forbedrede sprog- og oversættelsesteknologi gennem et par smarte briller. Hvis jeg umiddelbart kan forstå de fordele, der ville bringe mig og dem, der er tæt på mig, kan jeg kun lige begynde at forstå den begejstring, en person, der ikke kan høre, vil føle. Du kan beholde Pixel 7 og Pixel Watch — demonstrationer af utrolig fremtidig teknologi som denne er grunden til, at jeg sidder igennem mere end to timers Google I/O keynote-præsentationer, og de rystelser, da jeg begynder at forstå, hvor potentielt transformerende det hele kunne være, er mine belønning.

Redaktørens anbefalinger

  • CES 2023: Disse 38-grams smarte briller har til formål at gøre AR praktisk
  • Google Fotos tilføjer længe efterspurgt ændring af livskvalitet … på en måde
  • Pixel 6A cover praktisk: Flere ledetråde om Googles næste telefon
  • 6 Google I/O 2022-streams at se, selvom du ikke er udvikler
  • Google Sodar lader dig visualisere retningslinjer for social distancering i AR

Opgrader din livsstilDigital Trends hjælper læserne med at holde styr på den hurtige teknologiske verden med alle de seneste nyheder, sjove produktanmeldelser, indsigtsfulde redaktionelle artikler og enestående smugkig.