Googles livsendrende AR-smartbrilledemo ga meg frysninger

Sundar Pichai står foran en Google-logo på Google IO 2021.
Denne historien er en del av vår komplette Google I/O-dekning

Da Viva og Yoshiko, den ene engelsktalende og den andre en mandarin-kinesisk, prøvde Googles prototype smartbriller under en sniktitt på Google I/O 2022, Jeg fikk frysninger nedover ryggraden. Ansiktsuttrykkene deres, den plutselige evnen til å kommunisere meningsfullt med noen som før ikke helt forsto hva som ble sagt, rørte meg veldig. Det er et eksempel på den typen teknologi jeg virkelig elsker: En som kan forandre liv.

Innhold

  • "Undertekster for verden"
  • Potensielle bruksområder
  • Sannsynligvis ikke Google Glass 2

Anbefalte videoer

"Undertekster for verden"

Du vil bli tilgitt hvis du hadde gått glipp av dette spesielle øyeblikket under Google I/O, siden det kom rett på slutten av maraton-arrangementet, og varte i bare noen få minutter. Selve smartbrillene ble ikke navngitt, bare vist i en demonstrasjonsvideo, og egentlig bare avslørt som et konsept. Google viste oss ikke engang selve grensesnittet eller antydet at de smarte brillene noen gang vil bli utgitt som et faktisk produkt.

Bryte ned språkbarrierer med utvidet virkelighet | Google

Det trengte det ikke. Google solgte drømmen. Brukt som en vanlig brille, har linsen en liten skjerm som viser en sanntidsoversettelse av et annet språk i utvidet virkelighet (AR), slik at det overlapper det du ser normalt. Googles produktsjef Max Spear oppsummerte funksjonaliteten perfekt, og sa at det var som «undertekster for verden». Sittende overfor noen som ikke snakker samme språk som deg, vil brillene gi en tekstbasert oversettelse av samtalen som den skjer.

Du tenker kanskje at det ligner på annen oversettelsesteknologi – Googles Pixel Buds ha en oversettelsesfunksjon, for eksempel - men det er noen klare fordeler her. Til å begynne med, å se tekst på en skjerm inne i et par briller betyr at du kan opprettholde øyekontakt, du kan følg med uten å trykke på knapper eller en lang, vanskelig stillhet mens en maskin oversetter det som blir sa. Tekst er mindre påtrengende enn å høre en annen stemme, og fordi ingen hører oversettelsen, føles det ikke unaturlig.

Potensielle bruksområder

Alle som har reist til utlandet, eller tilbrakt tid i lokalsamfunn der språk er forskjellige, vil umiddelbart forstå hvordan denne typen teknologi vil være til nytte. Jeg fikk skjelvinger ikke bare på grunn av gleden i ansiktene til de som testet brillene, men fordi jeg tenkte umiddelbart på hvordan tidene mitt eget liv ville ha endret seg hvis jeg hadde tilgang til det samme teknologi.

Jeg husker at jeg spiste middag med en venn i Japan, og selv om vi begge hadde en grunnleggende beherskelse av hverandres språk, kunne ikke samtalen flyte. Vi endte opp med å bruke Google Translate på en telefon og skrive i stedet for å bruke stemme gjennom appen fordi miljøet var ganske støyende. Det fungerte og var ganske morsomt, men det var ikke perfekt, og til tider var det ganske vanskelig. De smarte brillene ville endret den situasjonen totalt.

I app-oversettelse på den nye Google Pixel 6.

Jeg bodde i Hellas i mange år, og selv om jeg forstår en god del gresk, kan jeg ikke snakke det godt i det hele tatt. Jeg lurer på hvordan Googles smarte briller og oversettelsessystemet ville ha endret tiden min der? Men når jeg lurer på både disse situasjonene og mange andre, har jeg personlig kommet over hvor de smarte brillene ville ha vært vært veldig hjelpsomme, når jeg raskt den store barrieren som ikke bare er Googles prototypebriller, men enhver bærbar oversettelse tech.

Problemet med enhver bærbar enhet som gir visuelle oversettelser for to personer som snakker forskjellige språk, er at alle parter må eie og bruke en av dem. Samtaler er toveis ting, og hvis bare én av dere forstår hva som blir sagt, blir det bare nyttig i situasjoner der det ikke er nødvendig med respons. Så for å få det til å fungere for mine scenarier, må alle jeg kjenner i Japan og Hellas bruke smarte briller med Googles oversettelsesteknologi inne. Det virker … lite sannsynlig.

Der de ville jobbet uten at alle parter hadde dem på seg er ikke for oversettelse, men for transkripsjon. Denne typen visuell transkripsjon og forbedring kan helt klart være livsendrende for døve eller hørselshemmede. Faren min bruker høreapparater, men jeg vet at han ville ha nytte av å "se" ordene, og ville ikke gå glipp av den irriterende lydtilbakemeldingen som følger med høreapparater i enkelte situasjoner. Det minner meg om hvordan transformasjonsprodukter som eSight smarte briller er for blinde og svaksynte.

Sannsynligvis ikke Google Glass 2

Så mye som jeg vil tro at vi ser en tidlig versjon av Google Glass 2, tror jeg ikke vi er det. I stedet har vi sett en fantastisk demonstrasjon av Googles raske fremskritt i hastigheten og nøyaktigheten til oversettelses- og transkripsjonsteknologien.

Googles AR smartglasses-oversettelsesfunksjon demonstrert.

Det var flere andre eksempler på at Googles språkkunnskaper ble forbedret under Google I/O 2022. Det ble annonsert ytterligere 24 språk har blitt lagt til Google Translate for å betjene 300 millioner nye mennesker rundt om i verden. Det tar totalt 133 støttede språk og har blitt muliggjort av et nytt AI-system kalt Zero-Shot Machine Translation, som lærer nye språk gjennom en kombinasjon av eksisterende kunnskap og ny informasjon, selv om kilden til den informasjonen er begrenset.

Googles AI blir bedre til å forstå naturlig språk og måten det brukes på generelt, for eksempel med Se og snakk-funksjon på Nest Hub Max, også annonsert under I/O 2022. Det er før noen med en Google Pixel 6 prøver ut Google Assistantsin evne til å transkribere stemmen din til meldingssvar, eller se video med direkte oversettelser. Begge er raske, og spesielt når det gjelder meldingssvarene, sjokkerende nøyaktige.

Jeg bruker Google Translate på tvers av forskjellige enheter hver dag, og oversetter vanligvis japansk, koreansk og kinesisk til engelsk. Disse er svært utfordrende å gjøre, og å bruke dem effektivt i samtale krever virkelig kunnskap om hvordan språket fungerer, ellers vil det bli gjort pinlige feil. Å høre og nå se hvordan Google innoverer og forbedrer sin oversettelsesteknologi betyr min verden fortsetter å åpne seg enda mer, og jeg tror det sakte vil gjøre det faktisk å lære disse språkene lettere også.

Å integrere Googles forbedrede språk- og oversettelsesteknologi gjennom et par smarte briller er enormt kraftig. Hvis jeg umiddelbart kan forstå fordelene som vil gi meg og de som står meg nær, kan jeg bare så vidt begynne å forstå spenningen en som ikke kan høre vil føle. Du kan beholde Pixel 7 og Pixel Watch — demonstrasjoner av utrolig fremtidig teknologi som dette er grunnen til at jeg sitter gjennom mer enn to timer med Google I/O hovedpresentasjoner, og de skjelvingene når jeg begynner å forstå hvor potensielt transformerende det hele kan være, er mine belønning.

Redaktørenes anbefalinger

  • CES 2023: Disse 38 grams smarte brillene har som mål å gjøre AR praktisk
  • Google Foto legger til etterlengtet endring av livskvalitet … på en måte
  • Pixel 6A-deksel praktisk: Flere ledetråder om Googles neste telefon
  • 6 Google I/O 2022-strømmer å se selv om du ikke er en utvikler
  • Google Sodar lar deg visualisere retningslinjer for sosial distansering i AR

Oppgrader livsstilen dinDigitale trender hjelper leserne å følge med på den fartsfylte teknologiverdenen med alle de siste nyhetene, morsomme produktanmeldelser, innsiktsfulle redaksjoner og unike sniktitter.