Google Lens Computer Vision Tech hjelper deg å forstå hva kameraet ser

Denne historien er en del av vår komplette Google I/O-dekning

Vil du vite navnet på den blomsten eller fuglen du møter under spaserturen gjennom en park? Snart vil Google Assistant kunne fortelle deg det ved hjelp av kameraet og kunstig intelligens.

Google satte i gang 2017 I/O-konferanse rundt AI og maskinlæring, og en datasynsteknologi den fremhevet er Google Lens, som lar kameraet gjør mer enn bare å ta et bilde – det gir større kontekst rundt hva det er du ser.

Kommer til Google Assistant og Google Foto, kan Google Lens-teknologien "forstå hva du ser på og hjelpe deg med å handle," sa Googles administrerende direktør Sundar Pichai under keynoten. Hvis du for eksempel retter kameraet mot et konsertlokale, kan Google Assistant fortelle deg mer om utøver, i tillegg til å spille musikk, hjelpe deg med å kjøpe billetter til showet og legge det til i kalenderen din, alt innen en enkelt app.

Når kameraet peker på et ukjent objekt, kan Google Assistant, gjennom bildegjenkjenning, fortelle deg hva det er. Pek på et butikkskilt, og ved å bruke stedsinformasjon kan du gi deg meningsfull informasjon om virksomheten. Alt dette kan gjøres gjennom den "samtale" stemmeinteraksjonen brukeren har med Assistant.

"Du kan peke telefonen mot den, og vi kan automatisk gjøre det harde arbeidet for deg," sa Pichai.

Med Google Lens, din smarttelefon Kameraet vil ikke bare se det du ser, men vil også forstå det du ser for å hjelpe deg med å handle. #io17pic.twitter.com/viOmWFjqk1

– Google (@Google) 17. mai 2017

Hvis du bruker Googles Translate-app, har du allerede sett hvordan teknologien fungerer: Plasser et kamera over litt tekst, og appen vil oversette den til et språk du forstår. I Google Assistant vil Google Lens ta dette videre. I en demonstrasjon viste Google det Google Assistant vil ikke bare oversette utenlandsk tekst, men også vise bilder av det teksten beskriver, for å gi mer informasjon.

Bildegjenkjenningsteknologi er ikke ny, men Google Lens viser hvordan avansert maskinlæring blir. Pichai sa at som med arbeidet med tale, ser Google store forbedringer i synet. Datasynsteknologien hjelper ikke bare med å gjenkjenne hva noe er, men kan til og med hjelpe til med å reparere eller forbedre et bilde. Tok du et uskarpt bilde av Eiffeltårnet? Fordi datamaskinen gjenkjenner objektet og vet hvordan det skal se ut, kan den automatisk forbedre det bildet basert på det som allerede er kjent.

"Vi kan forstå egenskapene bak et bilde," sa Pichai. "Våre datasynssystemer nå er enda bedre enn mennesker på bildegjenkjenning."

For å gjøre Lens effektiv i jobben sin, bruker Google sofistikert beregningsarkitektur av Cloud Tensor Processing Unit (TPU) brikkesett, for å håndtere opplæring og inferens for maskinen læring. Dens andre generasjons TPU-teknologi kan håndtere 180 billioner flyttalloperasjoner per sekund; 64 TPU-kort i en superdatamaskin kan håndtere 11,5 petaflops. Med denne datakraften kan ny TPU håndtere både trening og slutninger samtidig, noe som ikke var det mulig tidligere (den forrige TPU kunne bare håndtere slutningsarbeid, men ikke den mer komplekse opplæring). Maskinlæring tar tid, men denne maskinvaren vil bidra til å akselerere innsatsen.

Google Lens vil også drive neste oppdatering av Google Foto. Bildegjenkjenning brukes allerede i Bilder for å gjenkjenne ansikter, steder og ting for å hjelpe med organisering og søk. Med Google Lens kan Google Photos gi deg mer informasjon om tingene på bildene dine, som navnet og beskrivelsen av en bygning; Hvis du trykker på et telefonnummer i et bilde, ringer du og henter mer informasjon om et kunstverk du så i en museum, eller til og med skriv inn Wi-Fi-passordet automatisk fra et bilde du tok av baksiden av en Wi-Fi ruter.

Assistant og Photos vil være de første appene som bruker Google Lens, men de vil bli rullet ut i andre apper. Og med kunngjøringen av støtte for Assistant i iOS, vil iPhone-brukere også kunne bruke Google Lens-teknologien.

Redaktørenes anbefalinger

• Nei, du trenger virkelig ikke Google Assistant på smartklokken din
• 5 ting vi gjerne vil se på Google I/O 2023 (men sannsynligvis ikke vil)
• Google I/O 2023 finner sted 10. mai med et personlig arrangement
• iPhone 14 Pro vs. Google Pixel 7 Pro-kamerakampen er utrolig nær
• Denne nye Google Lens-funksjonen ser ut som den er rett ut av en sci-fi-film

Oppgrader livsstilen dinDigitale trender hjelper leserne å følge med på den fartsfylte teknologiverdenen med alle de siste nyhetene, morsomme produktanmeldelser, innsiktsfulle redaksjoner og unike sniktitter.