Google Lens Computer Vision Tech hilft Ihnen zu verstehen, was die Kamera sieht

Mit der Computer-Vision-Technologie von Google Lens können Sie den Kontext zu dem finden, was Ihre Kamera sieht.
Sundar Pichai steht bei Google IO 2021 vor einem Google-Logo.
Diese Geschichte ist Teil unserer vollständigen Google I/O-Berichterstattung

Möchten Sie wissen, wie die Blume oder der Vogel heißt, denen Sie bei Ihrem Spaziergang durch einen Park begegnen? Bald wird Google Assistant es Ihnen mithilfe der Kamera und künstlicher Intelligenz sagen können.

Empfohlene Videos

Google hat sein Jahr 2017 in Schwung gebracht I/O-Konferenz rund um KI und maschinelles Lernen, und eine hervorgehobene Computer-Vision-Technologie ist Google Lens, das dies ermöglicht Die Kamera kann mehr als nur ein Bild aufnehmen – sie liefert einen besseren Kontext zu dem, was Sie sehen.

Kommt zu Google Assistant Und Google Fotos, die Google Lens-Technologie kann „verstehen, was Sie sehen, und Ihnen helfen, Maßnahmen zu ergreifen“, sagte Google-CEO Sundar Pichai während der Keynote. Wenn Sie beispielsweise die Kamera auf das Festzelt eines Konzertsaals richten, kann Ihnen Google Assistant mehr darüber sagen Interpreten und Musik abspielen, Ihnen beim Kauf von Tickets für die Show helfen und sie Ihrem Kalender hinzufügen – und das alles innerhalb eines Zeitraums einzelne App.

Wenn die Kamera auf ein unbekanntes Objekt gerichtet ist, kann Google Assistant Ihnen mithilfe der Bilderkennung sagen, um welches Objekt es sich handelt. Richten Sie es auf ein Ladenschild, und mithilfe der Standortinformationen können Sie aussagekräftige Informationen über das Unternehmen erhalten. All dies kann durch die „konversationale“ Sprachinteraktion des Benutzers mit Assistant erfolgen.

„Sie können Ihr Telefon darauf richten und wir können die harte Arbeit automatisch für Sie erledigen“, sagte Pichai.

Mit Google Lens, Ihrem Smartphone Die Kamera sieht nicht nur, was Sie sehen, sondern versteht auch, was Sie sehen, um Ihnen beim Handeln zu helfen. #io17pic.twitter.com/viOmWFjqk1

– Google (@Google) 17. Mai 2017

Wenn Sie die Übersetzer-App von Google verwenden, haben Sie bereits gesehen, wie die Technologie funktioniert: Platzieren Sie eine Kamera über einem Text und die App übersetzt ihn in eine Sprache, die Sie verstehen. Im Google Assistant geht Google Lens noch einen Schritt weiter. Das hat Google in einer Demonstration gezeigt Google Assistant übersetzt nicht nur fremden Text, sondern zeigt auch Bilder dessen an, was der Text beschreibt, um weitere Informationen bereitzustellen.

In einer Demo demonstrierte Scott Huffman, Google VP of Engineering für Assistant, wie Google Lens in Google integriert ist Der Assistent kann den japanischen Text eines Bildes übersetzen, aber auch weiteren Kontext zum Wort bereitstellen Ist.

Bilderkennungstechnologie ist nicht neu, aber Google Lens zeigt, wie fortschrittlich maschinelles Lernen wird. Pichai sagte, dass Google ebenso wie bei seiner Arbeit an der Sprache große Verbesserungen beim Sehen feststellt. Die Computer-Vision-Technologie hilft nicht nur dabei, etwas zu erkennen, sondern kann sogar dabei helfen, ein Bild zu reparieren oder zu verbessern. Haben Sie ein verschwommenes Foto vom Eiffelturm gemacht? Da der Computer das Objekt erkennt und weiß, wie es aussehen soll, kann er das Bild basierend auf dem, was bereits bekannt ist, automatisch verbessern.

„Wir können die Eigenschaften hinter einem Foto verstehen“, sagte Pichai. „Unsere Computer-Vision-Systeme sind jetzt bei der Bilderkennung sogar besser als Menschen.“

Sie müssen nicht mehr aufschreiben, was auf Ihren Urlaubsfotos zu sehen ist. Google VP Anil Sabharwal für Google Fotos zeigte, wie Google Lens Objekte auf einem Foto erkennen und relevante Informationen darüber anzeigen kann.

Damit Lens seine Aufgabe effektiv erfüllen kann, setzt Google eine hochentwickelte Rechenarchitektur ein Cloud Tensor Processing Unit (TPU)-Chipsätze, die das Training und die Inferenz für die Maschine übernehmen Lernen. Seine TPU-Technologie der zweiten Generation kann 180 Billionen Gleitkommaoperationen pro Sekunde verarbeiten; 64 TPU-Boards in einem Supercomputer können 11,5 Petaflops bewältigen. Mit dieser Rechenleistung kann die neue TPU sowohl Training als auch Inferenz gleichzeitig verarbeiten, was nicht der Fall war war in der Vergangenheit möglich (die vorherige TPU konnte nur Inferenzarbeiten verarbeiten, die komplexere jedoch nicht Ausbildung). Maschinelles Lernen braucht Zeit, aber diese Hardware wird dazu beitragen, den Aufwand zu beschleunigen.

Google Lens wird auch das nächste Update von Google Fotos unterstützen. Die Bilderkennung wird in Fotos bereits verwendet, um Gesichter, Orte und Dinge zu erkennen und so bei der Organisation und Suche zu helfen. Mit Google Lens kann Ihnen Google Fotos mehr Informationen über die Dinge auf Ihren Fotos liefern, z. B. den Namen und die Beschreibung eines Gebäudes; Durch Tippen auf eine Telefonnummer in einem Foto wird ein Anruf getätigt und weitere Informationen zu einem Kunstwerk angezeigt, das Sie auf einem Foto gesehen haben Museum, oder geben Sie das WLAN-Passwort sogar automatisch von einem Foto ein, das Sie von der Rückseite eines WLAN aufgenommen haben Router.

Sie hassen es, Passwörter für WLAN-Netzwerke einzugeben? Machen Sie ein Foto der WLAN-Einstellungen, und die Google Lens-Technologie über Google Fotos kann es automatisch für Sie eingeben.

Assistant und Fotos werden die ersten Apps sein, die Google Lens verwenden, es wird jedoch auch in anderen Apps eingeführt. Und mit der Ankündigung der Unterstützung von Assistant in iOS können iPhone-Nutzer auch die Google Lens-Technologie nutzen.

Empfehlungen der Redaktion

  • Nein, Sie benötigen Google Assistant wirklich nicht auf Ihrer Smartwatch
  • 5 Dinge, die wir gerne auf der Google I/O 2023 sehen würden (aber wahrscheinlich nicht sehen werden)
  • Google I/O 2023 findet am 10. Mai mit einer persönlichen Veranstaltung statt
  • iPhone 14 Pro vs. Der Kampf um die Kamera des Google Pixel 7 Pro ist unglaublich eng
  • Diese neue Funktion von Google Lens sieht aus, als wäre sie direkt einem Science-Fiction-Film entsprungen

Werten Sie Ihren Lebensstil aufDigital Trends hilft Lesern mit den neuesten Nachrichten, unterhaltsamen Produktrezensionen, aufschlussreichen Leitartikeln und einzigartigen Einblicken, den Überblick über die schnelllebige Welt der Technik zu behalten.