Lernen Sie Bixby kennen, den virtuellen Assistenten für das Samsung Galaxy S8

Wenn Samsung das auf den Markt bringt Galaxy S8- und S8 Plus-Smartphones Am 29. März wird es für das Team virtueller Assistenten, die Ihren Posteingang durchsuchen und Ihr digitales Leben aufräumen sollen, noch etwas voller.

Alexa, Siri, Google Assistant, Cortana: Treffen Bixby.

Es gibt einen neuen Namen für künstliche Assistenten, aber Samsung argumentiert, dass dieser Ihnen keine dummen Witze oder eine Wettervorhersage erzählen und auch keine Fakten für Sie online nachschlagen wird. Dieser intelligente Assistent soll Ihre Interaktionen mit Ihrem digitalen Leben verbessern – nicht nur mit Ihrem eigenen Smartphone aber Ihre Waschmaschine, Ihr Thermostat, Ihr Staubsauger, alles. Es ist nichts weniger als ein Umdenken darüber, wie wir unsere Sachen nutzen.

Sicher, das sind gewagte Worte, aber der Forschungs- und Entwicklungsleiter der Samsung Mobile Communications Business Group glaubt ihnen.

„Philosophisch geht es uns um eine Revolutionierung der Benutzeroberfläche“, sagte Injong Rhee gegenüber Digital Trends.

Ein Teil davon bedeutet, dass die Gerüchte wahr sind – es wird sie geben eine spezielle Bixby-Taste auf der Galaxy S8 und S8 Plus.

Aber was macht der Assistent? Und wie unterscheidet es sich von all den anderen Assistenten, die unsere Telefone und unser Leben vollstopfen, indem sie zuhören, sich einmischen und zwitschern, um uns zu helfen? Um das herauszufinden, flog Digital Trends fast 7.000 Meilen nach Südkorea, um über Schnittstellen in natürlicher Sprache zu sprechen und maschinelles Lernen und um die wichtigste Frage zu beantworten: Sollten Sie Ihren virtuellen Tagesplaner weitergeben? Bixby?

Planung der KI-Revolution

„Nach 10 Jahren Smartphones wartet eine weitere Revolution“, erklärte Rhee. Wir befanden uns in einem Konferenzraum in Digital City, einem Bürokomplex des Unterhaltungselektronikriesen in Suwon, Südkorea, etwa eine halbe Stunde südlich von Seoul.

Digital City ist etwa drei Kilometer breit und erstreckt sich über mehrere Bürotürme und Wohngebäude. Es ist so groß wie eine Privatschule und auch so aufgebaut. Es gibt breite Boulevards, einen Open-Air-Platz namens Central Park (mit eingespielten Vogelstimmen!) und eine riesige unterirdische Einkaufs- und Einkaufsmeile Wohnkomplex mit zwei Fitnesscentern, Entspannungszonen, einem Samsung-Store, Drogerien und Einzelhandelsketten – sogar einem Dunkin‘ Donuts.

Etwa 20.000 Menschen arbeiten in Digital City, die meisten davon pendeln aus den umliegenden Vororten. Sie essen drei Mahlzeiten am Tag in den Speisesälen des Unternehmens und füllen die Flure von 11:30 bis 13:30 Uhr zum Mittagessen Heer von Menschen, die sich Mobiltelefone ansehen, an Mobiltelefonen arbeiten, neue Mobiltelefone planen, Mobiltelefone kaufen Telefone.

Rhee hat das gute Aussehen eines Rockstars – und einen passenden Haarschnitt. Man hört ihm charmant zu, ist engagiert und hat eindeutig eine Leidenschaft für Bixby, von dem er glaubt, dass es ein außergewöhnliches Werkzeug sein wird. Sie sehen, maschinelles Lernen treibt die Armee von Assistenten an, die in den letzten Jahren aufgetaucht sind, vom superintelligenten IBM Watson-System, das Schachgroßmeister und -träume überlisten kann seine eigenen Rezepte an weniger agile Bots wie Siri weiter, den freundlichen Assistenten, der in Ihrem iPhone lebt und Termine für Sie vereinbart, Ihnen sagt, ob Sie eine Jacke brauchen, und findet Information. Obwohl maschinelles Lernen enorm wichtig ist, besteht die Herausforderung darin, es für Verbraucher nutzbar zu machen.

Vergessen Sie Watson – das ist eine ganz andere Klasse von Systemen. An Verbraucher gerichtete Assistenten wie Alexa, Siri und Google Assistant (warum kein süßer Name, Google?) scheinen am besten zum Nachschlagen von Informationen geeignet zu sein, argumentiert Rhee: Sie helfen Ihnen nicht wirklich bei der Verwendung Ihres Gadgets. Denken Sie über den Begriff „Benutzeroberfläche“ nach: Bixby möchte den „Gebrauch“ wieder in ihn einbauen.

„Sehen Sie sich die Anzahl der Aufgaben an, die aktuelle Agenten ausführen können“, sagte Rhee. „Es sind ungefähr hundert. Wir möchten alles abdecken, was Sie mit einem Touch-Befehl tun können. Das ist ein sehr ehrgeiziges Ziel.“

Die Galerie-App von Samsung kann beispielsweise 300 Aufgaben erledigen, und es gibt etwa 15.000 Möglichkeiten, diese Aufgaben mithilfe von Menüs usw. mit den Fingern auszuführen. Bringen Sie Ihre Stimme mit und es wird kompliziert. Rhee sagte, die Anzahl der Möglichkeiten, wie Menschen diese Befehle aussprechen können, „variiert über Millionen“, und die heutigen Assistenten helfen uns nicht dabei Die überwiegende Mehrheit der Dinge, die wir gerne mit unseren Telefonen erledigen würden, und noch weniger verstehen wir die Millionen von Möglichkeiten, wie wir um Hilfe dabei bitten können.

Was kann Bixby tun?

Hier ist die Sache: Diese Informationen basieren alle auf Versprechen von Samsung. Das Unternehmen konnte uns nicht viele konkrete Antworten darauf geben, was Bixby kann und was nicht, daher müssen wir abwarten, wann es zusammen mit dem Galaxy S8 auf den Markt kommt.

Was wir wissen ist, dass Bixby für das Galaxy S8 so sein wird wie Siri für das iPhone oder Google Assistant für ein Pixel – etwas, das in die Benutzeroberfläche integriert und von zentraler Bedeutung ist. Bixby kann Informationsabfragen durchführen, aber im Gegensatz zu den anderen besteht seine Hauptaufgabe darin, Sie bei der Verwendung Ihres Telefons zu unterstützen.

Bitten Sie Bixby, das Foto von einem rosa Regenschirm zu finden, das Sie letzte Woche aufgenommen haben, es etwas aufzuhellen und es per E-Mail an Cousin Fester zu senden, dann wird das alles für Sie erledigt. Samsung nennt es Multimodalität und eines der cleveren Dinge Bixby ist, gut mit den darin enthaltenen Problemen umzugehen. Wenn ein Befehl nicht genügend Informationen enthält, damit der Assistent ihn ausführen kann, Bixby wird den Benutzer trotzdem so weit wie möglich bringen, anstatt die ganze Sache zu überspringen. Es wird diese E-Mail erstellen und das Foto anhängen, auch wenn Cousin Fester nicht als Thelonious erkannt wird. [email protected].

Aber um das alles gut zu machen, muss es in der Lage sein, natürliche Sprache besser zu verstehen als andere. Kann es also?

„Ja mit Ausrufezeichen!“ Rhee hat es uns erzählt. Das bleibt natürlich abzuwarten. Während wir viel Zeit damit verbracht haben, mit Rhee über den Assistenten zu sprechen, war Digital Trends noch nicht in der Lage, die Funktionalität selbst zu testen.

Beim Start wird es 10 vorinstallierte Apps geben, mit denen Bixby arbeiten kann, darunter Galerie, Inhalte, Einstellungen, Kamera usw. Erwarten Sie die Kalenderfunktionalität in der zweiten Welle Bixby-fähiger Apps, die einen Monat nach der ersten Charge verfügbar sein soll, und weitere Updates, die in einem ähnlichen Zeitraum folgen werden. Um den Dienst zu nutzen, können Sie ihn einfach ansprechen („Hallo, Bixby!“) wie bei anderen Assistenten möglich, aber Samsung ist der Meinung, dass dies nicht die intuitivste Art ist, einen Assistenten zu verwenden.

Der Bixby-Button

Stattdessen ist Rhee der Meinung, dass alle Bixby-unterstützenden Geräte einen Knopf haben sollten, egal ob es sich um ein Smartphone für die Kommunikation im Walkie-Talkie-Stil handelt – In diesem Fall ist es natürlich nicht nötig, „Hallo Bixby“ zu sagen – oder eine Waschmaschine mit einem biometrischen Fingerabdruckscanner, auf den man drückt, bevor man fragt Bixby um einen intensiven Waschgang mit niedriger Schleuderdrehzahl durchzuführen. Bixby könnte überall sein, der Klebstoff, der Ihr Smartlife zusammenhält. Stellen Sie sich einen Knopf an der Seite Ihrer Fernbedienung vor, sagte Rhee: Drücken Sie ihn, um Ihr Telefon aufzufordern, das Foto zu finden, das Sie Cousin Fester geschickt haben, und es auf den Fernseher zu werfen.

„Das fängt bei Smartphones an, aber überall dort, wo es eine Internetverbindung und ein Mikrofon gibt, kann Bixby verwendet werden“, erklärte er. „Es gibt einen Teil der Technologie, die wir in das Gerät stecken, aber ein großer Teil davon befindet sich in der Cloud.“

Die Schnittstelle

Rhee erklärt, dass Bixby aus vier verschiedenen Komponenten besteht: Voice Agent, Vision, Home und Reminders. Der Sprachagent ist genau das, was Sie erwarten – sprechen Sie mit ihm Bixby und Sie erhalten eine Antwort oder führen eine Aktion aus. Erinnerungen sind eine weitere einfache Möglichkeit. Die anderen beiden sind komplexer.

Vision ist Bixbys Fähigkeit, mithilfe einer Kamera Objekte zu erkennen – zum Beispiel eine Flasche Wein: Bixby werden mehrere Schaltflächen mit Beschriftungen angezeigt, die das angezeigte Element beschreiben (hier ist das maschinelle Lernen). wieder). Drücken Sie den Weinknopf und Sie erfahren, wo Sie diesen Beaujolais kaufen können und was er kostet. Oder es könnte interessante Punkte erraten, Bücher erkennen und so weiter.

Wenn Sie der Meinung sind, dass dies bemerkenswert ähnlich zu Google Goggles klingt, sind Sie nicht allein. Wir werden sehen, wie Samsung diese Funktion entwickelt.

Dann gibt es noch Bixby Home, das auf dem Bildschirm links vom Startbildschirm angezeigt wird. Wie die Google-App (ehemals Google Now) verfügt sie über Karten, die sowohl Informationen als auch Vorschläge enthalten über Dinge, von denen es weiß, dass Sie sie gerne tun, und Samsung plant, es erweiterbar zu machen und Dritte arbeiten zu lassen damit. Es kennt den Kontext, egal ob Sie bei der Arbeit oder zu Hause sind. Ein kurzer Druck auf die Taste ruft sie auf, im Gegensatz zu einem langen Druck, der sie startet Bixby Hören.

Die Viv Labs-Verbindung

Laut Rhee hat Samsung vor etwa anderthalb Jahren begonnen, ernsthaft an Bixby zu arbeiten, aber natürlich verfügt das Unternehmen schon seit Jahren über Spracherkennung und -steuerung über die S Voice-App. S Voice erledigt die üblichen Assistentenaufgaben – es startet die Navigation, um Sie nach Hause zu bringen, oder teilt Ihnen das Wetter mit.

„Aufgrund unserer Erfahrung mit S Voice haben wir ernsthaft darüber nachgedacht, das zu überarbeiten, und zwar wirklich Wir haben die Philosophie und die Grundlage dahinter geändert, um es den Menschen viel einfacher zu machen, sie zu übernehmen“, sagt Rhee sagte. „Und da haben wir vor etwa 18 Monaten begonnen, daran zu arbeiten.“

Bixby kann nicht alles und Samsung auch nicht – es gab eindeutig keinen Grund für das Ingenieursteam, das Rad neu zu erfinden. Google ist zum Beispiel wirklich gut darin, nach Dingen zu suchen, und Rhees Team arbeitet an einer reibungslosen Weiterleitung einer Anfrage Bixby googeln. Hier kommt Viv ins Spiel.

„Wir bringen Viv Labs dazu, dieses Ökosystem auf skalierbare Weise auszubauen“, erklärte er. Bixby ist schon seit Jahren in der Entwicklung, aber seit Kurzem Übernahme von Viv – ein Unternehmen, das von den Menschen gegründet wurde, die Siri entwickelt haben – wird dazu beitragen, dass es großartig wird. Das Viv-Team hat Bixby nicht entwickelt, aber einige der Arbeiten, die sie in letzter Zeit geleistet haben, insbesondere die Bemühungen, Assistenten erweiterbar zu machen, werden dazu beitragen, dieses Tool von anderen abzuheben.

„Viv Labs wird bei der Expansion in ein Drittanbieter-Ökosystem helfen“, sagte Rhee. „um es einfacher zu machen, Funktionen verfügbar zu machen und das Erlebnis für Dritte zu perfektionieren.“

Was hat es also mit diesem Namen auf sich?

Warum Bixby, fragen Sie? Es wäre großartig, wenn es eine interessante Antwort gäbe – wenn jemandes Onkel Philip wäre Bixby, oder irgendein Typ rettete Rhees Hund vor dem Ertrinken, und als er wegging, schaute er zurück und flüsterte „Bixby.”

Nein.

Eine Gruppe namens Design Center hat sich den Namen ausgedacht und ihn aus einer Auswahlliste von drei Personen ausgewählt und aus einer Liste von Tausenden zusammengestrichen. Aus maschineller Sicht ist es leicht zu erkennen, da es die richtige Anzahl an Silben für die Erkennung von Schlagwörtern hat. Es könne männlich oder weiblich sein, heißt es, und sei eher ein Nachname als ein Vorname. Ihrer Meinung nach wird es die Millennials ansprechen, eine Gruppe, die neuen Technologien gegenüber sehr freundlich eingestellt ist. Samsung bemerkte, dass es sich auch um den Namen einer Brücke in San Francisco handelt, die etwas eindrucksvoller ist: „Brücken bauen“ zwischen Ihren Geräten und dem Smart Home sowie zwischen Maschine und Mensch und all dem.

Doch bevor wir zur Brücke kommen, müssen noch viele Straßen gebaut werden. Vielleicht kann Bixby dabei helfen? Bixby, Bist du da? Bixby?

Empfehlungen der Redaktion

• Operation Shush: Der Aufstieg und Fall von Samsungs ungeliebtem Bixby-Assistenten