Rencontrez Bixby, l'assistant virtuel qui alimente le Galaxy S8 de Samsung

Lorsque Samsung lance le Smartphones Galaxy S8 et S8 Plus le 29 mars, l'équipe d'assistants virtuels chargée de parcourir votre boîte de réception et de ranger votre vie numérique sera un peu plus encombrée.

Alexa, Siri, Assistant Google, Cortana: Rencontre Bixby.

Il existe un nouveau nom pour les assistants artificiels, mais Samsung affirme que celui-ci ne vous racontera pas de blagues stupides ni de prévisions météorologiques, et ne recherchera pas non plus des informations en ligne pour vous. Cet assistant brillant est destiné à améliorer vos interactions avec votre vie numérique, pas seulement votre téléphone intelligent mais votre lave-linge, votre thermostat, votre aspirateur, tout. Il ne s’agit rien de moins que de repenser la façon dont nous utilisons nos produits.

Bien sûr, ce sont des mots audacieux, mais le responsable de la recherche et du développement du Samsung Mobile Communications Business Group les croit.

"Philosophiquement, ce que nous envisageons est de révolutionner l'interface", a déclaré Injong Rhee à Digital Trends.

Cela signifie en partie que les rumeurs sont vraies: il y aura un bouton Bixby dédié sur le Galaxie S8 et S8 Plus.

Mais que fait l’assistant? Et en quoi est-il différent de tous les autres assistants qui encombrent nos téléphones et nos vies, écoutant, sonnant et gazouillant pour nous aider? Pour le savoir, Digital Trends a parcouru près de 7 000 milles jusqu'en Corée du Sud pour parler des interfaces en langage naturel. et l'apprentissage automatique et pour répondre à la question la plus vitale: devriez-vous remettre votre agenda virtuel à Bixby ?

Planifier la révolution de l'IA

"Après 10 ans de smartphones, une autre révolution nous attend", a expliqué Rhee. Nous étions dans une salle de conférence à Digital City, l’un des complexes de bureaux du géant de l’électronique grand public à Suwon, en Corée du Sud, à environ une demi-heure au sud de Séoul.

La ville numérique s'étend sur environ trois kilomètres de large et s'étend sur plusieurs tours de bureaux et immeubles résidentiels. C’est aussi grand qu’une école préparatoire et structuré comme telle. Il y a de larges boulevards, une place en plein air appelée Central Park (avec des bruits d'oiseaux !) et un magasin souterrain géant et complexe résidentiel abritant deux centres de remise en forme, des zones de relaxation, un magasin Samsung, des pharmacies et des chaînes de vente au détail – et même un Dunkin’ Des beignets.

Environ 20 000 personnes travaillent dans la ville numérique, la plupart venant des banlieues voisines. Ils prennent trois repas par jour dans les réfectoires d'entreprise, gonflant les couloirs de 11h30 à 13h30 pour le déjeuner, et armée de personnes regardant des téléphones portables, travaillant sur des téléphones portables, planifiant de nouveaux téléphones portables, achetant des téléphones portables Téléphone (s.

Rhee a la beauté d'une rock star – et une coupe de cheveux assortie. Il est charmant à écouter, engageant et clairement passionné par Bixby, qui, selon lui, sera un outil extraordinaire. Vous voyez, l'apprentissage automatique alimente l'armée d'assistants qui ont fait leur apparition ces dernières années, du système super intelligent d'IBM Watson qui peut déjouer les grands maîtres d'échecs et les rêves. propose ses propres recettes à des robots moins agiles comme Siri, l'assistant convivial qui vit dans votre iPhone et fixe des rendez-vous pour vous, vous indique si vous avez besoin d'une veste et trouve information. Même si l’apprentissage automatique est extrêmement important, le défi est de le rendre utile aux consommateurs.

Oubliez Watson – c’est une toute autre classe de système. Les assistants destinés aux consommateurs comme Alexa, Siri et Google Assistant (pourquoi pas de joli nom, Google ?) semblent les mieux adaptés à la recherche d'informations, affirme Rhee: ils ne vous aident pas vraiment à utiliser votre gadget. Pensez au terme « interface utilisateur »: Bixby vise à y remettre le « usage ».

« Regardez le nombre de tâches que les agents actuels peuvent accomplir », a déclaré Rhee. « Il y en a une centaine environ. Nous cherchons à couvrir tout ce que vous pouvez faire avec une commande tactile. C’est un objectif très ambitieux.

L'application Galerie de Samsung peut effectuer 300 tâches, par exemple, et il existe environ 15 000 façons d'effectuer ces tâches avec les doigts, à l'aide de menus, etc. Apportez de la voix et ça devient compliqué. Rhee a déclaré que le nombre de façons dont les gens peuvent prononcer ces commandes « varie de plusieurs millions », et les assistants d’aujourd’hui ne nous aident pas à faire le travail. La grande majorité des choses que nous aimerions faire avec nos téléphones, et encore moins comprendre les millions de façons dont nous pourrions demander de l'aide pour les faire.

Que peut faire Bixby ?

Voici le problème: toutes ces informations sont basées sur les promesses de Samsung. La société n’a pas pu nous fournir beaucoup de réponses concrètes sur ce que Bixby peut ou ne peut pas faire, nous devrons donc attendre de voir quand il sera lancé aux côtés du Galaxy S8.

Ce que nous savons, c'est que comme Siri l'est pour l'iPhone ou Google Assistant pour un Pixel, Bixby sera pour le Galaxy S8 – quelque chose d'intégré et de clé de l'interface. Bixby peut effectuer des recherches de requêtes d'informations, mais contrairement aux autres, son rôle principal est de vous aider à utiliser votre téléphone.

Demandez à Bixby de retrouver la photo que vous avez prise la semaine dernière d'un parapluie rose, de l'égayer un peu et de l'envoyer par e-mail à Cousin Fester, et tout cela se produira pour vous. Samsung l'appelle capacité multimodale, et l'une des choses intelligentes Bixby ce qu'il fait, c'est bien gérer les problèmes qui s'y trouvent. Lorsqu'une commande ne contient pas suffisamment d'informations pour que l'assistant puisse la compléter, Bixby amènera toujours l'utilisateur aussi loin que possible, plutôt que de tout ignorer. Il créera cet e-mail et joindra la photo, même s'il ne reconnaît pas Cousin Fester comme étant Thelonious. [email protected].

Mais pour bien faire tout cela, il doit être capable de comprendre le langage naturel mieux que les autres. Alors, est-ce possible ?

"Oui avec un point d'exclamation!" Rhee nous l'a dit. Cela reste bien sûr à voir. Même si nous avons passé beaucoup de temps à discuter de l'assistant avec Rhee, Digital Trends n'était pas encore en mesure de tester nous-mêmes la fonctionnalité.

Au lancement, Bixby pourra utiliser 10 applications préchargées, notamment Galerie, Contenu, Paramètres, Appareil photo, etc. Attendez-vous à la fonctionnalité Calendrier dans la deuxième vague d'applications compatibles Bixby, qui devrait arriver un mois après le premier lot, et à d'autres mises à jour suivront dans un délai similaire. Pour utiliser le service, vous pouvez simplement lui parler (« Bonjour, Bixby! ») comme vous pouvez le faire avec d’autres assistants, mais Samsung pense que ce n’est pas la manière la plus intuitive d’utiliser un assistant.

Le bouton Bixby

Au lieu de cela, Rhee pense que tous les gadgets prenant en charge Bixby devraient avoir un bouton, qu'il s'agisse d'un smartphone pour une communication de type talkie-walkie - auquel cas il n'est pas nécessaire de dire « salut Bixby », bien sûr – ou une machine à laver avec un scanner biométrique d'empreintes digitales sur laquelle vous appuyez avant de demander Bixby pour exécuter un cycle intensif avec une faible vitesse d’essorage. Bixby pourrait être partout, le ciment qui unit votre vie intelligente. Imaginez un bouton sur le côté de votre télécommande, a déclaré Rhee: appuyez dessus pour demander à votre téléphone de trouver la photo que vous avez envoyée à Cousin Fester et affichez-la sur la télévision.

"Cela commence avec les smartphones, mais partout où il y a une connexion Internet et un microphone, Bixby peut être utilisé", a-t-il expliqué. "Nous avons intégré une partie de la technologie à l'appareil, mais une grande partie se trouve dans le cloud."

L'interface

Il existe quatre composants différents dans Bixby, explique Rhee: Voice Agent, Vision, Home et Reminders. L'agent vocal est exactement ce à quoi vous vous attendez: parlez-en Bixby et vous obtiendrez une réponse ou effectuerez une action. Les rappels en sont un autre simple. Les deux autres sont plus complexes.

La vision est la capacité de Bixby à utiliser un appareil photo pour reconnaître des objets – une bouteille de vin, par exemple: Bixby fera apparaître plusieurs boutons avec des étiquettes décrivant l'élément qu'il voit (voici cet apprentissage automatique encore). Appuyez sur le bouton du vin et il vous dira où vous pouvez acheter ce beaujolais et combien il coûte. Ou encore, il pourrait deviner des points d'intérêt, ou reconnaître des livres, etc.

Si vous pensez que cela ressemble remarquablement à Google Goggles, vous n'êtes pas seul. Nous verrons comment Samsung développe cette fonctionnalité.

Ensuite, il y a Bixby Home, qui se trouve sur l'écran à gauche de l'écran d'accueil. Comme l'application Google (anciennement Google Now), elle contient des cartes contenant des informations ainsi que des suggestions. sur les choses qu'il sait que vous aimez faire, et Samsung prévoit de le rendre extensible et de laisser des tiers travailler avec ça. Il connaîtra le contexte, que vous soyez au travail ou à la maison. Un appui court sur le bouton le fait apparaître, contrairement à un appui long qui démarre Bixby écoute.

La connexion Viv Labs

Samsung a commencé à travailler sérieusement sur Bixby il y a environ un an et demi, nous a dit Rhee, mais bien sûr, la société dispose de la reconnaissance et du contrôle vocal depuis des années via l'application S Voice. S Voice fait le travail d'assistant standard: il lancera la navigation pour vous ramener à la maison ou vous indiquera la météo.

"Sur la base de notre expérience avec S Voice, nous avons sérieusement envisagé de réorganiser cela, et vraiment changer cette philosophie et les fondements qui la sous-tendent pour permettre aux gens de l'adopter beaucoup plus facilement », Rhee dit. « Et c’est à ce moment-là que nous avons commencé à travailler là-dessus, il y a environ 18 mois. »

Bixby ne peut pas tout faire, et Samsung non plus – il n’y avait clairement aucune raison pour que l’équipe d’ingénierie réinvente la roue. Google est très doué pour rechercher des éléments, par exemple, et l'équipe de Rhee travaille sur un moyen fluide de transmettre une demande de Bixby à Google. C'est là qu'intervient Viv.

« Nous faisons appel à Viv Labs pour développer cet écosystème de manière évolutive », a-t-il expliqué. Bixby est en préparation depuis des années, mais le récent acquisition de Viv – une société formée par les personnes qui ont créé Siri – contribuera à le rendre formidable. L’équipe Viv n’a pas créé Bixby, mais une partie du travail réalisé récemment, notamment les efforts visant à rendre les assistants extensibles, contribuera à distinguer cet outil.

"Viv Labs va aider à se développer dans un écosystème tiers", a déclaré Rhee. "pour faciliter l'exposition des fonctions et perfectionner l'expérience pour les tiers."

Alors, c'est quoi ce nom ?

Pourquoi Bixby, demandez-vous? Ce serait génial s’il y avait une réponse intéressante – si l’oncle de quelqu’un était Philip Bixby, ou un gars a sauvé le chien de Rhee de la noyade, et alors qu'il s'éloignait, il s'est retourné et a murmuré "Bixby.”

Non.

Un groupe appelé Design Center a proposé ce nom et l'a retiré d'une liste restreinte de trois, réduite à partir d'une liste de milliers. Il est facile à reconnaître du point de vue d’une machine, car il dispose du bon nombre de syllabes pour la reconnaissance des mots chauds. Il peut être masculin ou féminin, disent-ils, et c'est plus un nom de famille qu'un prénom. Selon eux, cela plaira aux millennials, un groupe très favorable aux nouvelles technologies. Samsung a noté que c'est aussi le nom d'un pont à San Francisco, qui est un peu plus évocateur: « construire des ponts » entre vos gadgets et la maison intelligente et entre la machine et l'humain et tout ça.

Mais avant d’arriver au pont, il reste encore beaucoup de route à construire. C'est peut-être quelque chose pour lequel Bixby peut vous aider? Bixby, es-tu là? Bixby?

Recommandations des rédacteurs

• Opération Shush: l’ascension et la chute de l’assistant Bixby mal-aimé de Samsung