Mød Bixby, den virtuelle assistent, der driver Samsungs Galaxy S8

Injong Rhee, leder af R&D hos Samsung Mobile
Injong Rhee, leder af forskning og udvikling hos Samsung Mobile Communications Business Group, og hjernen bag Bixby, Samsungs personlige digitale assistent.Jeremy Kaplan/Digital Trends

Når Samsung lancerer Galaxy S8 og S8 Plus smartphones den 29. marts bliver holdet af virtuelle assistenter, der sigter på at gennemsøge din indbakke og rydde op i dit digitale liv, bare en lille smule mere overfyldt.

Alexa, Siri, Google Assistant, Cortana: Mød Bixby.

Der er et nyt navn i kunstige assistenter, men Samsung hævder, at denne ikke vil fortælle dig dumme vittigheder eller en vejrudsigt, og den vil heller ikke finde fakta for dig online. Denne smarte assistent er beregnet til at forbedre din interaktion med dit digitale liv - ikke kun dit smartphone men din vaskemaskine, din termostat, din støvsuger, alt. Det er intet mindre end en genovervejelse af, hvordan vi bruger vores ting.

Nok, det er dristige ord, men chefen for forskning og udvikling hos Samsung Mobile Communications Business Group tror på dem.

"Filosofisk set er det, vi ser på, at revolutionere grænsefladen," fortalte Injong Rhee til Digital Trends.

En del af det betyder, at rygterne er sande - det vil der være en dedikeret Bixby-knap på den Galaxy S8 og S8 Plus.

Men hvad laver assistenten? Og hvordan adskiller det sig fra alle de andre assistenter, der roder vores telefoner og vores liv, lytter med, kimer ind og kvidrer for at hjælpe os? For at finde ud af det fløj Digital Trends næsten 7.000 miles til Sydkorea for at tale naturlige sproggrænseflader og maskinlæring og for at besvare det mest vitale spørgsmål: Skal du aflevere din virtuelle dagsplanlægger Bixby?

Planlægning af AI-revolutionen

"Efter 10 år med smartphones venter endnu en revolution," forklarede Rhee. Vi var i et mødelokale i Digital City, et af forbrugerelektronikgigantens kontorkomplekser i Suwon, Sydkorea, cirka en halv time syd for Seoul.

Digital City er omkring to miles bred og spænder over flere kontortårne ​​og beboelsesbygninger. Den er lige så stor som en forskole og struktureret som en. Der er brede boulevarder, en friluftsplads kaldet Central Park (med indlagte fuglelyde!) og en kæmpe underjordisk shopping og boligkompleks, der rummer to fitnesscentre, afslapningszoner, en Samsung-butik, apoteker og detailkæder - endda en Dunkin' Donuts.

Samsung Suwon Sydkorea
Samsung Suwon Sydkorea
Samsung Suwon Sydkorea
Samsung Suwon Sydkorea

Omkring 20.000 mennesker arbejder i Digital City, de fleste pendler ind fra nærliggende forstæder. De spiser tre måltider om dagen i firmaets spisesale, svulmer gangene fra 11:30 til 1:30 til frokost, en hær af mennesker, der kigger på mobiltelefoner, arbejder på mobiltelefoner, planlægger nye mobiltelefoner, køber mobil telefoner.

Rhee har det gode udseende som en rockstjerne - og en klipning der matcher. Han er charmerende at lytte til, engagerer og brænder tydeligvis for Bixby, som han tror vil være et ekstraordinært værktøj. Ser du, maskinlæring driver hæren af ​​assistenter, der er dukket op i de seneste år, fra det superintelligente IBM Watson-system, der kan overliste skak-stormestre og drømme opretter sine egne opskrifter til mindre agile bots som Siri, den venlige assistent, der bor i din iPhone og laver aftaler for dig, fortæller dig, om du har brug for en jakke, og finder Information. Selvom maskinlæring er enormt vigtigt, har det været udfordringen at gøre den nyttig for forbrugerne.

Som Siri er til iPhone, eller Google Assistant er til en Pixel, vil Bixby være til Galaxy S8 - noget indbagt og nøglen til grænsefladen.

Glem Watson - det er en helt anden klasse af system. Assistenter rettet mod forbrugere som Alexa, Siri og Google Assistant (hvorfor ikke noget sødt navn, Google?) synes bedst egnede til at finde information, argumenterer Rhee: de hjælper dig ikke rigtig med at bruge din gadget. Tænk over udtrykket "brugergrænseflade": Bixby sigter mod at sætte "brugen" tilbage i den.

"Se på antallet af opgaver, nuværende agenter kan udføre," sagde Rhee. "Det er omkring hundrede. Vi kigger på at dække alt, hvad du kan gøre med en berøringskommando. Det er et meget ambitiøst mål."

Samsungs Galleri-app kan for eksempel udføre 300 opgaver, og der er omkring 15.000 måder, folk kan udføre disse opgaver med fingrene ved hjælp af menuer og så videre. Kom med stemmen, og det bliver kompliceret. Rhee sagde, at antallet af måder, folk kan tale disse kommandoer på, "varierer over millioner", og nutidens assistenter hjælper os ikke med at udføre langt de fleste ting, vi gerne vil med vores telefoner, meget mindre forstå de millioner af måder, vi kunne bede om hjælp til at gøre dem på.

Hvad kan Bixby gøre?

Her er sagen: Disse oplysninger er alle baseret på løfter fra Samsung. Virksomheden kunne ikke give os en masse konkrete svar på, hvad Bixby kan eller ikke kan, så vi må vente og se, hvornår det lanceres sammen med Galaxy S8.

Hvad vi ved er, at som Siri er til iPhone, eller Google Assistant er til en Pixel, vil Bixby være til Galaxy S8 - noget indbagt og nøglen til grænsefladen. Bixby kan udføre informationsforespørgselssøgninger, men i modsætning til disse andre er dens primære rolle at hjælpe dig med at bruge din telefon.

Bed Bixby om at finde det billede, du tog i sidste uge af en lyserød paraply, lys det lidt op, og e-mail det til fætter Fester, og det vil få det hele til at ske for dig. Samsung kalder det multimodal kapacitet, og en af ​​de smarte ting Bixby gør er at håndtere problemer i det. Når en kommando ikke indeholder tilstrækkelig information til, at assistenten kan fuldføre den, Bixby vil stadig tage brugeren så langt den kan, i stedet for at springe det hele over. Det vil oprette den e-mail og vedhæfte billedet, selvom det ikke genkender fætter Fester som Thelonious. [email protected].

Men for at gøre alt dette godt, skal det være i stand til at forstå naturligt sprog bedre end andre. Kan det så?

Injong Rhee præsenterer under 2016 Samsung Developer Conference.Samsung

"Ja med et udråbstegn!" Rhee fortalte os. Det skal selvfølgelig vise sig. Mens vi brugte en del tid på at tale med Rhee om assistenten, var Digital Trends endnu ikke i stand til at teste funktionaliteten selv.

Ved lanceringen vil der være 10 forudindlæste apps, som Bixby kan arbejde med, inklusive Galleri, Indhold, Indstillinger, Kamera og så videre. Forvent kalenderfunktionalitet i den anden bølge af Bixby-klare apps, som skulle komme en måned efter den første batch, og flere opdateringer følger inden for en lignende tidsramme. For at bruge tjenesten kan du blot tale med den ("Hej, Bixby!”), som du kan med andre assistenter, men Samsung mener, at det ikke er den mest intuitive måde at bruge en assistent på.

Bixby-knappen

I stedet mener Rhee, at alle Bixby-understøttende gadgets bør have en knap, uanset om det er en smartphone til walkie-talkie-kommunikation - i så fald er der ingen grund til at sige "hej Bixby", selvfølgelig - eller en vaskemaskine med en biometrisk fingeraftryksscanner, du trykker på, før du spørger Bixby at køre en tung cyklus med lav centrifugeringshastighed. Bixby kunne være overalt, limen, der holder sammen dit smartlife. Forestil dig en knap på siden af ​​din fjernbetjening, sagde Rhee: tryk på den for at bede din telefon om at finde det billede, du sendte fætter Fester, og smid det op på fjernsynet.

"Det starter med smartphones, men hvor som helst, der har en internetforbindelse og en mikrofon, kan Bixby bruges," forklarede han. "Der er en del af teknologien, som vi lægger i enheden, men meget af den lever i skyen."

Interfacet

Der er fire forskellige komponenter til Bixby, forklarer Rhee: Voice Agent, Vision, Home og Reminders. Voice agent er lige, hvad du ville forvente - tal med Bixby og du får et svar eller fuldfører en handling. Påmindelser er en anden ligetil. De to andre er mere komplekse.

Tænk over udtrykket "brugergrænseflade": Bixby sigter mod at sætte "brugen" tilbage i den.

Vision er Bixbys evne til at bruge et kamera til at genkende objekter - en flaske vin, for eksempel: Bixby vil vise flere knapper med etiketter, der beskriver det element, det ser (her er den maskinlæring en gang til). Tryk på vinknappen, og den fortæller dig, hvor du kan købe den beaujolais, og hvad den koster. Eller det kunne guddommelige interessepunkter eller genkende bøger og så videre.

Hvis du synes, det lyder bemærkelsesværdigt som Google Goggles, er du ikke alene. Vi vil se, hvordan Samsung udvikler denne funktion.

Så er der Bixby Home, som bor på skærmen til venstre for startskærmen. Ligesom Google-appen (tidligere Google Now) har den kort, der indeholder information samt forslag om ting, den ved, du kan lide at gøre, og Samsung planlægger at gøre den udvidelig og lade tredjeparter arbejde med det. Det vil kende konteksten, uanset om du er på arbejde eller hjemme. Et kort tryk på knappen bringer det frem, i modsætning til det lange tryk, der starter Bixby hører efter.

Viv Labs-forbindelsen

Samsung begyndte for alvor at arbejde på Bixby for omkring halvandet år siden, fortalte Rhee, men selskabet har selvfølgelig haft stemmegenkendelse og kontrol i årevis gennem S Voice-appen. S Voice laver standardassistent-tingene - den starter navigationen for at tage dig hjem eller fortælle dig vejret.

"Baseret på vores erfaring med S Voice overvejede vi seriøst at forny det, og virkelig ændre den filosofi og grundlaget bag dette for at gøre det meget nemmere for folk at adoptere,” Rhee sagde. "Og det var, da vi begyndte at arbejde på det her for omkring 18 måneder siden."

Bixby kan ikke alt, og det kan Samsung heller ikke - der var tydeligvis ingen grund for ingeniørteamet til at genopfinde hjulet. Google er virkelig god til at søge efter ting, for eksempel, og Rhees team arbejder på en smidig måde at aflevere en anmodning fra Bixby til Google. Det er her, Viv kommer ind.

"Vi bringer Viv Labs til at dyrke det økosystem på en skalerbar måde," forklarede han. Bixby har været undervejs i årevis, men det seneste opkøb af Viv – en virksomhed dannet af de mennesker, der skabte Siri – vil hjælpe med at gøre det fantastisk. Viv-teamet skabte ikke Bixby, men noget af det arbejde, de har udført på det seneste, især bestræbelser på at gøre assistenter udvidelige, vil hjælpe med at skelne dette værktøj.

"Viv Labs vil hjælpe med at udvide til et tredjeparts økosystem," sagde Rhee. "for at gøre det nemmere at eksponere funktioner og perfektionere oplevelsen for tredjeparter."

Så hvad er der med det navn?

Hvorfor Bixby, spørger du? Det ville være dejligt, hvis der var et interessant svar - hvis nogens onkel var Philip Bixby, eller en eller anden fyr reddede Rhees hund fra at drukne, og da han gik, kiggede han tilbage og hviskede "Bixby.”

Nix.

En gruppe kaldet Design Center fandt på navnet og trak det fra en shortlist på tre, skåret ned fra en liste på tusinder. Det er nemt at genkende fra et maskinperspektiv, idet det har det rigtige antal stavelser til genkendelse af hot-word. Det kan være mand eller kvinde, siger de, og er mere et efternavn end et fornavn. Det vil appellere til millennials, de tror, ​​en gruppe, der er meget venlig over for ny teknologi. Samsung bemærkede, at det også er navnet på en bro i San Francisco, som er lidt mere stemningsfuld: "bygge broer" mellem dine gadgets og smarte hjem og mellem maskine og menneske og alt det der.

Men før vi når til broen, er der stadig meget vejbane tilbage at bygge. Måske er det noget, Bixby kan hjælpe med? Bixby, er du der? Bixby?

Redaktørens anbefalinger

  • Operation Shush: Fremgangen og faldet for Samsungs uelskede Bixby-assistent