Testisime Google Duplexi, telefonikõnede tehisintellekti, mis tuleb sel suvel

New Yorgi Tai restorani vastuvõtulauas töötades võtsin telefoni, võtsin broneeringu maha ja katkestasin toru. Sürrealistlik oli esimene sõna, mis hiljem meelde tuli, mitte sellepärast, et teesklesin, et töötan a restoranis, kuid ma just rääkisin ja broneerisin laua kunstlikult intelligentsest Google'ist Assistent.

Sisu

  • Mis on Duplex ja kus see töötab?
  • Demo
  • Kuidas Duplex töötab
  • "Umm" ja "ahs"
  • Mugavus

Ma ei saanud lahti mõttest, et hääl teises otsas ei olnud elusolend, isegi kui see oli vaid kaheminutiline vestlus. See ei tähenda, et assistent poleks veenev; kui see mulle ei räägiks (ja kui ma poleks demokeskkonnas), poleks ma palju mõelnud vahetusele sellega, mis teises otsas kõlas nagu teine ​​inimene.

Soovitatavad videod

Minu korraldatud robotite vahetus oli osa pressidemost Google'i duplekstehnoloogia, teatati esmakordselt ettevõtte I/O-l mais toimuval arendajate konverentsil. See võimaldab inimestel broneerida restoranis laud, leppida kokku juukselõikusaeg ja uurida kaupluse lahtiolekuaegu

Google'i assistent. The hääleassistent helistab restorani või poodi – pärast seda, kui esitate oma telefonist või assistendi toega nutikõlarist päringu, näiteks Google Home – ja mõne minuti pärast saate teate, mis kinnitab, et teie plaanid on ametlikult broneeritud (või kui kõnet ei õnnestunud lõpetada).

Seotud

  • Panin iPhone'i Dynamic Islandi oma Pixel 7 Pro-le ja ma ei saa tagasi minna
  • Andsin Pixel 7 Prole teise võimaluse – see ei läinud nii, nagu lootsin
  • Kas Google'i Pixel 6 Pro kaamera võidab Samsung Galaxy S21 Ultra? sain teada
Google Duplex Android-telefonis
Julian Chokkattu/Digitaalsed trendid

I/O demo oli äge, kuid ei olnud vastuoluline. Tõstatati muret: miks pidi tehisintellekt kõlama nii elutruult ja miks ei teatanud see inimhelistajale lahtiütlemist, mis on mõne arvates pettus. Ja kuna kõne salvestati, kahtlesid mõned, kas see tehnoloogia rikub teatud telefonikõnesid reguleerivaid seadusi.

Sellest ajast alates on Google oma seisukohta selgitanud ja meil on nüüd mõned vastused. Digital Trends veetis mõnda aega koos meeskonnaga Dupleks ja demosime tehnoloogiat enda jaoks. Kuid enne oma kogemustesse sukeldumist heidame pilgu uutele üksikasjadele, millest oleme aru saanud selle kohta, kuidas ja kus Duplex töötab.

Mis on Duplex ja kus see töötab?

Duplex on väljatöötamisel olev tehnoloogia, mis võimaldab Google'i assistendil teha kasutaja telefonikõnesid ja see tuleneb aastatepikkusest loodusliku keele tehisintellekti uurimisest ja tööst töötlemine.

"Nüüd saame aru loomulikust kõnest ja saame luua loomulikku kõnet," ütles Google'i tootehalduse asepresident Nick Fox. "Neid tehnoloogiaid rakendatakse Duplexiga, et pidada loomulikku ja kaasahaaravat vestlust, mis kohandub vestluses toimuvaga, eesmärgiga lõpuks asjad tehtud saada."

Google Duplex planeerib juuksuri kohtumiseGoogle

Google'i eesmärk on assistendi jaoks aidata teil asju korda saata ja Duplexiga alustab ettevõte kolm konkreetset ülesannet: laua broneerimine restoranis, kaupluse lahtiolekuaegade leidmine ja juuksurisalongi ajakava koostamine kohtumine. Duplex ei saa praegu midagi enamat teha, nii et kui päring pole asjakohane (näiteks ilmateate või sporditulemuste kohta), ei saa assistent aru. Samamoodi ei saa kasutaja paluda assistendil helistada, mis ei ole seotud ülalnimetatud ülesannetega.

See võib säästa palju aega töötajate jaoks, kes ei vasta kaupluse lahtiolekuaegadega seotud kõnedele.

Kasutaja jaoks vabastab assistendi kõnede tegemine veidi aega, kuid see on kasulik ka ettevõtetele, kes neid kõnesid vastu võtavad. Näiteks kui helistaja küsib assistendilt kohaliku poe pühadeaegu, helistab assistent, saab vastuse ja tunnid lisatakse Google kaardid ja Google'i otsing, mille kõrval on kinnitatud silt.

Kui teised helistajad soovivad sama teavet teada saada, peaks assistent selle teabe põhjal selle teabe hankima ainult Google'i serveritest, mitte uuesti helistama. Assistendi küsimiseks kulub vaid üks inimene, kuid see võib säästa palju aega nende töötajate jaoks, kes muidu jääksid poe lahtiolekuaegadega seotud kõnedele vastama.

Google'i selle suve testimise etapis töötab Duplex ainult valitud ettevõtete ja kasutajatega USA-s ja see on saadaval ainult restoranides ja juuksurisalongides, millel pole veebipõhist broneeringut süsteem. Google'i assistent juba töötab OpenTable'iga, seega ei pea helistama restoranidesse, mis kasutavad broneerimisteenust.

Google testib tööajal tehtavaid kõnesid esmalt järgmistel nädalatel ning hiljem sel suvel laieneb test ka broneeringute ja juukselõikusaegade jaoks helistamisele. Selle perioodi jooksul tehakse palju katsetamist ja kohandamist, nii et Duplexi lõpptulemus võib veidi erineda sellest, mida oleme juba näinud. Ettevõtted saavad loobuda, kui nad ei soovi Google'i assistendilt kõnesid vastu võtta.

Google

"See, mida te näete, on tehnoloogia, mis on väga varajases staadiumis, " ütles Fox. "Me tahame sellest avalikult rääkida isegi praeguses etapis, et veenduda, et saame asja õigesti aru, kuid te näete siin midagi üsna varajases protsessis."

Demo

Demokogemus, mis toimus kl Thep Tai New Yorgi Upper East Side'i naabruses, oli tugevalt kontrollitud. Esiteks tegi Google esitluse, mis näitab kõne tegemise ja lõpetamise üldist protsessi, kuid tegelikult kasutab tehnoloogiat reaalajas. Insener andis Duplexile ette broneerimiseks soovitatud aja ja peo suuruse ning see järgnes järgmiselt.

Idee on selles, et räägiksite Google'i assistendile oma telefonis või Google Home et soovite „broneerida Thep Thais laua kahele kell 20.00. homme." Assistent küsib, kas on okei broneerida aega alates kella 20.00-st. kuni 21.00. juhuks kui kell 20.00 laudu pole ja pärast kinnitamist teatab, et helistab restorani ja võtab teiega ühendust varsti.

Kui restorani töötaja telefoni võtab, ütleb assistent järgmist või midagi sarnast: „Tere, ma helistan, et broneerida. Olen Google'i automaatne broneerimisteenus, nii et salvestan kõne. Kas ma saan neljapäevaks laua broneerida?”

Kõne salvestatakse, et Google'i operaatorid saaksid salvestust tagasi kuulata, vestlusele märkmeid teha ja Duplexi tehtud vead esile tõsta, et teenust paremaks muuta.

Duplexi viimine tasemele, kus see praegu on, algas suure käsitsi- ja inimtööga.

Assistent vastab igale esitatud küsimusele – näiteks mis kellaaeg on broneeritud, kui palju inimesed on peol ja broneeringu nimi – ja vestlus viisakalt ja kiiresti lõpeb. Kui talt küsitakse teavet, näiteks kasutaja e-posti aadressi, ütleb assistent, et tal pole luba seda teavet esitada.

Isik, kes broneeris Assistendi kaudu broneeringu, saab nüüd teate, et laud on reserveeritud, ja see lisatakse automaatselt Google'i kalendrisse. Enne broneerimist saab kasutaja märguande ja võimaluse kohtumine tühistada, kui ta enam ei saa. Thep Thai restoraniomanik ütles, et paljud inimesed teevad broneeringu ja ei ilmu siis kohale. Ta loodab, et see süsteem, mis pakub lihtsat võimalust broneeringu tühistamiseks, tähendab vähem tühje laudu.

Pärast peamist demo lubas Google meil seda proovida. Kui võtsime kõne vastu, proovisime Duplexi komistada ja tekitasime mõningaid tüsistusi, kuid assistent sai nendega hästi hakkama. Palusime sellel vestluse alguses kinni pidada – millele ta vastas pigem "mhmm", mitte suulise "jah". Kui me seda ütlesime, 6 p.m. broneerimisaeg oli täis, assistent vastas vahemikus 18:00. ja 20:00 ning see leppis meie kella 19:45-ga. soovitus. Seejärel küsisime broneeringu jaoks nime ja telefoninumbrit ning seda, kas assistent oskab nime kirjutada, mida ta ka tegi.

Google Duplex planeerib restorani broneeringuGoogle

On muljetavaldav, kui hästi assistent oma demosid järjekindlalt käsitles, kuigi me kogesime hetke, mil ta pidi inimoperaatori peale tagasi kukkuma. See juhtus siis, kui keegi küsis, kas assistendi kliendil on restoranist meilide saamine kõik korras. Sõnastus oli veidi kohmakas ja assistent vastas: "Vabandage, ma arvan, et läksin segadusse" ja ütles, et see paneb juhendaja liinile. Inimoperaator võttis kiiresti üle, ütles helistajale, et ta ei saa e-posti aadressi avaldada, ja lõpetas broneeringu broneerimise.

Kuidas Duplex töötab

Duplexi varased testversioonid, mida Google meie jaoks mängis, kõlasid uskumatult robotlikult. Siiski sai assistent siiski aru vestluse pausidest ja isegi ütles: „Tere?” kui restorani töötaja mõne sekundi pausi tegi. Sellegipoolest ütles Scott Huffman, Google'i assistendi projekteerimise asepresident, et seda oli "valus kuulata".

Kui süsteem tõesti ei tea, mida edasi teha, kummardub see kõnest graatsiliselt ja inimoperaator võtab juhtimise üle.

Duplexi viimine tasemele, kus see praegu on, algas suure käsitsi- ja inimtööga. Inimoperaatorid helistasid restoranidesse, märkisid vestlusi ja edastasid tulemused Duplexi. Meeskond seoks fraasid nagu "mitu inimest" ja selle variatsioonid fraasiga "inimeste arv erakonnas", võimaldades Duplexil küsimusest aru saada.

Teine etapp hõlmas inimoperaatoreid, kes kuulasid assistendi kõnesid ja kui asjad läksid rööbastelt kõrvale, hüppas operaator kõne üle ja veendus, et kõne õnnestub. See võimaldas meeskonnal tuvastada teenuse ümberkaudsed servad, märkida need vestlused ja anda need tagasi masinõppe algoritmidesse, et Duplex saaks õppida.

Testimise viimane etapp on automatiseeritud režiim, kus automatiseeritud süsteem teeb kõned ja lõpetab need. Süsteemi sisseehitatud evakuatsiooniluugid võimaldavad assistendil hüpata tagasi ülesande täitmise põhieesmärgi juurde tänu sellistele lausetele nagu „Ma pole kindel, mida sa ütlesid. aga kas ma saan broneerida laua kolmele. Kui süsteem tõesti ei tea, mida edasi teha, kummardub see vestlusest graatsiliselt välja ja operaator võtab läbi.

Keynote (Google I/O '18)

Hetkel ütles Huffman, et umbes neli viiest Duplexi kõnest ei vaja operaatori abi. Huvitaval kombel ütles ta, et inimoperaatoreid ei hakata Duplexi paremaks muutudes teenusest eemale tõmbama, kuna Google näeb neid lahutamatu osana Duplexi tõrgeteta töötamise tagamisel.

"Umm" ja "ahs"

Kogu assistendi õpetamise protsessis pani Google rõhku sellele, et see kõlaks loomulikumalt ja vähem nagu robot. Pärast Google I/O demot küsisid kriitikud, miks Google üritab assistendi loomiseks segada "ums ja ahs" kõlab inimlikumalt, eriti kui see ei lisanud kõne algusesse lahtiütlemist, et see pole inimene. Praegu on lahtiütlemisi, kuid Huffman ütles, et vestluse jätkamiseks lisati kõnehäired, nagu "um" või "mhm".

Assistent lisas sõna „hm”, kui ta ei kuulnud, mida restorani töötaja ütles, ja täitis oma taotluse uuesti.

"Me ei püüa petta ega kehastada, aga kui te lähete tagasi selle valusa varajase süsteemi salvestuse juurde, siis see ei kõlanud väga loomulikult ega väga inimlikult," ütles Huffman. «Aga sellest tulenevalt ei olnud assistent ülesannete täitmisel kuigi edukas. Paljud inimesed katkestasid kõne või jäid segadusse sellest, millega nad rääkisid, kuid vestlus katkes, sest see ei tundunud loomulik."

Huffman ütles, et kõnehäired on vastavalt keeleteadlased, on kahe inimese vahelise inimliku vestluse hoidmise võtmeosa. Assistendiga vestlusi kuulates on lihtne näha, kui hästi see toimib, ja tulemused on algsest salvestusest kaugel.

Üks võimalus kõnehäiretest aitab on vestluse tunnustamine, näiteks kui üks inimene räägib, aga sina tahad veenduge, et vastuvõtja teaks, et olete endiselt seotud ja kuulate, näiteks kui assistent ütles meile „mhmm”, kui tal paluti hoia.

google duplex kasutab io2018 2835
google duplex kasutab io2018 2836

Veel üks kasulik tööriist on öelda „hm”, kui on ebakindlust, mis on viisakas viis selgituste küsimiseks. Assistent lisas sõna „hm”, kui ta ei kuulnud, mida restorani töötaja ütles, ja täitis oma taotluse uuesti.

Nende kõnehäiretega assistent on terav kontrast algse robot-assistendiga. On palju vähem külm ja vestlus kulges palju kiiremini. Ja selle asemel, et vastu võtta lihtsaid käske, suhtleb assistent inimestega meie keele kaudu, mis kindlasti erutab mõnda ja hirmutab teisi.

Mugavus

Dupleks on mugavus. See säästab teie aega, annab teile täpsemad lahtiolekuajad ja võib säästa ka ettevõtete aega. Google ütles ka, et siin on suur võimalus aidata inimesi, kes ei oska rääkida või kellel on rääkimisega probleeme.

Huffman ütles, et mõelda Duplexile kui mineviku automatiseeritud kõneseadmete arengule, nagu näiteks panka helistades, kui paremale jõudmiseks vajutati numbreid aeglaselt osakond.

"Kui helistate täna nendele lennufirmadele või pankadele, saate midagi palju-palju toredamat," ütles ta. "Te kuulete palju loomulikuma kõlaga häält ja see võib öelda midagi sellist: "Ütle mulle, mida vajate, võite öelda näiteks, mis kell on minu lend?" Duplex, me liigume sama ideega sammu edasi, arendades vestlust ja muutes selle loomulikumaks, et see oleks edukam kasutajatele ja ettevõtted.”

Seni nähtu põhjal on see paljulubav tehnoloogia, kuid kas me peaksime seda omaks võtma või kartma?

Google ei ole meile näidanud, kuidas Duplex helistab ettevõtetele kaupluste lahtiolekuaegadel, ega ole demoseerinud juukselõikuskohtumiste ajastamist – seega ei saa me kommenteerida, kui hästi Duplex sellistel juhtudel töötaks. Samuti pole me kindlad, kas operaatoritel on juurdepääs teie telefoninumbrile ja täisnimele, kuna see kujutab endast teatud privaatsusriski. Samuti mõtleme, kas Duplex toetaks tulevikus mitut keelt. Oleme võtnud ühendust Google'iga, et kontrollida mõningaid vastamata küsimusi, kuid loomulikult tekib tehnoloogia arenedes neid kindlasti rohkem.

Seni nähtu põhjal on see paljulubav tehnoloogia, kuid kas me peaksime seda omaks võtma või kartma? Oleme õnnelikud, kui meid ei pea enam kunagi tundideks ootele panema, kuid siin on oluline arvestada trajektoori. Me liigume pidevalt tuleviku poole, kus me ei pea kellegagi rääkima, kus saate elada eraldi korteris ja toit tuuakse teile kohale; droonide poolt maha visatud pakid ja tuhandeid tunde meediat tarbimiseks, ilma et peaksite kordagi välja astuma.

Kuigi Duplex võib alata mõne argisema telefonikõnega, muutub AI vestlustes paremaks, muutes selle teistesse tööstusharudesse teisaldamise lihtsaks. Meie kui ühiskonna otsustada, kui suur osa meie kõnest peaks toimuma tehisintellekti kaudu ja kas tasub telefoni uuesti haarata.

Toimetajate soovitused

  • Sundisin end proovima 14,5-tollist tahvelarvutit – ja see ei läinud väga hästi
  • Mulle meeldib Pixel 7a väga, kuid seal on üks suur probleem, mida ma ei saa ignoreerida
  • Ma tahan armastada Pixel 7 ja Pixel 7 Pro, kuid Google ei luba
  • Siin on kõik, mida Google Pixel Fall Launchi üritusel ei teatanud
  • Kõik, mida Google 2021. aasta Google I/O-l ei avaldanud