AR tulevik on kõrvaklapid, mitte prillid

Romit Roy Choudhury on suur kõrvu. Aga mitte sisse et tee. Roy Choudhury, elektrotehnika ja arvutiteaduse professor Illinoisi ülikoolis Urbana-Champaignis, usub kindlalt tema poolt mõistetava paradigma muutmise potentsiaali. kõrvatav (ei, mitte kantav) arvuti.

See tähendab, et peate kasutama tohutuid võimalusi riist- ja tarkvara jaoks, mis töötavad nende kahe väljamõeldud kuulamisava abil teie pea külgedel. Ja aidata arendada kõike alates privaatsus- ja turvarakendustest kuni meditsiinilise diagnoosini tööriistu, mis keskenduvad liitreaalsuse tulevikule, kogub ta abiks ekspertide meeskonna.

"Ma saan kasutada peaaegu kõiki arvutiteaduses ja elektrotehnikas," ütles ta Digital Trendsile. "Minu radari probleemide hulk on tohutu."

Kõrvaklapid on juba tohutu turg. Apple'i oma AirPodidtraadita kõrvaklappide sari müüs ainuüksi 2019. aastal 60 miljonit ühikut. Eelmisel aastal oli see number hinnanguliselt 85 miljonini. Tänapäeval toodavad paljud ettevõtted nutikaid kõrvaklappe, mis pakuvad aktiivset mürasummutust, A.I. nutikad assistendid ja palju muud.

Mitu aastakümmet enne AirPode, 1980ndatel, oli Walkman, võib-olla esimene kaasaegne kantav tehnoloogia, mis võimaldas kasutajatel muusikat kõikjale kaasa võtta. Walkman ei andnud kasutajatele võimu mitte ainult selle üle, mida nad kuulasid (näiteks The Smiths), vaid ka selle üle, mida nad ei kuulanud (näiteks nende vanemad). See võimaldas inimestel luua ja kontrollida oma elu heliriba, andes meile kõigile oma individuaalsed tähendusmullid. Kui boomboxi eesmärk oli lasta – või mõnel juhul sundida – teistel meie muusikat kuulama, muutis Walkman kuulamise põhimõtteliselt isiklikuks, isoleeritud kogemuseks.

Kuid Roy Choudhury ja tema meeskond tahavad minna kaugemale. Nende eesmärk on muuta tänapäevased kõrvaklapid täiesti uueks arvutiplatvormiks, mis võib mõnel juhul asendada vajaduse oma käe järele sirutada. nutitelefoni või arvuti. Kui Walkman annaks kõigile välja oma isikliku helimulli, mida nad tänaval kõndides nautida, siis praegusel ajastul nutikam tehnoloogia ja isikupärastamine, saaks neid samu mullikesi kasutada uutes, põnevates ja mõnikord ka pisut veidrates viise.

Mõttelugemise kõrvaklapid?

"Suurem osa kantavate arvutite turust on [seni] keskendunud seadmetele, mida kantakse keha alumises osas, enamasti taskus või randmel, võib-olla ka kingades," ütles Roy Choudhury. "See tähendab, et saate tajuda keha alumist osa, näiteks seda, mida teete käte, randmete ja jalgadega. Kuid palju teavet genereeritakse keha ülaosas, peamiselt teie peas - näiteks kuulamine, rääkimine, söömine, näo emotsioonid, potentsiaalselt vihjed meditsiiniga seotud teabele - see võib olla hindamatu. Püha Graal, selle viimane piir, võib isegi olla ajusignaalide tajumine pea lähedalt."

Idee võimalusest mitte ainult passiivselt kuulata kõrvasiseseid seadmeid, vaid ka sellega rääkida, on selliste nutikate abiliste nagu Siri aluseks. Kuid kõne, nagu seda kasutatakse tänapäeva A.I. abilised, on sihilikult madal. Võrreldes pildiga (väärt tuhat sõna), on Siri parimal võimalikul viisil kiire teabega, näiteks ilmateate otsimine või köögis taimeri seadistamine. Kuid see on umbes piir. Kõrvatavate arvutite idee on leida viise, kuidas maha laadida mõned muud asjad, mida peame praegu ekraane vahtima, ja asetada need kõrvadesse (ja kõrvadesse).

"Kõigile, mida te visuaalsel ekraanil teete, suunate kogu oma kognitiivse tähelepanu," ütles ta. “Lugemiseks – isegi kui see on rumal nali, mida sa ekraanilt loed – ei saa sa keskenduda millelegi muule. Lugemine võtab teie täieliku kognitiivse tähelepanu. Minu arvates on palju selliseid asju, mis ei vääri teie täielikku kognitiivset tähelepanu. Me saame need visuaalsest domeenist välja tõmmata ja lükata need kasutamata ja monopolistamata helivaldkonda, kus inimese aju on loomulikult väga hästi arenenud. multipleksige sellise heliteabe vahel … Miks mitte võtta need lihtsad asjad ja viia need oma kognitiivsest, visuaalsest kognitiivsest kanalist eemale akustiliseks ribalaius?"

Hiljutises töörühma läbiviidud katses uuriti, kuidas saaksime teksti sisukamalt tarbida kuuldav vormi. Kui loete artiklit, võite näha märksõna, mis teid huvitab, ja alustada lugemist sellest hetkest. Kuid näiteks taskuhäälingusaadet kuulates pole seda lihtsat viisi.

"Üks asi, mida me oma laboris teha üritame, on [küsi], kas ma saan artikli kuulamist kiirendada?" ütles Roy Choudhury.

Mahalaadimine kõrvadele

Rühma kontseptsiooni tõestamise demonstratsioonis laseb kuulaja artiklis korraga mitu lõiku ette lugeda. Selle töö tegemise nipp on signaalitöötluse kasutamine, et iga lõik kõlaks nii, nagu see tuleks teisest suunast – see on natuke nagu istumine restoranis ja neli vestlust ümbritsevate laudade juures, kuid helistades ühte, sest sealviibijad mainivad inimest, et te tea. Selle paremaks toimimiseks koputas meeskond kõrvaklappide inertsiaalset mõõtühikut (IMU), nii et kasutaja saab tõsta teatud häält (üks osa tekstist), pöörates selles veidi pead suunas.

"Ma nimetan seda projekti "lugemiseks akustilises valdkonnas", kus ma vaatan kolmanda lõigu hääle suunda ja see hääl muutub valjemaks ja teised hääled vaibuvad," ütles ta.

Asi pole ka kõnes. Samuti on meeskond avastanud, et nii kõrvaklappide mikrofoni kui ka IMU-d saab kasutada uskumatult peente vibratsioonide vastuvõtmiseks näol, mis on nii pisike kui hambaid kiristav inimene või näolihased kortsutavad või naeratavad. Ei, te ei jäta tõenäoliselt oma nutitelefoni, et hammastega morsekoodi kaudu sõnumeid lobiseda. Kuid ideega, et need väikesed näo väänamised, näiteks parempoolsete hammaste libisemine, võiks olla harjunud Käskude täitmine või isegi kahefaktorilise autentimise identiteedi kinnitusena toimimine on kindlasti vajalik huvitav.

See võib olla kasulik ka pikisuunaliste andmete kogumiseks, näiteks meditsiinilise diagnoosi jaoks. Näiteks ärevushäireid võib diagnoosida hammaste liikumisel tuvastatud teatud mustrite põhjal. Roy Choudhury märkis ka, et teadlased tegelevad selliste probleemidega nagu verevoolu mõõtmine kõrvade kaudu, et mõõta südame löögisagedust, glükoosi taset, lihaste aktiivsust ja palju muud.

Kas soovite teist võimalikku kasutust? Kuidas oleks kuuldav liitreaalsus? Liitreaalsus on praegu kõige tuntum selle poolest, et katab arvutiga loodud objektid reaalse maailma peal. Kuid pole põhjust, miks suurendamised peaksid toimuma ainult visuaalsel spektril. Roy Choudhury meeskond on põnevil võimalusest kasutada signaalitöötlustehnoloogiat teatud helide kaardistamiseks teie maastikule, et navigeerida läbi lennujaam, muuseum või mõni muu avalik ruum võib hõlmata kõndimist hääle poole, mis ütleb "järgige mind", mis näib tulevat suunast, kuhu peate suunduma. sisse.

Kõik on Siriga tuttavad, kuid kujutage ette, kui palju potentsiaalseid kasutusvõimalusi saaks Siril avada, kui sellel oleks vaid ruumiline mõõde, nagu kõhurääkija, kes suudab häält teha. See ruumiline suurendamine võib aidata parandada ka suuri virtuaalseid koosolekuid, kus iga inimese hääl on kaardistatud kindlasse asukohta, muutes kõneleja kohe arutamise lihtsamaks.

Kõik need asjad muidugi teoks ei saa. Need on inseneriversioon copywriterile, kes loob ideid reklaami jaoks. Paljud neist ei pruugi langeda, kuid üks või kaks näidet võivad olla väga kasulikud.

Dormehli seadus

See on veel üks põhjus, miks Roy Choudhury on nii vaimustuses jätkuva kõrvaklapiga andmetöötluse potentsiaalist ja selle võimalustest reaalses edus. Ühiskondlikud reaktsioonid määravad palju rohkem selle kohta, millised tehnoloogiad kaasa löövad, kui tehnoloogid tingimata sooviksid. Uued tehnoloogiad on oma olemuselt uued. Uus võib võrduda imelikuga. Et kasutada oma sõnastust (nimetagem seda Dormehli seaduseks, et torkamaks järglastele), peab iga uue tehnoloogia kasutusel olev kasulikkus kahekordselt kompenseerima selle kasutamise loomupärase veidruse.

Personaalarvuti, mida inimesed oma kodudes kasutasid, ei saanud endale lubada esimestel turul olnud aastatel vähe kasutada, kuna selle kasutamise sotsiaalne panus oli nii madal. Avalikus kohas kasutataval sülearvutil oli veidi suurem panus. Kantavad esemed, mis on kehal kandmise tõttu eriti silmapaistvad, on nähtavamalt veidramad kui enamik tehnikat. Pea külge kinni jääv tehnikatükk, mis näeb välja nagu küberneetiline implantaat Borgi droonil, peab olema geniaalne ja kohe kasulik, kui kasutaja peab seda nägemise kahjulikku sotsiaalset mõju väärt seda kandes.

See on probleem, sest väga vähesed tehnoloogiad on täielikult välja kujunenud. Enamikul juhtudel on toote paar esimest põlvkonda üles ehitatud vigasele lubadusele, enne kui kusagil kolmanda iteratsiooni paiku ilmub veenvam pakkumine. Kui väga nähtav toode ei suuda esimesest päevast peale tarnida, võivad selle pikaajalise edu võimalused olla nurjatud, isegi kui sellest saab lõpuks hea toode. Vanemate tehnikafännide jaoks kaaluge kaasaskantavat Apple Newtoni seadet ja selle varajast käekirjatuvastust. Nooremate fännide jaoks võib Dormehli seadus seletada Google Glassi ebaõnnestumist, millega kaasnes tohutu ühiskondlik häbimärgistamine ja otsustusvõime ning mis töötas... peaaegu hästi.

Kõrvaklapid, nagu Roy Choudhury märkis, on erinevad. Ükskõik, mis lahingud nende ümber kunagi on olnud, on enam-vähem juba võidetud. "Ühiskond on juba aktsepteerinud kõrvaklappe kandvaid inimesi," ütles ta. "… Mõnes mõttes tuleb nüüd uuendada ainult algoritme, andureid ja riistvara. See on vaid tehnoloogiline kitsaskoht, mitte enam ühiskondlik, psühholoogiline kitsaskoht.

Kantavate esemete lubadus

Asjaolu, et kõrvaklapid on aktsepteeritud, vähendab panuseid ja tähendab, et enam ei pea olema kohest binaarset tulemust. Isegi kui Roy Choudhury kirjeldatud kõrgeimaid eesmärke ei saavutata pikka aega, lisab järkjärguline täiustamine tõestatud vormitegurile kasulikkust.

Kõrgel rippuvad puuviljad [on sellised asjad nagu] „hammaste žestide järgi suudan ma tuvastada krambihooge” või „minu näožestide abil saan aru inimese tujust, nii et sellest saab nagu Fitbit tuju jaoks,“ ütles. "Kuid isegi kui see ebaõnnestub, ei takista see toote torustikku. Kuid kui nad on edukad, muutis see toote lihtsalt millekski fantastiliseks.

Roy Choudhury usub, et kõrvaga arvutite potentsiaal on peaaegu piiramatu. "Ma arvan, et eelseisev tee ulatub palju kaugemale kui kõne," ütles ta. "Ma ütleksin, et kõne on sisemine ring, mis on [selle tehnoloogia] tuum. Väljaspool seda suhtlemist on akustika üldiselt. Ja väljaspool akustikat on igasugused muud andurid ja võimalused. Kui mõelda, kuidas me seda platvormi ehitama hakkame, siis madalal rippuvad viljad on kõnepõhine suhtlus: "Seadista taimer", "Hei, Siri, milline on täna ilm?" Kuid see võib minna kaugele, kaugele peale selle.”

Teised teadlased, kes töötavad koos Roy Choudhuryga kantava andmetöötlusega, hõlmavad Zhijian Yang, Yu-Lin Wei, Jay Prakashja Ziyue Li.

Toimetajate soovitused

• ChatGPT iPhone'i rakendusel on nüüd Bing sisseehitatud
• Apple ei teinud Sirist WWDC-s ChatGPT tapjat – ja see hirmutab mind
• Unustage ChatGPT – Siri ja Google Assistant teevad need 4 asja paremini
• Apple ehitab Apple Watchile tehisintellekti tervisetreenerit, väidab aruanne
• See veider AI-seade võib tulevikus teie nutitelefoni asendada