En bærbar førerhund for synshemmede

I «Secondhand Spoke», den 15. episoden av den 12. sesongen av Familiemann, tenåringssønnen Chris Griffin blir mobbet. Da Chris ikke klarer å komme med svar på de verbale gibbene til klassekameratene, hopper hans smartere lillebror, Stewie, i en ryggsekk slik at Chris i det skjulte kan bære ham rundt. Tilskyndet av Stewie klarer Chris ikke bare å komme tilbake til mobberne, men ender til og med opp med å bli nominert til klassepresident for sine problemer.

At Familiemann B-plot har bare de største likhetene med et nytt prosjekt utført av Intel og University of Georgia. Ikke desto mindre er det en spennende en: En smart ryggsekk som er i stand til å hjelpe brukeren sin bedre å navigere i et gitt miljø uten problemer – alt gjennom talens kraft.

Hvilken forsker Jagadish Mahendran og team har utviklet er en AI-drevet, stemmeaktivert ryggsekk som er designet for å hjelpe brukeren med å oppfatte omverdenen. For å gjøre det bruker ryggsekken - som kan være spesielt nyttig som et alternativ til førerhunder for synshemmede - et tilkoblet kamera og fanny pack (den tidligere bæres i en vestjakke, sistnevnte inneholder en batteripakke), kombinert med en dataenhet slik at den kan svare på talekommandoer ved å hørbart beskrive verden rundt bærer.

Det betyr å oppdage visuell informasjon om trafikkskilt, trafikkforhold, skiftende høyder og fotgjengeroverganger, ved siden av stedsinformasjon, og deretter kunne gjøre det om til nyttige muntlige beskrivelser, levert via Bluetooth øretelefoner.

Et nyttig hjelpemiddel

"Ideen om å utvikle et A.I.-basert system for visuell assistanse oppstod for meg for åtte år siden i 2013 under mastergraden," sa Mahendran til Digital Trends. "Men jeg kunne ikke gjøre store fremskritt den gang av [en] par grunner: Jeg var ny på feltet og dyp læring var ikke mainstream i datasyn. Den virkelige inspirasjonen skjedde imidlertid med meg i fjor da jeg møtte min synshemmede venn. Mens hun forklarte sine daglige utfordringer, ble jeg slått av denne ironien: Som en oppfatning og A.I. ingeniør Jeg har lært roboter å se i årevis, mens det er folk som ikke kan se. Dette motiverte meg til å bruke ekspertisen min og bygge et oppfatningssystem som kan hjelpe."

Systemet inneholder noe imponerende teknologi, inkludert en Luxonis OAK-D romlig A.I. kamera som utnytter OpenCVs Artificial Intelligence Kit med dybde, som er drevet av Intel. Den er i stand til å kjøre avanserte nevrale nettverk for dyp læring, samtidig som den gir datasynsfunksjonalitet på høyt nivå, komplett med et dybdekart i sanntid, fargeinformasjon og mer.

"Suksessen til prosjektet er at vi er i stand til å kjøre mange komplekse A.I. modeller på et oppsett som har en enkel og liten formfaktor og er kostnadseffektivt, takket være OAK-D kamerasett som drives av Intels Movidius VPU, en A.I. chip, sammen med Intel OpenVINO-programvare," Mahendran sa. "Bortsett fra A.I. har jeg brukt flere teknologier som GPS, punktskybehandling og stemmegjenkjenning."

Er for tiden i testfasen

Som med alle bærbare enheter, er en stor utfordring å gjøre den til noe folk faktisk vil ha på seg. Ingen ønsker å se ut som en science fiction-cyborg utenfor Comic-Con.

Heldigvis har Mahendrans A.I. vest klarer seg godt under disse parameterne. Den er i samsvar med standardene til det avdøde Xerox PARC-dataforskeren Mark Weiser sa var nødvendig for allestedsnærværende databehandling: Å trekke seg tilbake i bakgrunnen uten å tiltrekke seg oppmerksomhet seg selv. Komponentene er alle gjemt borte fra synet, med til og med kameraet (som ved design må være synlig for å ta opp de nødvendige bildene) ser ut på verden gjennom tre små hull i Vest.

"Systemet er enkelt, bærbart og ikke-påtrengende, slik at brukeren ikke får unødvendig oppmerksomhet fra andre fotgjengere," sa Mahendran.

Foreløpig er prosjektet i testfasen. "Jeg gjorde de første testene selv i sentrum av Monrovia, California," sa Mahendran. "Systemet er robust og kan kjøre i sanntid."

Mahendran bemerket at i tillegg til å oppdage utendørs hindringer - alt fra sykler til overhengende tre grener — det kan også være nyttig for innendørs innstillinger, for eksempel å oppdage ulukkede kjøkkenskapdører og som. I fremtiden håper han at publikum som trenger et slikt verktøy får prøve det ut selv.

"Vi har allerede dannet et team kalt Mira, som er en gruppe frivillige med ulik bakgrunn, inkludert mennesker som er synshemmede, sa Mahendran. "Vi utvider prosjektet ytterligere med et oppdrag om å tilby en åpen kildekode, A.I. basert visuell assistansesystem gratis. Vi er for tiden i ferd med å skaffe midler til vår innledende testfase.»

Redaktørenes anbefalinger

• Optiske illusjoner kan hjelpe oss med å bygge neste generasjon AI
• Les den uhyggelig vakre 'syntetiske skriften' til en A.I. som tror det er Gud
• Følelsesfølende A.I. er her, og det kan være i ditt neste jobbintervju
• Forskere bruker A.I. å lage kunstig menneskelig genetisk kode
• Inne i den raskt eskalerende krigen mellom deepfakes og deepfake-detektorer

Oppgrader livsstilen dinDigitale trender hjelper leserne å følge med på den fartsfylte teknologiverdenen med alle de siste nyhetene, morsomme produktanmeldelser, innsiktsfulle redaksjoner og unike sniktitter.