En bærbar førerhund til synshandicappede

Synshjælpesystem for synshandicappede

I "Secondhand Spoke", det 15. afsnit af den 12. sæson af Familie fyr, teenagesønnen Chris Griffin bliver mobbet. Da Chris ikke er i stand til at komme med svar på sine klassekammeraters verbale talemåder, hopper hans smartere lillebror, Stewie, i en rygsæk, så Chris i det skjulte kan bære ham rundt. Tilskyndet af Stewie formår Chris ikke kun at komme tilbage til bøllerne, men ender endda med at blive nomineret til klassepræsident for sine problemer.

Indhold

  • Et nyttigt hjælpeværktøj
  • I øjeblikket i testfasen

Anbefalede videoer

At Familie fyr B-plot har kun de største ligheder med et nyt projekt udført af Intel og University of Georgia. Ikke desto mindre er det spændende: En smart rygsæk, der er i stand til at hjælpe sin bærer bedre med at navigere i et givet miljø uden problemer - alt sammen gennem talens kraft.

Hvilken forsker Jagadish Mahendran og team har udviklet er en A.I.-drevet, stemmeaktiveret rygsæk, der er designet til at hjælpe bæreren med at opfatte den omgivende verden. For at gøre det bruger rygsækken - som kunne være særligt nyttig som et alternativ til førerhunde for synshandicappede brugere - et tilsluttet kamera og fannypack (fhv. båret i en vestjakke, sidstnævnte indeholder en batteripakke), kombineret med en computerenhed, så den kan reagere på stemmekommandoer ved hørbart at beskrive verden omkring bærer.

Det betyder at detektere visuel information om trafikskilte, trafikforhold, skiftende højder og fodgængerovergange, sideløbende med placeringsoplysninger, og derefter at kunne omdanne dem til nyttige talte beskrivelser, leveret via Bluetooth høretelefoner.

Et nyttigt hjælpeværktøj

"Idéen om at udvikle et A.I.-baseret visuelt assistentsystem opstod for mig for otte år siden i 2013 under min masteruddannelse," fortalte Mahendran Digital Trends. "Men jeg kunne ikke gøre store fremskridt dengang af [nogle] grunde: Jeg var ny på feltet og dyb læring var ikke mainstream i computervision. Den virkelige inspiration skete dog for mig sidste år, da jeg mødte min synshandicappede ven. Da hun forklarede sine daglige udfordringer, blev jeg slået af denne ironi: Som en opfattelse og A.I. ingeniør Jeg har undervist robotter i at se i årevis, mens der er mennesker, der ikke kan se. Dette motiverede mig til at bruge min ekspertise og bygge et opfattelsessystem, der kan hjælpe.”

ai navigationsrygsæk til blindsetup
Jagadish Mahendran

Systemet indeholder noget imponerende teknologi, herunder en Luxonis OAK-D rumlig A.I. kamera der udnytter OpenCV's Artificial Intelligence Kit med Depth, som er drevet af Intel. Den er i stand til at køre avancerede deep learning neurale netværk, samtidig med at den giver computersynsfunktionalitet på højt niveau, komplet med et dybdekort i realtid, farveoplysninger og mere.

“Projektets succes er, at vi er i stand til at køre mange komplekse A.I. modeller på et setup, der har en enkel og lille formfaktor og er omkostningseffektiv takket være OAK-D kamerasæt, der er drevet af Intels Movidius VPU, en A.I. chip, sammen med Intel OpenVINO-software,” Mahendran sagde. "Udover A.I. har jeg brugt flere teknologier såsom GPS, punktskybehandling og stemmegenkendelse."

I øjeblikket i testfasen

Som med enhver bærbar enhed, involverer en stor udfordring at gøre det til noget, som folk faktisk gerne vil have på. Ingen ønsker at ligne en science fiction-cyborg uden for Comic-Con.

Heldigvis har Mahendrans A.I. vest klarer sig godt under disse parametre. Det er i overensstemmelse med standarderne for, hvad den afdøde Xerox PARC-computerforsker Mark Weiser sagde var nødvendigt for allestedsnærværende computing: Trækker sig tilbage i baggrunden uden at tiltrække opmærksomhed sig selv. Komponenterne er alle gemt væk fra syne, med selv kameraet (som efter design skal være synligt for at optage de nødvendige billeder) ser ud på verden gennem tre bittesmå huller i vest.

"Systemet er enkelt, bærbart og diskret, så brugeren ikke får unødvendig opmærksomhed fra andre fodgængere," sagde Mahendran.

I øjeblikket er projektet i testfasen. "Jeg lavede de indledende [tests selv] i downtown Monrovia, Californien," sagde Mahendran. "Systemet er robust og kan køre i realtid."

Mahendran bemærkede, at ud over at opdage udendørs forhindringer - lige fra cykler til overhængende træ grene — det kan også være nyttigt til indendørs indstillinger, såsom at opdage ulukkede køkkenskabsdøre og synes godt om. I fremtiden håber han, at de borgere, der har brug for et sådant værktøj, selv vil kunne prøve det.

"Det har vi allerede dannede et hold kaldet Mira, som er en gruppe af frivillige med forskellige baggrunde, inklusive mennesker, der er synshandicappede,” sagde Mahendran. "Vi udvider projektet yderligere med en mission om at levere en open source, A.I. baseret visuel assistance system gratis. Vi er i øjeblikket i gang med at skaffe midler til vores indledende testfase."

Redaktørens anbefalinger

  • Optiske illusioner kan hjælpe os med at bygge den næste generation af kunstig intelligens
  • Læs det uhyggeligt smukke 'syntetiske skrift' af en A.I. der tror, ​​det er Gud
  • Følelsesfølende A.I. er her, og det kan blive til din næste jobsamtale
  • Forskere bruger A.I. at skabe kunstig menneskelig genetisk kode
  • Inde i den hurtigt eskalerende krig mellem deepfakes og deepfake detektorer

Opgrader din livsstilDigital Trends hjælper læserne med at holde styr på den hurtige teknologiske verden med alle de seneste nyheder, sjove produktanmeldelser, indsigtsfulde redaktionelle artikler og enestående smugkig.