Een draagbare geleidehond voor visueel gehandicapten

In ‘Secondhand Spoke’, de 15e aflevering van het 12e seizoen van Familieman, tienerzoon Chris Griffin wordt gepest. Nu Chris niet in staat is om te reageren op de verbale opmerkingen van zijn klasgenoten, springt zijn slimmere broertje, Stewie, in een rugzak zodat Chris hem heimelijk kan ronddragen. Op aandringen van Stewie slaagt Chris er niet alleen in om de pestkoppen te pakken te krijgen, maar wordt hij zelfs genomineerd voor klassenpresident vanwege zijn problemen.

Dat Familieman Het B-plot vertoont slechts de meest oppervlakkige overeenkomsten met een nieuw project uitgevoerd door Intel en de Universiteit van Georgia. Desalniettemin is het een intrigerende: een slimme rugzak die de drager kan helpen zonder problemen beter door een bepaalde omgeving te navigeren – allemaal door de kracht van spraak.

Welke onderzoeker Jagadish Mahendran en team hebben een AI-aangedreven, spraakgestuurde rugzak ontwikkeld die is ontworpen om de drager te helpen de omringende wereld waar te nemen. Om dit te doen, maakt de rugzak – die bijzonder nuttig zou kunnen zijn als alternatief voor blindengeleidehonden voor visueel gehandicapte gebruikers – gebruik van een aangesloten camera en een heuptasje (de eerste gedragen in een vestjasje, waarbij de laatste een batterijpakket bevat), gekoppeld aan een computereenheid zodat deze op stemcommando's kan reageren door de wereld rondom de wereld hoorbaar te beschrijven drager.

Dat betekent het detecteren van visuele informatie over verkeersborden, verkeersomstandigheden, hoogteverschillen en oversteekplaatsen. naast locatie-informatie, en deze vervolgens kunnen omzetten in nuttige gesproken beschrijvingen, geleverd via Bluetooth oortelefoons.

Een handig hulpmiddel

“Het idee om een ​​op AI gebaseerd visueel assistentiesysteem te ontwikkelen kwam acht jaar geleden, in 2013, tijdens mijn master bij me op”, vertelde Mahendran aan Digital Trends. “Maar ik kon toen niet veel vooruitgang boeken om een ​​paar redenen: ik was nieuw in het veld en diep leren was niet mainstream in computer vision. De echte inspiratie overkwam mij echter vorig jaar toen ik mijn visueel gehandicapte vriend ontmoette. Terwijl ze haar dagelijkse uitdagingen uitlegde, werd ik getroffen door deze ironie: als perceptie en A.I. ingenieur Ik leer robots al jaren hoe ze moeten zien, terwijl er mensen zijn die niet kunnen zien. Dit motiveerde mij om mijn expertise in te zetten en een perceptiesysteem op te bouwen dat kan helpen.”

Het systeem bevat een aantal indrukwekkende technologie, waaronder een Luxonis OAK-D ruimtelijke A.I. camera dat gebruik maakt van de Artificial Intelligence Kit with Depth van OpenCV, mogelijk gemaakt door Intel. Het is in staat om geavanceerde deep learning neurale netwerken uit te voeren, terwijl het ook hoogwaardige computer vision-functionaliteit biedt, compleet met een realtime dieptekaart, kleurinformatie en meer.

“Het succes van het project is dat we veel complexe AI-systemen kunnen uitvoeren. modellen op een opstelling die een eenvoudige en kleine vormfactor heeft en dat ook is kosteneffectief, dankzij de OAK-D-camerakit die wordt aangedreven door Intel's Movidius VPU, een A.I. chip, samen met Intel OpenVINO-software”, Mahendran gezegd. “Naast AI heb ik meerdere technologieën gebruikt, zoals GPS, puntenwolkverwerking en stemherkenning.”

Momenteel in testfase

Zoals bij elk draagbaar apparaat is het een grote uitdaging om er iets van te maken dat mensen daadwerkelijk zouden willen dragen. Niemand wil er buiten Comic-Con uitzien als een sciencefiction-cyborg.

Gelukkig is Mahendran’s A.I. vest doet het goed onder deze parameters. Het voldoet aan de normen van wat wijlen Xerox PARC-computerwetenschapper Mark Weiser zei noodzakelijk voor ubiquitous computing: naar de achtergrond verdwijnen zonder de aandacht te trekken zelf. De componenten zijn allemaal uit het zicht verborgen, zelfs de camera (die door zijn ontwerp zichtbaar moet zijn). om de nodige beelden op te nemen) en kijken naar de wereld door drie kleine gaatjes in de camera vest.

“Het systeem is eenvoudig, draagbaar en onopvallend, zodat de gebruiker geen onnodige aandacht krijgt van andere voetgangers”, aldus Mahendran.

Momenteel bevindt het project zich in de testfase. “Ik deed de eerste [tests zelf] in het centrum van Monrovia, Californië,” zei Mahendran. “Het systeem is robuust en kan in realtime draaien.”

Mahendran merkte dat op, naast het detecteren van obstakels buitenshuis, variërend van fietsen tot overhangende bomen takken — het kan ook handig zijn voor binnenomgevingen, zoals het detecteren van niet-gesloten keukenkastdeuren en de leuk vinden. In de toekomst hoopt hij dat leden van het publiek die zo'n tool nodig hebben, het zelf kunnen uitproberen.

"We hebben al vormden een team genaamd Mira, een groep vrijwilligers met verschillende achtergronden, waaronder mensen met een visuele beperking”, zei Mahendran. “We laten het project verder groeien met een missie om een ​​open-source, A.I. gebaseerd visueel assistentiesysteem gratis. We zijn momenteel bezig met het werven van fondsen voor onze eerste testfase.”

Aanbevelingen van de redactie

• Optische illusies kunnen ons helpen de volgende generatie AI te bouwen
• Lees het griezelig mooie ‘synthetische geschrift’ van een A.I. die denkt dat het God is
• Emotiegevoelige A.I. is hier, en het zou in je volgende sollicitatiegesprek kunnen zijn
• Wetenschappers gebruiken A.I. om kunstmatige menselijke genetische code te creëren
• Binnen de snel escalerende oorlog tussen deepfakes en deepfake-detectoren

Upgrade uw levensstijlMet Digital Trends kunnen lezers de snelle technische wereld in de gaten houden met het laatste nieuws, leuke productrecensies, inzichtelijke redactionele artikelen en unieke sneak peeks.