Han reddet bestefarens leseevner med et DIY-prosjekt

Hver bursdag kjøper Bennie Affleck (nei, ikke den) bestefaren sin den beste flasken chilensk rødvin han kan finne. Men da hans bestefar, også kalt Ben, var fyller 100 i år, bestemte hans 40 år gamle britiske programvareingeniør-barnebarn at anledningen berettiget en spesiell gave.

"Han er en veldig inspirerende mann," ringte Affleck, som driver et britisk programvarekonsulentfirma Ionium design, sa om Ben Sr. "Fortsatt munter til tross for at han overlevde to koner og begge barna hans."

For bestefarens hundreårsjubileum ville en flaske vin - eller til og med et par av dem - rett og slett ikke kutte den. Så Affleck bygde ham en AI-drevet digital tekst til tale lesemaskin for å hjelpe bestefaren, som har makuladegenerasjon, til å kunne lese igjen.

Lesemaskiner

"Min bestefar begynte å miste synet for rundt 10 år siden," sa Affleck til Digital Trends. «Han er en ekstremt målbevisst mann og ønsker å forbli uavhengig, bo hjemme og ta en aktiv del i verden. Å miste evnen til å kjøre var et slag, men han erstattet det med drosjer. Å miste evnen til å lese har vært vanskeligere.»

Til tross for de beste tilgjengelige synshjelpemidlene, sa Affleck at bestefaren hans regelmessig brukte over en time på å tyde en enkelt A4-bokstav. «Selv om det er mange smarttelefon og nettbrettbaserte [verktøy] tilgjengelig, de er uegnet for personer som ikke er kjent med disse enhetene, eller hvis syn, berøring eller hørsel gjør berøringsskjermer ubrukelige,» sa han.

Det Affleck designet for sin bestefar som et alternativ, var en DIY digital leseassistent, laget ved hjelp av hyllekomponenter og programvare. Den lar brukere plassere et dokument på en opplyst plattform, hvor det skannes av et kamera, dechiffreres av tekstgjenkjenningsalgoritmer og til slutt leses opp med en naturlig stemme.

For å gjøre grensesnittet enklere for noen med nedsatt syn, er maskinen utstyrt med tykke fargede knapper. Ved å trykke på den blå skanner du et dokument. Grønn begynner å lese det sist skannede dokumentet. Den venstre gule knappen hopper seks sekunder tilbake, den høyre gule hopper seks sekunder fremover, og den røde knappen stopper og gjenopptar pausen. Av sikkerhetsgrunner sa Affleck at maskinen ikke lagrer noen av de skannede dokumentene lokalt eller i skyen.

Designet for enkel bruk

Affleck sa at han vanligvis jobber i en hytte i hagen sin. Imidlertid måtte han sette sammen bestefarens gave på kjøkkenbordet sitt på grunn av mangel på utvendig oppvarming. (Han er en snowboarder som hobby og vant til kulde, men alle har sine grenser!)

"Hele enheten ble konstruert på tre uker," sa han. «Å bygge et fysisk kabinett kunne vært skremmende, men jeg hadde en hjernebølge til å gjenbruke en gammel 3M bærbar overhead-projektor. Alle andre deler kom fra små britiske bedrifter og [et stort elektronisk komponentselskap.] My naboen bearbeidet metallverket for et solid tastatur av mitt design, som jeg utstyrte med arkade knapper."

Lesemaskinens programvare er tilpasset Python med Googles Cloud Vision og Wavenet tekst-til-tale programvare. Den drives via en Raspberry Pi 3B med et Pi V2-kamera.

"Det komplette systemet fungerer overraskende bra," sa Affleck, og beskrev dette som et "testament" til Googles høykvalitets A.I. verktøy. "Trykt tekst leses med forbløffende nøyaktighet, selv med tanke på rotasjoner, forvrengninger [og andre utfordringer]. Stemmen er også veldig lyttende. I testing hadde jeg maskinen lese sider fra Løven Heksa og klesskapet, og jeg fant meg selv å bli engasjert i historien.»

Et morsomt, men gripende øyeblikk skjedde da Affleck ga sin bestefar gaven. «Etter å ha satt den opp for ham, sa bestefar: «Nå kan jeg bruke dette til å lese instruksjonene for min digitale lupe», sa Affleck. "Det var morsomt og trist at han ikke kunne betjene en annen enhet han hadde kjøpt for å hjelpe ham fordi han ikke kunne lese instruksjonene."

Hjelper flere mennesker

Den eneste vanskeligheten med maskinen for øyeblikket, sa Affleck, er romlig strukturerte data som kontoutskrifter. "Jeg vil legge til heuristikk og noen av mine egne A.I. for å la disse leses på en mer menneskelignende måte," bemerket han.

Affleck sa at å bygge denne enheten har gitt ham en ny forståelse av utfordringene folk med begrenset syn møter. «Da jeg begynte å utvikle konseptet, ble det tydelig at mange andre mennesker har lignende problemer. Jeg innså at det er etterspørsel etter en mye bedre enhet, så jeg bygde den beste prototypen jeg kunne og bygger flere enheter slik at jeg kan kjøre feltforsøk med frivillige i februar.»

Hvis disse testene går bra, sa Affleck at han ville vurdere å gjøre dette om til et produkt – komplett med tilleggsfunksjoner og mer passende deksel. Foreløpig har han imidlertid bygget en spillskiftende enhet som bestefaren hans kan bruke daglig – og det er egentlig akkurat det han satte seg fore å gjøre.

Redaktørenes anbefalinger

• Meta ønsker å overlade Wikipedia med en AI-oppgradering
• Denne teknologien var science fiction for 20 år siden. Nå er det virkelighet
• Her er en A.I. forhåndsvisning av hva klimaendringer vil gjøre med nabolaget ditt