Il a sauvé les capacités de lecture de son grand-père avec un projet de bricolage

Chaque anniversaire, Bennie Affleck (non, pas celui-là) achète à son grand-père la meilleure bouteille de vin rouge chilien qu'il puisse trouver. Mais quand son grand-père, également nommé Ben, a eu je dois avoir 100 ans cette année, son petit-fils ingénieur logiciel britannique de 40 ans a décidé que l'occasion méritait un cadeau spécial.

"C'est un homme très inspirant", Affleck, qui dirige un cabinet de conseil en logiciels au Royaume-Uni appelé Conception en ionium, a déclaré à propos de Ben Sr. "Toujours joyeux malgré le fait qu'il ait survécu à ses deux femmes et à ses deux enfants."

Pour le centenaire de son grand-père, une bouteille de vin – ou même quelques-unes – n’allait tout simplement pas suffire. Affleck lui a donc construit un appareil numérique alimenté par l'IA. texte pour parler une machine de lecture pour aider son grand-père, atteint de dégénérescence maculaire, à pouvoir relire.

Machines à lire

"Mon grand-père a commencé à perdre la vue il y a environ 10 ans", a déclaré Affleck à Digital Trends. « C'est un homme extrêmement déterminé et il veut rester indépendant, vivre chez lui et participer activement au monde. Perdre sa capacité de conduire a été un coup dur, mais il l'a remplacée par des taxis. Perdre sa capacité de lire a été plus difficile.

Malgré les meilleures aides visuelles disponibles, Affleck a déclaré que son grand-père prenait régulièrement plus d'une heure pour déchiffrer une seule lettre A4. « Même s'il existe de nombreux téléphone intelligent et les [outils] disponibles sur tablettes, ils ne conviennent pas aux personnes qui ne sont pas familiarisées avec ces appareils, ou dont la vision, le toucher ou l'audition rendent les écrans tactiles inutilisables », a-t-il déclaré.

Ce qu'Affleck a conçu pour son grand-père comme alternative était un assistant de lecture numérique DIY, fabriqué à l'aide de composants et de logiciels disponibles dans le commerce. Il permet aux utilisateurs de placer un document sur une plate-forme éclairée, où il est numérisé par une caméra, déchiffré par des algorithmes de reconnaissance de texte et finalement lu avec une voix naturelle.

Pour rendre l'interface plus facile pour les personnes malvoyantes, la machine est équipée de gros boutons colorés. Frapper le bleu numérise un document. Le vert commence à lire le document numérisé le plus récemment. Le bouton jaune gauche recule de six secondes, le jaune droit avance de six secondes et le bouton rouge met en pause et reprend la pause. Pour des raisons de sécurité, Affleck a déclaré que la machine ne stocke aucun des documents numérisés localement ou dans le cloud.

Conçu pour une utilisation facile

Affleck a déclaré qu'il travaillait habituellement dans une cabane dans son jardin. Cependant, il a dû rassembler le cadeau de son grand-père sur la table de sa cuisine, faute de chauffage extérieur. (C’est un snowboardeur amateur et habitué au froid, mais chacun a ses limites !)

"L'ensemble du dispositif a été construit en trois semaines", a-t-il déclaré. « Construire une enceinte physique aurait pu être intimidant, mais j'ai eu l'idée de réutiliser un vieux rétroprojecteur portable 3M. Toutes les autres pièces provenaient de petites entreprises britanniques et [d'une grande entreprise de composants électroniques.] Mon le voisin a gentiment usiné la ferronnerie pour un clavier robuste de ma conception, que j'ai équipé d'arcade boutons."

Le logiciel de la machine de lecture est un Python personnalisé avec celui de Google Vision Cloud et Synthèse vocale Wavenet logiciel. Il est alimenté via un Framboise Pi 3B avec une caméra Pi V2.

"Le système complet fonctionne étonnamment bien", a déclaré Affleck, décrivant cela comme un "testament" de la haute qualité de l'IA de Google. outils. « Le texte imprimé est lu avec une précision étonnante, même en tenant compte des rotations, des distorsions [et d'autres défis]. La voix est également très écoutable. Lors des tests, j'ai demandé à la machine de lire les pages de Le Lion, la Sorcière et l'Armoire, et je me suis retrouvé engagé dans l’histoire.

Un moment amusant, mais poignant, s’est produit lorsque Affleck a offert le cadeau à son grand-père. "Après l'avoir installé, grand-père a dit: "Maintenant, je peux l'utiliser pour lire les instructions de ma loupe numérique", a déclaré Affleck. « C’était drôle et triste de ne pas pouvoir utiliser un autre appareil qu’il avait acheté pour l’aider parce qu’il ne pouvait pas lire les instructions. »

Aider plus de personnes

La seule difficulté avec la machine à l'heure actuelle, a déclaré Affleck, réside dans les données spatialement structurées telles que les relevés bancaires. «J'ajouterai des heuristiques et certaines de mes propres méthodes d'IA. pour permettre à ceux-ci d'être lus d'une manière plus humaine », a-t-il noté.

Affleck a déclaré que la construction de cet appareil lui a donné une nouvelle appréciation des défis auxquels sont confrontées les personnes malvoyantes. « Au fur et à mesure que j'ai commencé à développer le concept, il est devenu évident que de nombreuses autres personnes rencontraient des problèmes similaires. J'ai réalisé qu'il y avait une demande pour un appareil bien meilleur, j'ai donc construit le meilleur prototype possible et je suis en train de construire davantage d'unités afin de pouvoir effectuer des essais sur le terrain avec des volontaires en février.

Si ces tests se déroulent bien, Affleck a déclaré qu'il envisagerait d'en faire un produit doté de fonctionnalités supplémentaires et d'un boîtier plus adapté. Pour l’instant, cependant, il a construit un appareil révolutionnaire que son grand-père peut utiliser quotidiennement – ​​et, en réalité, c’est exactement ce qu’il a décidé de faire.

Recommandations des rédacteurs

• Meta veut dynamiser Wikipédia avec une mise à niveau de l'IA
• Cette technologie relevait de la science-fiction il y a 20 ans. Maintenant c'est la réalité
• Voici une I.A. aperçu des effets du changement climatique sur votre quartier