Facebook fabrique des lunettes AR qui améliorent l'audition

Habituellement, la nouvelle selon laquelle un laboratoire de recherche est transformé en bar suggère qu’il a échoué et que ses chercheurs jettent l’éponge. Mais dans le cas de Facebook Reality Labs Research, un laboratoire dédié (en partie) à la création de nouvelles idées créatives. moyens d'améliorer l'audition des membres de la communauté sourde ou malentendante, il a montré que son travail portait ses fruits désactivé.

La mission déclarée de Facebook est d’aider les gens à se connecter et à communiquer entre eux. C’est pourquoi, même s’il semble hors de propos de s’attaquer à ce projet, il s’inscrit en réalité parfaitement dans les compétences clés de l’entreprise.

Le problème Facebook a essayé de résoudre la question de savoir comment améliorer la captation audio pour les individus dans des environnements bruyants. Bien que de nombreuses personnes atteintes de perte auditive, en fonction de sa gravité, trouvent possible d'entendre et d'interagir dans les situations en tête-à-tête dans des endroits calmes, des environnements bruyants comme les bars ou des lieux sociaux très fréquentés peuvent être très nombreux plus dur. C'est dans cet esprit que Facebook a étudié comment combiner la technologie de formation de faisceaux, l'apprentissage, la suppression du bruit et, peut-être le plus surprenant, la réalité augmentée (AR) pour améliorer cela situation.

En rapport

  • Comment regarder l'événement Facebook Connect en ligne
  • Après le portail, les lunettes de réalité augmentée pourraient être la prochaine étape de Facebook

Dans un projet récent, les scientifiques de Facebook ont ​​étudié comment les lunettes de réalité augmentée pourraient aider à déterminer quels sons les gens souhaitent amplifier en regardant, eh bien, où ils regardent. En faisant correspondre l'attention d'une personne, en termes de ce qu'elle regarde, aux entrées audio, les lunettes AR peuvent comprendre quels sons une personne veut entendre et lesquels elle n'entend pas - puis composez les canaux sonores vers le haut ou vers le bas par conséquent. Dans le cadre de ses expérimentations dans ce domaine, Facebook a transformé l'espace de travail où se déroule une grande partie de cette enquête en un faux bar pour explorer comment il fonctionnerait dans un lieu avec de multiples entrées sonores bruyantes.

« De nombreuses personnes malentendantes n’utilisent pas d’appareils auditifs – en partie – parce qu’ils ne fonctionnent pas bien au quotidien. des situations comme un restaurant bruyant, une conversation impliquant plusieurs personnes lors d'une fête bruyante ou dans un déménagement voiture," Thomas Lunner, responsable de la recherche pour le laboratoire Hearing Science de Facebook, a déclaré à Digital Trends. « En menant nos recherches sur l'audition améliorée pour les lunettes AR, nous avons réalisé que certaines des découvertes que nous faisions pourraient être pertinentes pour résoudre ce problème. Dans [notre nouvelle recherche], nous montrons comment la réalité augmentée pourrait compléter l'aide auditive, grâce à un système qui comprend ce que vous voulez écouter, isole et améliore les sons que vous voulez entendre et réduit les distractions bruit de fond. En envoyant ensuite le signal amélioré traité par AR à l’aide auditive, vous obtenez également un système qui s’adapte à votre capacité auditive unique.

Vidéos recommandées

Jouer sur les atouts de Facebook Research

Lunner n’est pas un novice dans ce domaine de recherche. C’est un spécialiste renommé de l’audition dont les travaux ont jeté les bases de ce qui est devenu la première aide auditive numérique au monde en 1995. Cette recherche, bien qu’encore à ses débuts, exploite un certain nombre de domaines de recherche pour Facebook, tels que la reconnaissance d’images, le traitement du langage naturel et bien d’autres encore.

« Les sciences de l’audition sont un domaine que nous commençons tout juste à explorer. Cette technologie n’est donc pas disponible sur aucun de nos produits, mais nous sommes très enthousiasmés par les possibilités offertes par les lunettes AR », Lunner a continué. "Nous pensons qu'ils pourraient un jour contribuer à apporter toutes sortes d'améliorations, notamment en aidant toute personne souffrant de perte auditive ou ayant simplement du mal à comprendre les gens lors d'une fête."

Michael Abrash, scientifique en chef de Facebook Reality Labs, a déclaré à Digital Trends qu'il pensait que la réalité augmentée et virtuelle pourrait avoir de profondes implications (et applications) dans le domaine de l'accessibilité.

« La réalité augmentée et la réalité virtuelle ont un énorme potentiel pour bénéficier à tout le monde, mais elles ont un potentiel particulièrement élevé pour les personnes ayant des capacités physiques variables », a déclaré Abrash. « Par exemple, les lunettes AR pourraient un jour améliorer le contraste afin d’aider les personnes malvoyantes. voir mieux et peut être capable de fournir une rétroaction visuelle sur les sons ambiants et la parole à l'audition altéré. Autre exemple, nous pensons que la réalité virtuelle – et éventuellement la réalité augmentée – pourront un jour créer des espaces virtuels ultra-réalistes. et des avatars qui permettront aux personnes à mobilité réduite de se téléporter au bureau ou dans la maison de leur grand-mère chambre."

Facebook est bien entendu surtout connu pour son réseau social. Mais tout comme Alphabet, la société mère de Google, qui explore les voitures autonomes, les systèmes de cartographie et livraisons par drones aux côtés de la recherche, Facebook s'intéresse à bien plus que de simples fils d'actualité et chronologies. Dans le passé, la société a montré un intérêt considérable pour la réalité virtuelle et la réalité augmentée, depuis son acquisition de Oculus à la création du Spark AR Studio. Facebook n’a pas encore fait ses preuves en ce qui concerne une grande partie de cette technologie. Pourtant, si l’on en croit ce travail, il semble que Facebook pourrait utiliser son pouvoir considérable à bon escient lorsqu’il s’agit de l’avenir de la connexion des personnes.

Un article décrivant le travail, intitulé « Potentiel des plateformes de réalité augmentée pour améliorer les aides auditives individuelles et soutenir une recherche plus écologiquement valable », a été publié. récemment publié dans la revue Ear & Hearing.

Recommandations des rédacteurs

  • Casque Apple VR en préparation, lunettes AR à venir plus tard
  • Facebook reconfirme qu'il travaille sur des lunettes AR, quelques semaines seulement après qu'une fuite l'ait annoncé