페이스북, 청각을 강화하는 AR 안경을 만든다

일반적으로 연구실이 술집으로 변하고 있다는 소식은 그 연구실이 실패했고 그 연구원들이 포기하고 있음을 시사합니다. 그러나 Facebook Reality Labs Research의 경우 (부분적으로) 창의적이고 새로운 아이디어를 내놓는 데 전념하는 연구소입니다. 청각 장애가 있거나 난청이 있는 지역사회 구성원의 청력을 향상시키는 방법을 통해 그 노력이 성과를 거두고 있음을 보여주었습니다. 끄다.

Facebook의 명시된 사명은 사람들이 서로 연결하고 소통할 수 있도록 돕는 것입니다. 이것이 바로 이 프로젝트를 수행하는 것이 임무 외적인 것처럼 보일 수도 있지만 실제로는 회사의 핵심 역량에 완벽하게 들어맞는 이유입니다.

문제 페이스북 시끄러운 환경에 있는 개인의 오디오 픽업을 개선하는 방법을 다루려고 노력해 왔습니다. 청력 상실이 있는 많은 사람들은 그 심각도에 따라 청각 장애가 있고 상호 작용하는 것이 가능하다고 생각합니다. 조용한 장소, 바 등 시끄러운 환경, 분주한 사교 장소에서의 일대일 상황은 매우 어려울 수 있습니다. 더 강하다. 이를 염두에 두고 Facebook은 빔포밍 기술을 어떻게 결합할 수 있는지 탐구해 왔습니다. 학습, 소음 제거, 그리고 아마도 가장 놀랍게도 증강 현실(AR)을 통해 이를 개선할 수 있습니다. 상황.

최근 프로젝트에서 Facebook 과학자들은 증강 현실 안경이 사람들이 보고 있는 곳을 보고 증폭하고 싶은 소리를 결정하는 데 어떻게 도움이 될 수 있는지 탐구해 왔습니다. AR 안경은 사람이 보고 있는 것에 초점을 오디오 입력과 일치시킴으로써 알아낼 수 있습니다. 사람이 듣고 싶어하는 소리와 그렇지 않은 소리 — 그런 다음 사운드 채널을 올리거나 내리십시오. 따라서. 이 분야에 대한 실험의 일환으로, 페이스북 여러 개의 시끄러운 사운드 입력이 있는 장소에서 어떻게 작동하는지 알아보기 위해 이 조사의 대부분이 수행되는 작업 공간을 가짜 바로 전환했습니다.

“청력 손실이 있는 많은 사람들은 보청기를 사용하지 않습니다. 부분적으로는 보청기가 매일 잘 작동하지 않기 때문입니다. 시끄러운 식당, 시끄러운 파티에서 여러 사람이 나누는 대화, 이동 중 등의 상황 자동차," 토마스 루너, Facebook 청력 과학 연구소의 연구 책임자는 Digital Trends에 말했습니다. “AR 안경에 대한 향상된 청각 연구를 수행하면서 우리는 우리가 발견한 일부가 이 문제를 해결하는 데 관련될 수 있다는 것을 깨달았습니다. [우리의 새로운 연구]에서 우리는 증강 현실이 어떻게 보청기를 보완할 수 있는지 보여줍니다. 듣고 싶은 소리를 이해하고 듣고 싶은 소리를 분리 및 강화하며 방해 요소를 줄입니다. 배경 소음. 그런 다음 강화된 AR 처리 신호를 보청기에 전송함으로써 귀하의 고유한 청력 능력에 맞게 조정되는 시스템을 얻을 수도 있습니다.”

Facebook Research의 강점 활용

Lunner는 이 연구 분야에 있어 초보자가 아닙니다. 그는 1995년 세계 최초의 디지털 보청기의 기반을 마련한 유명한 청력 과학자입니다. 이 연구는 아직 초기 단계이지만 이미지 인식, 자연어 처리 등과 같은 Facebook의 다양한 연구 영역을 활용합니다.

“청력 과학은 우리가 이제 막 탐구하기 시작한 영역이므로 이 기술은 하지만 우리는 AR 글래스의 가능성에 매우 기대하고 있습니다.” Lunner 계속되는. "우리는 언젠가 청력 손실이 있거나 파티에서 사람들을 이해하는 데 어려움을 겪는 사람을 돕는 것을 포함하여 모든 종류의 개선을 제공하는 데 도움이 될 수 있다고 생각합니다."

마이클 아브라쉬Facebook Reality Labs의 수석 과학자인 Digital Trends에 따르면 증강 현실과 가상 현실 모두 접근성 공간에 깊은 영향(및 응용 프로그램)을 가질 수 있다고 믿습니다.

Abrash는 “AR과 VR은 모든 사람에게 혜택을 줄 수 있는 엄청난 잠재력을 갖고 있지만 특히 다양한 신체 능력을 가진 사람들에게 큰 잠재력을 가지고 있습니다.”라고 말했습니다. “예를 들어, AR 안경은 언젠가 시력이 좋지 않은 사람들을 돕기 위해 대비를 향상시킬 수 있을 것입니다. 더 잘 볼 수 있으며 주변 소리와 말에 대한 시각적 피드백을 청력에 제공할 수 있습니다. 장애가 있습니다. 또 다른 예로, 우리는 VR, 그리고 궁극적으로는 AR이 언젠가 초현실적인 가상 공간을 만들 수 있을 것이라고 믿습니다. 거동이 불편한 사람들이 사무실이나 할머니 집으로 순간이동할 수 있게 해주는 아바타 방."

물론 Facebook은 소셜 네트워크로 가장 잘 알려져 있습니다. 하지만 자율주행차, 매핑 시스템, 드론 배달 검색과 함께, 페이스북 뉴스피드와 타임라인 그 이상에 관심이 있습니다. 과거에는 VR과 AR 모두에 상당한 관심을 보였습니다. 오큘러스 의 창조에 스파크 AR 스튜디오. 페이스북 이 기술의 많은 부분에 관해서는 아직까지 손을 보여주지 않았습니다. 그래도 이 작품은 그냥 지나칠 것 같다. 페이스북 사람들을 연결하는 미래에 있어서는 그 상당한 힘을 선을 위해 사용할 수 있습니다.

"개별 보청기를 개선하고 보다 생태학적으로 유효한 연구를 지원하기 위한 증강 현실 플랫폼의 잠재력"이라는 제목의 작업을 설명하는 논문은 최근 Ear & Hearing 저널에 게재됨.

편집자의 추천

• Apple VR 헤드셋 작업 중, AR 안경은 추후 출시 예정
• 페이스북은 유출이 알려진 지 불과 몇 주 만에 AR 안경을 개발하고 있음을 재확인했습니다.