Eye-tracking позволяет управлять дронами простым взглядом

Пространственное задание автономного голоса MAV, управляемое взглядом человека

Есть всевозможные странные и замечательные системы управления изобретен, чтобы помочь пилотам дронов вести свои беспилотные летательные аппараты по небу. Однако тот, который звучит довольно интуитивно, изложен в новом исследовании инженеров Нью-Йоркского университета, Пенсильванского университета и Исследовательской лаборатории армии США. Они изобрели метод, позволяющий пилотам дронов летать, используя очки слежения за глазами. Что может быть проще?

Рекомендуемые видео

«Это решение дает возможность создавать новые, неинвазивные формы взаимодействия между человеком и роботами, позволяющие человеку отправлять новые путевые точки 3D-навигации на объект. робот в среде без инструментов», — рассказал Digital доктор Джузеппе Лоянно, доцент Нью-Йоркского университета и директор лаборатории гибкой робототехники и восприятия. Тенденции. «Пользователь может управлять дроном, просто указывая в пространстве взглядом, который в нашем случае отличается от ориентации головы».

Метод прост в использовании и автономен. Что касается аппаратного обеспечения, для этого требуется дрон (очевидно!), небольшой вычислительный блок и пара Очки Tobii Pro 2. Эти очки для отслеживания взгляда оснащены инерционным измерительным блоком (IMU) и встроенной HD-камерой. Используя интеллектуальную технологию глубоких нейронных сетей и данные об ориентации головы от IMU, очки способны определять, куда смотрит пользователь и как далеко находится дрон.

Нью-Йоркский университет

Исследователи надеются, что такая технология может быть использована, чтобы помочь людям с небольшим опытом управления дронами безопасно управлять ими без необходимости участия опытного пилота.

«Предлагаемое решение открывает новые способы интерпретации человеческого внимания и создания новых упреждающих интерфейсов человека и робота», — продолжил Лоянно. «Мы стремимся создать новые способы взаимодействия между агентами. В частности, мы заинтересованы в разработке мультимодальной системы взаимодействия — [включающей] визуальное, голосовое [и взаимодействие на основе жестов] — и добавлении нескольких агентов в структуру. Мы также хотели бы изучить преимущества, которые предлагаемое решение может предоставить людям, страдающим заболеваниями тела или глаз».

Недавно была опубликована статья с описанием работы под названием «Пространственное задание автономного MAV, управляемое взглядом человека». представлено на Международную конференцию по робототехнике и автоматизации 2019 года, которая состоится в мае 2019. Обязательно держите взгляд в этом направлении!

Рекомендации редакции

  • Гантели NordicTrack iSelect позволяют персонализировать тренировку с помощью Alexa
  • Новый владелец дрона? Посмотрите это видео перед полетом
  • Sony, похоже, собирается выйти на рынок дронов, чтобы бросить вызов могущественному DJI
  • Комплект M-200 «Shield Kit» от V-Moda позволяет настроить внешний вид ваших наушников.
  • Программное обеспечение для дронов калифорнийского стартапа отслеживает социальное дистанцирование с воздуха

Обновите свой образ жизниDigital Trends помогает читателям быть в курсе быстро меняющегося мира технологий благодаря всем последним новостям, забавным обзорам продуктов, содержательным редакционным статьям и уникальным кратким обзорам.