Смерть мыши: как технология отслеживания взгляда может спасти ПК

Отслеживание глаз

За последние несколько лет сенсорное управление произвело революцию в том, как мы взаимодействуем с мобильными устройствами. Эта технология была настолько популярна на смартфонах, что Apple использовала свой проверенный сенсорный подход, чтобы заново изобрести мертвый рынок планшетов с помощью iPad. Благодаря бурному росту этих устройств, сенсорный экран набирает обороты, приобретая новые форм-факторы и создавая потенциальная угроза нашему старому другу: компьютеру.

Со всеми этими интерфейсами с управлением движением для систем видеоигр и сенсорными интерфейсами для мобильных устройств ПК с его клавиатурой и мышью кажется просто старым. Клавиатура по-прежнему остается самым быстрым и лучшим способом ввода больших объемов данных и написания письменного контента, но мышь и сенсорная панель — это шаг вперед по сравнению с естественным, непосредственным ощущением, которое возникает при использовании Wii, Xbox Kinect или сенсорного экрана. планшет. Тобии надеется исправить этот дисбаланс.

В прошлую пятницу я встретился с Барбарой Барклай, североамериканским менеджером Tobii Technologies (шведская компания), чтобы опробовать совершенно новый тип пользовательского интерфейса, созданный для потребительских настольных компьютеров и ноутбуков. В маленьком офисном здании на Манхэттене, штат Нью-Йорк, она позволила мне попробовать один из немногих

20 прототипов ноутбуков Lenovo, каждый из которых имеет встроенные инфракрасные датчики, которые отслеживают движения глаз так точно и быстро, что даже самые лучшие интерфейсы мыши кажутся устаревшими.

Вот как это работает

ПК для управления глазами Lenovo-TobiiПрежде чем мы начали демонстрацию, Барбара объяснила технологию. Управление глазами Tobii немного похоже на Xbox Kinect (или перевернутый Wii), но в гораздо более близком масштабе. Когда вы сидите перед ноутбуком, два синхронизированных инфракрасных датчика, расположенных под экраном, сканируют ваши глаза. Они делают это от 30 до 40 раз в секунду, изучая размер и угол вашего зрачка, блеск в каждом из ваших глаз и расстояние между вами и ноутбуком. Вместе два датчика создают стереоскопическое трехмерное изображение вашего глаза, которое компьютер может изучить. На основе угла и блеска вашего глаза технология Tobii точно вычисляет, на какую часть экрана вы смотрите. Он даже может сказать, когда вы отводите взгляд или закрываете глаза. Для экономии энергии демонстрационная установка затемняла экран, когда мы отводили взгляд.

Объяснив, как это работает, Барбара откалибровала компьютер управления глазами Lenovo-Tobii для своих глаз. Процесс калибровки занимает несколько секунд. По сути, вы смотрите на серию из трех-девяти точек на экране, что позволяет компьютеру знать, куда смотрят ваши глаза. Nintendo использовала аналогичные калибровочные тесты для своих контроллеров Wii Motion Plus и программного обеспечения балансировочной платы Wii Fit. Калибровка безболезненна и не должна выполняться слишком часто. После калибровки ноутбук сможет сохранить ваш «профиль глаз» и сможет выполнить калибровку при входе в систему знакомого пользователя.

Это на самом деле работает... очень хорошо

Затем мы просмотрели несколько созданных вручную демонстраций, демонстрирующих несколько различных сценариев использования для управления глазами. Даже после того, как я попробовал это сам, мне было трудно поверить, что демонстрация не была искусной уловкой. Однако через несколько мгновений я начал верить.

Почти мгновенно компьютер начал улавливать движения моих глаз и реагировать на все, на что я смотрел. Когда я смотрел на предмет, он выделялся и выдвигался на передний план. Когда я смотрел на карту, она точно знала, на какую область я смотрю, вплоть до пикселя. Подобно тому, как новичок с Wii будет дико махать Wii Remote, моим первым побуждением было двигать всей головой, когда я смотрел на разные элементы на экране. Это работало достаточно хорошо, но через несколько мгновений я узнал, что технология Тобии может улавливать малейшие движения глаз без помощи движения моей головы. Каким-то образом оно могло сказать, когда я передвигал глаза на полдюйма влево или вправо или небрежно смотрел вверх или вниз, даже на волосок.

ПК для управления глазами Lenovo-Tobii

Текучесть опыта напомнила мне о том, как я впервые использовал iPod Touch, и о том, как естественно было проводить пальцем и касаться именно того места, где я хотел. До Touch и iPhone в большинстве сенсорных экранов использовалась технология резистивного касания, которая требовала нажатия на экран. Эти экраны требовали стилуса (устройство, похожее на ручку) для достижения точности, но Apple изменила правила игры с более естественным интерфейсом, который позволял вам напрямую использовать пальцы. Технология управления глазами Tobii так же проста, как любой сенсорный интерфейс. Это похоже на прикосновение издалека.

Использование для контроля зрения

Первая часть демонстрации (которую вы можете посмотреть ниже) просто показывает, куда ваши глаза смотрят на экране. Смотреть в собственные глаза не особенно весело, но это показывает, насколько быстро система реагирует, когда вы двигаетесь или моргаете. Однако после вводного экрана и калибровки мы перешли к другим сценариям использования.

Чтение: Из всех способов контроля зрения чтение демонстрирует свою ценность больше, чем что-либо еще. У каждого своя техника и стиль чтения на ноутбуке или сенсорном устройстве. Лично я предпочитаю размещать текст вверху экрана. Иногда я использую мышь, чтобы выделить то, что я уже прочитал, и использую кнопки направления для прокрутки вниз. Управление глазами Tobii мгновенно делает все эти индивидуальные стили чтения бесполезными. Более естественно, чем чтение книги, текст автоматически прокручивается вверх, вниз, влево или вправо, когда ваши глаза перемещаются по экрану. Это потрясающе. Запутались в слове? Что ж, если вы будете смотреть на одно слово достаточно долго, выскочит его определение.

Воспроизведение мультимедиа: Другая демонстрация, которую Барбара показала мне, была простым медиаплеером. Ряд картинок и обложек альбомов заполняют нижнюю часть экрана. Взгляд на один из них выделяет выбор, а взгляд вверх воспроизводит музыку или увеличивает изображение, чтобы вы могли лучше рассмотреть. Закончили слушать или смотреть? Просто посмотрите на другой элемент в списке. И когда вы смотрите на стрелки слева или справа в течение секунды или около того, появляется следующая страница результатов.

Масштабирование и панорамирование: Управление глазами не означает, что клавиатура бесполезна. В демонстрационной версии, похожей на Google Maps, вы можете перемещаться и масштабироваться, глядя и нажимая/удерживая кнопку, что работает хорошо. Одна кнопка назначена для масштабирования, а другая кнопка назначена для панорамирования. Для масштабирования вы просто смотрите на то, на чем хотите сфокусироваться, и нажимаете кнопку масштабирования. После увеличения, удерживая другую кнопку и глядя влево, вправо, вверх или вниз, вы можете перемещаться по увеличенному изображению. Вероятно, есть еще более интуитивные способы выполнения таких сложных задач.

Многозадачность: На выставке CES в этом году я похвалил BlackBerry PlayBook за его простой метод считывания для переключения между приложениями. С интерфейсом, подобным WebOS (или, возможно, Сама WebOS) и управление глазами Tobii, многозадачность между приложениями так же естественна, как взгляд влево или вправо от экрана. Используя Windows 7, которая вообще не оптимизирована ни для чего, кроме мыши, Барбара переключалась между окнами, глядя на них и нажимая кнопку. Она также легко перемещала значок указателя мыши по экрану.

Игры: Последнее демо, которое мы играли, было простым Астероиды-подобная игра. Ваша миссия состоит в том, чтобы защитить Землю от шквала комет и астероидов, приближающихся к вам. Глядя на астероид, активируется лазер, который взрывает его. Существует масса подобных игр с сенсорным управлением, в которых ваши рефлексы противопоставляются компьютеру, но управление глазами поднимает скорость и интенсивность этих игр на ступеньку выше. Я невероятно рад видеть, какие игры можно делать, используя скорость глаза.

Это лишь некоторые из многих новых способов управления глазами, которые позволят вам взаимодействовать с настольным компьютером или ноутбуком. Когда вы начинаете думать о том, как эта технология может взаимодействовать с распознаванием голоса, возможности кажутся безграничными. Через несколько лет, Отчет меньшинства может выглядеть устаревшим.

Это как Kinect для ПК

ПК для управления глазами Lenovo-Tobii

Microsoft заявила, что в конечном итоге выпустит технологию движения, подобную Kinect, для ПК. Что ж, мне не хочется им об этом говорить, но Тобии проделал большую часть тяжелой работы. Перенос Kinect на ПК означал бы смещение фокуса с тела на глаза и лицо, чего Тобии добился с поразительной точностью.

Я много писал о Microsoft и множество проблем, с которыми она сталкивается с виндовс 8. В настоящее время у компании есть неудачная платформа для телефонов и нет стратегии для планшетов. Чтобы продвигаться вперед, Microsoft необходимо создать ажиотаж вокруг своего хлеба с маслом, который по-прежнему остается традиционным, с клавиатурой. ПК. Управление глазами Tobii — это именно тот инновационный интерфейс, который Microsoft могла бы создать для полноценного нового опыта. вокруг. Это могло бы упростить сложную ОС Windows для настольных ПК, а также устранить некоторые пробелы между ПК и мобильными сенсорными платформами. При правильном внедрении подобная технология может возродить ажиотаж на рынке ноутбуков, особенно в сочетании со многими идеями, которые Microsoft продемонстрировала на Windows Phone и Xbox Kinect.

Барбара сообщила мне, что Microsoft уже является клиентом Tobii для некоторых из его более крупных исследовательских подразделений, которые редмондский гигант использует для изучения эффективность собственных макетов приложений и интерфейсов, отслеживая движения глаз потенциальных клиентов, когда они сталкиваются с новым дизайн. Майкрософт, я смотрю на тебя. Если вы не попробуете что-то подобное, это сделает кто-то другой.

Кто бы это ни был, ясно одно: Tobii нужен сильный партнер, реализующий потенциал ее технологии.

Надеюсь, появится контроль зрения

Как и любая хорошая технология, управление глазами Tobii настолько полезно, насколько полезны разработчики программного обеспечения, которые пишут для него. Компания ведет переговоры с рядом производителей оборудования, программного обеспечения и платформ о внедрении своей технологии на ПК уже через два года, но впереди ее ждет трудный путь. Технология по-прежнему должна быть меньше, использовать меньше батареи и стоить дешевле. Без видения Apple сенсорные планшеты десятилетиями оставались в подвешенном состоянии. Будем надеяться, что один из этих производителей платформ осознает потенциал управления глазами. Единственный неудачник здесь — мышь, и мне жаль, мой друг, я люблю тебя, но твои дни сочтены.