マウスの死: 視線追跡テクノロジーはどのようにして PC を救えるのか

アイトラッキング

ここ数年、タッチ コントロールはモバイル デバイスとの対話方法に革命をもたらしました。 この技術はスマートフォンで非常に人気があったため、Apple は実証済みのタッチ アプローチを使用して、iPad で死んだタブレット市場を再発明しました。 これらのデバイスの急速な成長のおかげで、タッチは大きな進歩を遂げ、新しいフォームファクターを採用し、 潜在的な脅威 私たちの最も古い友人である PC に。

ビデオ ゲーム システム用のモーション コントロール インターフェイスやモバイル デバイス用のタッチ インターフェイスをすべて備えているため、キーボードとマウスを備えた PC は、まったく古く感じられます。 キーボードは依然として大量のデータを入力し、書かれたコンテンツを作成するための最も速くて最良の方法ですが、マウスは とタッチパッドは、Wii、Xbox Kinect、またはタッチを使用するときに得られる自然で直接的な感覚から一歩離れています。 タブレット。 トビー氏はこの不均衡を是正したいと考えている。

先週の金曜日、私は Tobii Technologies (スウェーデンの会社) の北米マネージャーである Barbara Barclay と会い、消費者向けのデスクトップとラップトップ用に構築されたまったく新しいタイプのユーザー インターフェイスを試しました。 ニューヨークのマンハッタンにある小さなオフィスビルで、彼女は私にたった 1 つの製品を試しさせてくれました。 Lenovo ラップトップのプロトタイプ 20 台、それぞれに赤外線センサーが組み込まれており、目の動きを非常に正確かつ迅速に追跡するため、最高のマウスインターフェイスでさえ時代遅れに感じられます。

仕組みは次のとおりです

Lenovo-Tobii アイコントロール PCデモを開始する前に、バーバラがテクノロジーについて説明しました。 Tobii の視線コントロールは、Xbox Kinect (またはその逆の Wii) に少し似ていますが、スケールははるかに近いです。 ラップトップの前に座っていると、画面の下にある 2 つの同期赤外線センサーの列があなたの目をスキャンします。 これを 1 秒あたり約 30 ~ 40 回行い、瞳孔の大きさと角度、それぞれの目の輝き、およびラップトップとの距離を調べます。 2 つのセンサーが連携して、コンピューターが検査できるように目の立体的な 3D 画像を作成します。 Tobii のテクノロジーは、目の角度と輝きに基づいて、あなたが画面のどの部分を見ているかを正確に計算します。 目をそらしたり目を閉じたりしてもそれがわかります。 節電のため、手持ちのデモ機は目を離すと画面が暗くなってしまいました。

仕組みを説明した後、Barbara さんは Lenovo-Tobii の視線制御 PC を自分の目に合わせて調整しました。 調整プロセスには数秒かかります。 基本的に、画面上の一連の 3 ~ 9 個の点を見ることで、コンピューターはユーザーの目がどこを見ているかを認識します。 任天堂は、Wii モーション プラス コントローラーと Wii Fit バランス ボード ソフトウェアに対して同様の調整テストを使用しました。 キャリブレーションには痛みはなく、頻繁に行う必要はありません。 調整後、ラップトップはあなたの「アイプロファイル」を保存し、馴染みのあるユーザーがログオンするときに調整する方法を知ることができるようになります。

それは実際に機能します...本当にうまくいきます

次に、視線制御のさまざまな使用シナリオを示すいくつかの手作りのデモを実行しました。 自分で試してみた後でも、このデモが手の込んだ策略ではないとは信じられませんでした。 しかし、しばらくすると、私は信じ始めました。

ほとんど瞬時に、コンピュータは私の目の動きを認識し始め、私が見ているものすべてに反応しました。 アイテムを見ると、それ自体がハイライトされて前面に出てきます。 私が地図を見ると、地図は私がどのエリアを見ているのかをピクセル単位で正確に把握していました。 Wii の初心者が Wii リモコンを激しく振るのと同じように、私の最初の本能は、画面上のさまざまな項目を見ながら頭全体を動かすことでした。 これでも十分にうまくいきましたが、しばらくして、Tobii のテクノロジーが頭を動かさなくても目の微妙な動きを捕捉できることがわかりました。 目を左右に0.5インチ動かしたり、何気なく上下を見たり、髪の毛一本を見たりすると、どういうわけかそれがわかりました。

Lenovo-Tobii アイコントロール PC

エクスペリエンスの流動性は、初めて iPod Touch を使用したときのことを思い出させます。スワイプして希望の場所に正確にタッチすることがいかに自然に感じられたかです。 Touch と iPhone が登場する前は、ほとんどのタッチスクリーンは抵抗膜タッチ技術を使用しており、実際に画面を押し下げる必要がありました。 これらの画面では精度を実現するためにスタイラス (ペンのようなデバイス) が必要でしたが、Apple は指を直接使用できる、より自然なインターフェイスでゲームを変えました。 Tobii の視線制御テクノロジーは、他のタッチ インターフェイスと同じくらい直接的です。 遠くから触った感じです。

視線制御のための用途

デモの最初の部分 (以下でご覧いただけます) は、目が画面上のどこを見ているかを示すだけです。 自分の目を見つめるのは特に楽しいことではありませんが、動いたり瞬きしたりしたときにシステムがどれだけ早く反応するかがわかります。 ただし、イントロ画面とキャリブレーションの後、いくつかの異なる使用シナリオが始まりました。

読む: 視線制御のあらゆる用途の中で、読書は何よりもその価値を発揮します。 ラップトップやタッチ デバイスで読書するための独自のテクニックとスタイルは人それぞれです。 個人的には、テキストを画面の上部に置く傾向があります。 マウスを使ってすでに読んだ内容を強調表示したり、方向ボタンを使って下にスクロールしたりすることがあります。 Tobii の視線制御により、これらのカスタマイズされた読書スタイルはすべて無関係になります。 本を読むよりも自然で、目が画面上を移動すると、テキストが自動的に上下左右にスクロールします。 すごい。 言葉に迷っていませんか? そうですね、1 つの単語を十分に長く見つめていれば、その定義が浮かび上がってきます。

メディアの再生: Barbara が私に見せてくれたもう 1 つのデモは、単純なメディア プレーヤーでした。 写真とアルバムのカバーが画面の下部を埋め尽くします。 そのうちの 1 つをちらっと見ると選択内容が強調表示され、上を見ると音楽が再生されたり、画像が最大化されたりして、よりよく見ることができます。 視聴または視聴は終わりましたか? リスト内の別の項目を確認するだけです。 左右の矢印を 1 秒ほど見ると、次のページの結果が表示されます。

ズームとパン: 視線制御だからといって、キーボードが使用できないわけではありません。 Google マップのようなデモでは、ボタンを探して長押しすることでパンやズームを行うことができ、これはうまく機能します。 1 つのボタンがズームに割り当てられ、別のボタンがパンに割り当てられます。 ズームするには、焦点を合わせたいものを見てズームボタンを押すだけです。 ズームしたら、別のボタンを押したまま左、右、上、または下を見ると、ズームした画像をパンすることができます。 このような複雑なタスクを実行するためのさらに直感的な方法がある可能性があります。

マルチタスク: 今年のCESで私はこう褒めました。 BlackBerry プレイブック 簡単なスワイプ方法でアプリケーションを切り替えることができます。 WebOS のようなインターフェイス (またはおそらく WebOS自体) と Tobii の視線制御により、アプリ間のマルチタスクは画面の左または右を見るのと同じくらい自然です。 Barbara は、マウス以外にはまったく最適化されていない Windows 7 を使用し、ウィンドウを見てボタンを押すことでウィンドウを切り替えました。 また、マウス ポインタ アイコンを画面上で簡単に移動させることもできました。

ゲーム: 最後にプレイしたデモはシンプルなものでした 小惑星-のようなゲーム。 あなたの使命は、向かってくる終末級の彗星や小惑星の集中砲火から地球を守ることです。 小惑星を見るとレーザーが発射され、小惑星が爆破されます。 このようにコンピューターと反射神経を競うタッチ タイプのゲームはたくさんありますが、視線制御により、これらのゲームのスピードと迫力はワンランク上になります。 目の速さを活かしてどんなゲームが作れるのかとても楽しみです。

これらは、視線制御を使用して PC デスクトップまたはラップトップと対話できる多くの新しい方法のうちのほんの一部です。 このテクノロジーが音声認識とどのように連携できるかを考え始めると、可能性は無限にあるように思えます。 数年で、 マイノリティ・リポート 時代遅れに見えるかもしれません。

PC版のKinectのようなもの

Lenovo-Tobii アイコントロール PC

Microsoftは、最終的にはKinectのようなモーション技術をPC向けにリリースすると発表した。 そうですね、彼らに言いたくはありませんが、Tobii は多くの大変な仕事をしてくれました。 Kinect を PC に移行するということは、焦点を体から目と顔に移すことを意味しますが、Tobii はこれを驚くべき正確さで達成しました。

についてたくさん書きました マイクロソフトとマイクロソフトが直面する多くの課題 Windows 8で。 現在、同社の電話プラットフォームは失敗しており、タブレット戦略はありません。 Microsoft が前進するためには、依然として伝統的なキーボードを使用したパンとバターに関する興奮を生み出す必要があります。 パソコン。 Tobii の視線制御は、まさに Microsoft が包括的な新しいエクスペリエンスを構築できる革新的なインターフェイスです。 その周り。 これにより、Windows デスクトップ OS の複雑さが簡素化され、同時に PC とモバイル タッチ プラットフォーム間のギャップの一部が埋められる可能性があります。 このようなテクノロジーが適切に実装されれば、特に Microsoft が Windows Phone や Xbox Kinect で実証してきたアイデアの多くと組み合わせることで、ラップトップ市場の話題が再燃する可能性があります。

Barbara は、Microsoft がすでに Tobii の一部の大規模な研究部門の顧客であり、レドモンドの巨人が研究に使用していると教えてくれました。 新しいアプリケーションを体験する潜在的な顧客の目の動きを追跡することで、独自のアプリケーション レイアウトとインターフェイスの有効性を確認します。 デザイン。 マイクロソフトさん、私はあなたを見ています。 あなたがこのようなことを試さなければ、他の誰かがそうするでしょう。

それが誰であるかに関係なく、明らかなことが 1 つあります。Tobii には、そのテクノロジーの可能性を理解してくれる強力なパートナーが必要だということです。

視線制御が来るといいですね

他の優れたテクノロジーと同様、Tobii の視線制御は、それを作成するソフトウェア開発者と同じくらい役に立ちます。 同社は、早ければ2年後のPCへの実装に向けて、多くのハードウェア、ソフトウェア、プラットフォームメーカーと交渉を進めているが、その道のりは険しいものとなるだろう。 このテクノロジーは依然として小型化、バッテリー使用量の削減、コスト削減が必要です。 Apple のビジョンがなければ、タッチ タブレット デバイスは 10 年間にわたって宙ぶらりんの状態にありました。 これらのプラットフォームメーカーのいずれかが視線制御の可能性を認識することを願いましょう。 ここでの唯一の敗者はネズミです。友人、ごめんなさい、愛していますが、あなたの命は残りわずかです。