In den letzten Jahren hat die Touch-Steuerung die Art und Weise, wie wir mit mobilen Geräten interagieren, revolutioniert. Die Technologie erfreut sich bei Smartphones so großer Beliebtheit, dass Apple seinen bewährten Touch-Ansatz nutzte, um den toten Tablet-Markt mit dem iPad neu zu erfinden. Dank des rasanten Wachstums dieser Geräte erlebt die Touch-Technologie einen großen Aufschwung, nimmt neue Formfaktoren an und stellt eine neue Herausforderung dar Mögliche Gefahr an unseren ältesten Freund: den PC.
Mit all diesen bewegungsgesteuerten Schnittstellen für Videospielsysteme und Touch-Schnittstellen für mobile Geräte fühlt sich der PC mit Tastatur und Maus einfach alt an. Die Tastatur ist immer noch die schnellste und beste Möglichkeit, große Datenmengen einzugeben und schriftliche Inhalte zu verfassen, aber die Maus und Touchpad sind einen Schritt weiter von dem natürlichen, direkten Gefühl entfernt, das man bekommt, wenn man die Wii, Xbox Kinect oder eine Berührung verwendet Tablette. Tobii hofft, dieses Ungleichgewicht zu beheben.
Letzten Freitag traf ich mich mit Barbara Barclay, der nordamerikanischen Managerin von Tobii Technologies (einem schwedischen Unternehmen), um eine völlig neue Art von Benutzeroberfläche auszuprobieren, die für Consumer-Desktops und -Laptops entwickelt wurde. In einem kleinen Bürogebäude in Manhattan, New York, ließ sie mich eines davon ausprobieren 20 Prototypen von Lenovo-Laptops, die jeweils über eingebaute Infrarotsensoren verfügen, die Augenbewegungen so präzise und schnell verfolgen, dass selbst die besten Mausschnittstellen antiquiert wirken.
So funktioniert das
Bevor wir mit der Demo begannen, erklärte Barbara die Technologie. Tobiis Augensteuerung funktioniert ein bisschen wie bei der Xbox Kinect (oder einer umgekehrten Wii), aber in einem viel engeren Maßstab. Während Sie vor dem Laptop sitzen, scannt eine Reihe von zwei synchronisierten Infrarotsensoren unter dem Bildschirm Ihre Augen. Sie tun dies etwa 30 bis 40 Mal pro Sekunde und untersuchen dabei die Größe und den Winkel Ihrer Pupille, das Glitzern in jedem Ihrer Augen und den Abstand zwischen Ihnen und dem Laptop. Zusammen erzeugen die beiden Sensoren ein stereoskopisches 3D-Bild Ihres Auges, das der Computer untersuchen kann. Basierend auf dem Winkel und dem Glitzern Ihres Auges berechnet die Technologie von Tobii genau, welchen Teil des Bildschirms Sie betrachten. Es kann sogar erkennen, wenn Sie wegschauen oder die Augen schließen. Um Strom zu sparen, verdunkelte das vorliegende Demogerät den Bildschirm, wenn wir wegschauten.
Nachdem Barbara die Funktionsweise erklärt hatte, kalibrierte sie den Lenovo-Tobii-Augenkontroll-PC für ihre Augen. Der Kalibrierungsvorgang dauert einige Sekunden. Grundsätzlich sehen Sie auf dem Bildschirm eine Reihe von drei bis neun Punkten, die dem Computer mitteilen, wohin Ihre Augen schauen. Nintendo hat ähnliche Kalibrierungstests für seine Wii Motion Plus-Controller und die Balanceboard-Software Wii Fit durchgeführt. Die Kalibrierung ist schmerzlos und sollte nicht sehr oft durchgeführt werden müssen. Nach der Kalibrierung kann der Laptop Ihr „Augenprofil“ speichern und weiß, wie er kalibriert wird, wenn sich ein bekannter Benutzer anmeldet.
Es funktioniert tatsächlich... wirklich gut
Als nächstes haben wir mehrere handgefertigte Demos durchgespielt, die verschiedene Anwendungsszenarien für die Augensteuerung zeigen. Selbst nachdem ich es selbst ausprobiert hatte, fiel es mir schwer zu glauben, dass die Demonstration kein ausgeklügelter Trick war. Doch nach ein paar Augenblicken begann ich zu glauben.
Fast augenblicklich begann der Computer, meine Augenbewegungen zu erfassen und auf alles zu reagieren, was ich ansah. Wenn ich mir einen Gegenstand ansah, fiel er auf und trat in den Vordergrund. Wenn ich mir eine Karte ansah, wusste sie pixelgenau, auf welches Gebiet ich starrte. Ähnlich wie ein Wii-Neuling wild mit der Wii-Fernbedienung wedelt, war mein erster Instinkt, meinen gesamten Kopf zu bewegen, während ich verschiedene Elemente auf dem Bildschirm betrachtete. Das funktionierte ganz gut, aber nach ein paar Augenblicken erfuhr ich, dass die Technologie von Tobii auch die subtilsten Augenbewegungen erfassen konnte, ohne dass ich dabei meinen Kopf bewegen musste. Irgendwie konnte es sogar ein Haar erkennen, wenn ich meine Augen einen halben Zoll nach links oder rechts bewegte oder beiläufig nach oben oder unten schaute.
Die flüssige Erfahrung erinnerte mich an die erste Verwendung des iPod Touch und daran, wie natürlich es sich anfühlte, genau dort zu wischen und zu berühren, wo ich wollte. Vor Touch und iPhone nutzten die meisten Touchscreens die Resistive-Touch-Technologie, bei der man tatsächlich auf den Bildschirm drücken musste. Diese Bildschirme erforderten einen Stift (ein stiftähnliches Gerät), um Präzision zu erreichen, aber Apple hat das Spiel mit seiner natürlicheren Benutzeroberfläche verändert, die es Ihnen ermöglicht, Ihre Finger direkt zu verwenden. Die Augensteuerungstechnologie von Tobii ist so direkt wie jede andere Touch-Oberfläche. Es fühlt sich wie eine Berührung aus der Ferne an.
Wird zur Augenkontrolle verwendet
Der erste Teil der Demo (den Sie unten ansehen können) zeigt lediglich, wohin Ihre Augen auf dem Bildschirm blicken. Der Blick in die eigenen Augen macht nicht besonders viel Spaß, zeigt einem aber, wie schnell das System auf Bewegungen oder Blinzeln reagiert. Nach dem Einführungsbildschirm und der Kalibrierung kamen wir jedoch auf einige unterschiedliche Nutzungsszenarien.
Lektüre: Von allen Einsatzmöglichkeiten zur Augenkontrolle zeigt sich vor allem das Lesen als wertvoll. Jeder hat seine eigene Technik und seinen eigenen Lesestil auf einem Laptop oder Touch-Gerät. Ich persönlich neige dazu, meinen Text am oberen Bildschirmrand zu platzieren. Manchmal markiere ich mit der Maus Dinge, die ich bereits gelesen habe, und scrolle mit den Richtungstasten nach unten. Die Augensteuerung von Tobii macht alle diese individuellen Lesestile sofort irrelevant. Der Text ist natürlicher als das Lesen eines Buches und scrollt für Sie automatisch nach oben, unten, links oder rechts, während Ihre Augen über den Bildschirm schweifen. Es ist wunderbar. Sind Sie wegen eines Wortes verwirrt? Nun, wenn Sie lange genug auf ein Wort starren, wird dessen Definition auftauchen.
Medien abspielen: Eine andere Demo, die Barbara mir zeigte, war ein einfacher Mediaplayer. Eine Reihe von Bildern und Albumcovern füllt den unteren Bildschirmrand. Wenn Sie einen Blick darauf werfen, wird die Auswahl hervorgehoben, und wenn Sie nach oben blicken, wird die Musik abgespielt oder das Bild maximiert, damit Sie es besser sehen können. Fertig mit Zuhören oder Ansehen? Schauen Sie sich einfach einen anderen Eintrag in der Liste an. Und wenn Sie etwa eine Sekunde lang auf die Pfeile links oder rechts geschaut haben, erscheint die nächste Ergebnisseite.
Zoomen und Schwenken: Augenkontrolle bedeutet nicht, dass die Tastatur nicht verwendet werden kann. In einer Google Maps-ähnlichen Demo können Sie schwenken und zoomen, indem Sie auf eine Schaltfläche schauen und sie gedrückt halten, was gut funktioniert. Eine einzelne Taste ist dem Zoomen und eine weitere Taste dem Schwenken zugewiesen. Zum Zoomen blicken Sie einfach auf das, worauf Sie fokussieren möchten, und drücken die Zoomtaste. Wenn Sie nach dem Zoomen eine andere Taste gedrückt halten und nach links, rechts, oben oder unten schauen, können Sie das gezoomte Bild schwenken. Es gibt wahrscheinlich noch intuitivere Möglichkeiten, komplexe Aufgaben wie diese auszuführen.
Multitasking: Auf der diesjährigen CES habe ich dem ein Kompliment gemacht BlackBerry PlayBook für seine einfache Wischmethode zum Wechseln zwischen Anwendungen. Mit einer WebOS-ähnlichen Oberfläche (oder vielleicht WebOS selbst) und Tobiis Augensteuerung ist Multitasking zwischen Apps so natürlich wie der Blick auf die linke oder rechte Seite des Bildschirms. Unter Windows 7, das überhaupt nicht für etwas anderes als eine Maus optimiert ist, wechselte Barbara zwischen den Fenstern, indem sie sie ansah und eine Taste drückte. Sie bewegte auch mühelos ein Mauszeigersymbol über den Bildschirm.
Spielen: Die letzte Demo, die wir gespielt haben, war einfach Asteroiden-ähnliches Spiel. Ihre Mission ist es, die Erde vor einer Flut von Kometen und Asteroiden in der Größe eines Weltuntergangs zu schützen, die auf Sie zusteuern. Der Blick auf einen Asteroiden löst einen Laser aus, der ihn in die Luft jagt. Es gibt eine Menge Touch-Spiele wie dieses, bei denen Ihre Reflexe mit denen des Computers konkurrieren, aber die Augenkontrolle erhöht die Geschwindigkeit und Intensität dieser Spiele um ein Vielfaches. Ich bin unglaublich gespannt, welche Art von Spielen sich mit der Geschwindigkeit des Auges machen lassen.
Dies sind nur einige der vielen neuen Möglichkeiten, wie Sie mit der Augensteuerung mit einem PC-Desktop oder Laptop interagieren können. Wenn man darüber nachdenkt, wie diese Technologie mit der Spracherkennung interagieren könnte, scheinen die Möglichkeiten endlos zu sein. In ein paar Jahren, Minderheitsbericht kann veraltet aussehen.
Es ist wie Kinect für PCs
Microsoft hat angekündigt, irgendwann Kinect-ähnliche Bewegungstechnologie für PCs herauszubringen. Nun, ich sage es ihnen nur ungern, aber Tobii hat einen Großteil der harten Arbeit geleistet. Die Umstellung von Kinect auf einen PC würde bedeuten, den Fokus vom Körper auf die Augen und das Gesicht zu verlagern, was Tobii mit bemerkenswerter Präzision gelungen ist.
Ich habe viel darüber geschrieben Microsoft und die vielen Herausforderungen, denen es gegenübersteht mit Windows 8. Derzeit verfügt das Unternehmen über eine fehlerhafte Telefonplattform und keine Tablet-Strategie. Um voranzukommen, muss Microsoft Begeisterung für sein immer noch traditionelles, tastaturgesteuertes Brot und Butter wecken Stck. Die Augensteuerung von Tobii ist genau die Art von innovativer Schnittstelle, mit der Microsoft ein umfassendes neues Erlebnis schaffen könnte um. Es könnte die Komplexität des Windows-Desktop-Betriebssystems vereinfachen und gleichzeitig einige Lücken zwischen dem PC und den mobilen Touch-Plattformen schließen. Bei richtiger Implementierung könnte eine solche Technologie auf dem Laptop-Markt wieder für Aufsehen sorgen, insbesondere in Kombination mit vielen der Ideen, die Microsoft auf Windows Phone und Xbox Kinect demonstriert hat.
Barbara teilte mir mit, dass Microsoft für einige seiner größeren Forschungseinheiten, die der Redmonder Riese für Studien nutzt, bereits Kunde von Tobii ist die Effektivität der eigenen Anwendungslayouts und -schnittstellen, indem es die Augenbewegungen potenzieller Kunden verfolgt, wenn diese eine neue Erfahrung machen Design. Microsoft, ich schaue dich an. Wenn Sie so etwas nicht versuchen, wird es jemand anderes tun.
Unabhängig davon, wer es ist, ist eines klar: Tobii braucht einen starken Partner, der das Potenzial seiner Technologie erkennt.
Hoffentlich kommt die Augenkontrolle
Wie jede gute Technologie ist auch die Augensteuerung von Tobii nur so nützlich wie die Softwareentwickler, die dafür schreiben. Das Unternehmen befindet sich in Gesprächen mit einer Reihe von Hardware-, Software- und Plattformherstellern, um darauf hinzuarbeiten, seine Technologie bereits in zwei Jahren in PCs zu implementieren, aber es wird ein schwieriger Weg vor uns sein. Die Technologie muss immer noch kleiner sein, weniger Batterie verbrauchen und weniger kosten. Ohne die Vision von Apple stagnierten Touch-Tablet-Geräte ein Jahrzehnt lang in der Schwebe. Hoffen wir, dass einer dieser Plattformhersteller das Potenzial der Augenkontrolle erkennt. Der einzige Verlierer hier ist die Maus, und es tut mir leid, mein Freund, ich liebe dich, aber deine Tage sind gezählt.
