Au cours des dernières années, le contrôle tactile a révolutionné la façon dont nous interagissons avec les appareils mobiles. La technologie a été si populaire sur les smartphones qu'Apple a utilisé son approche tactile éprouvée pour réinventer le marché mort des tablettes avec l'iPad. Grâce à la croissance florissante de ces appareils, le tactile prend son essor en prenant de nouveaux facteurs de forme et en posant un menace potentielle à notre plus vieil ami: le PC.
Avec toutes ces interfaces contrôlées par le mouvement pour les systèmes de jeux vidéo et les interfaces tactiles pour les appareils mobiles, le PC avec son clavier et sa souris se sent tout simplement vieux. Le clavier reste le moyen le plus rapide et le meilleur pour saisir de grandes quantités de données et créer du contenu écrit, mais la souris et le pavé tactile sont à un pas de la sensation naturelle et directe que l'on obtient lors de l'utilisation de la Wii, de la Xbox Kinect ou d'une touche tablette. Tobii espère rectifier ce déséquilibre.
Vendredi dernier, j'ai rencontré Barbara Barclay, directrice nord-américaine de Tobii Technologies (une société suédoise) pour essayer un tout nouveau type d'interface utilisateur conçue pour les ordinateurs de bureau et portables grand public. Dans un petit immeuble de bureaux à Manhattan, New York, elle m'a laissé essayer l'un des seuls 20 prototypes d'ordinateurs portables Lenovo, qui ont chacun des capteurs infrarouges intégrés qui suivent le mouvement des yeux si précisément et rapidement que même les meilleures interfaces de souris semblent désuètes.
Voici comment cela fonctionne
Avant de commencer la démonstration, Barbara a expliqué la technologie. Le contrôle visuel de Tobii fonctionne un peu comme la Xbox Kinect (ou une Wii inversée), mais à une échelle beaucoup plus proche. Lorsque vous êtes assis devant l'ordinateur portable, une rangée de deux capteurs infrarouges synchronisés situés sous l'écran scanne vos yeux. Ils le font environ 30 à 40 fois par seconde, en examinant la taille et l'angle de votre pupille, la lueur dans chacun de vos yeux et la distance entre vous et l'ordinateur portable. Ensemble, les deux capteurs créent une image 3D stéréoscopique de votre œil que l'ordinateur peut examiner. En fonction de l'angle et de la luminosité de votre œil, la technologie de Tobii calcule avec précision la partie de l'écran que vous regardez. Il peut même dire quand vous détournez le regard ou fermez les yeux. Pour économiser de l'énergie, l'unité de démonstration à portée de main a assombri son écran lorsque nous avons détourné le regard.
Après avoir expliqué comment cela fonctionne, Barbara a calibré le PC de contrôle visuel Lenovo-Tobii pour ses yeux. Le processus de calibrage prend quelques secondes. Fondamentalement, vous regardez une série de trois à neuf points sur l'écran, ce qui permet à l'ordinateur de savoir où vos yeux regardent. Nintendo a utilisé des tests d'étalonnage similaires sur ses manettes Wii Motion Plus et son logiciel de balance Wii Fit. Le calibrage est indolore et ne devrait pas être fait très souvent. Après le calibrage, l'ordinateur portable pourra enregistrer votre "profil oculaire" et savoir comment calibrer lorsqu'un utilisateur familier se connecte.
Cela fonctionne vraiment… vraiment bien
Ensuite, nous avons parcouru plusieurs démos artisanales qui présentent différents scénarios d'utilisation pour le contrôle des yeux. Même après l'avoir essayé moi-même, j'avais du mal à croire que la démonstration n'était pas une ruse élaborée. Cependant, après quelques instants, j'ai commencé à croire.
Presque instantanément, l'ordinateur a commencé à capter mes mouvements oculaires et à répondre à tout ce que je regardais. Lorsque je regardais un élément, il se mettait en évidence et venait au premier plan. Lorsque je regardais une carte, elle savait exactement quelle zone je regardais, jusqu'au pixel près. Tout comme la façon dont un novice avec la Wii agite sauvagement la télécommande Wii, mon premier réflexe a été de bouger toute ma tête pendant que je regardais différents éléments à l'écran. Cela a assez bien fonctionné, mais après quelques instants, j'ai appris que la technologie de Tobii pouvait capter les mouvements oculaires les plus subtils sans que ma tête ne bouge. D'une manière ou d'une autre, cela pouvait dire quand je déplaçais mes yeux d'un demi-pouce vers la gauche ou la droite ou regardais avec désinvolture vers le haut ou vers le bas, même un cheveu.
La fluidité de l'expérience m'a rappelé la première fois que j'ai utilisé l'iPod Touch et à quel point il était naturel de glisser et de toucher précisément où je voulais. Avant le Touch et l'iPhone, la plupart des écrans tactiles utilisaient la technologie tactile résistive, ce qui vous obligeait à appuyer sur l'écran. Ces écrans exigeaient un stylet (dispositif semblable à un stylo) pour atteindre la précision, mais Apple a changé la donne avec son interface plus naturelle qui vous permet d'utiliser directement vos doigts. La technologie de contrôle visuel de Tobii est aussi directe que n'importe quelle interface tactile. C'est comme un contact de loin.
Utilisations pour le contrôle des yeux
La première partie de la démo (que vous pouvez regarder ci-dessous) montre simplement où vos yeux regardent sur l'écran. Regarder vos propres yeux n'est pas particulièrement amusant, mais cela vous montre à quelle vitesse le système réagit lorsque vous bougez ou clignez des yeux. Cependant, après l'écran d'introduction et l'étalonnage, nous sommes entrés dans différents scénarios d'utilisation.
En lisant: De toutes les utilisations du contrôle visuel, la lecture démontre sa valeur plus que toute autre chose. Chacun a sa propre technique et son propre style pour lire sur un ordinateur portable ou un appareil tactile. Personnellement, j'ai tendance à garder mon texte vers le haut de l'écran. Parfois, j'utilise la souris pour mettre en évidence des choses que j'ai déjà lues et j'utilise les boutons de direction pour faire défiler vers le bas. Le contrôle visuel de Tobii rend instantanément tous ces styles de lecture personnalisés inutiles. Plus naturel que la lecture d'un livre, le texte défile automatiquement vers le haut, le bas, la gauche ou la droite lorsque vos yeux tournent autour de l'écran. C'est incroyable. Confus à propos d'un mot? Eh bien, si vous regardez un mot assez longtemps, sa définition apparaîtra.
Lecture multimédia: Une autre démo que Barbara m'a montrée était un simple lecteur multimédia. Une rangée de photos et de couvertures d'albums remplit le bas de l'écran. Regarder l'un d'eux met en évidence le choix et regarder vers le haut joue la musique ou maximise l'image afin que vous puissiez mieux voir. Vous avez terminé d'écouter ou de visionner? Regardez simplement un autre élément de la liste. Et lorsque vous avez regardé les flèches à gauche ou à droite pendant environ une seconde, la page de résultats suivante apparaît.
Zoom et panoramique: Le contrôle visuel ne signifie pas que le clavier ne sert à rien. Dans une démo de type Google Maps, vous pouvez effectuer un panoramique et un zoom en regardant et en appuyant sur un bouton, ce qui fonctionne bien. Un seul bouton est affecté au zoom et un autre bouton est affecté au panoramique. Pour zoomer, il vous suffit de regarder ce sur quoi vous souhaitez vous concentrer et d'appuyer sur le bouton de zoom. Une fois zoomé, maintenez un autre bouton et regardez à gauche, à droite, en haut ou en bas vous permet de vous déplacer autour de votre image zoomée. Il existe probablement des moyens encore plus intuitifs d'effectuer des tâches complexes comme celle-ci.
Multitâche: Au CES cette année, j'ai félicité le BlackBerry PlayBook pour sa méthode de balayage facile pour basculer entre les applications. Avec une interface de type WebOS (ou peut-être WebOS lui-même) et le contrôle visuel de Tobii, le multitâche entre les applications est aussi naturel que de regarder à gauche ou à droite de l'écran. À l'aide de Windows 7, qui n'est pas du tout optimisé pour autre chose qu'une souris, Barbara a basculé entre les fenêtres en les regardant et en appuyant sur un bouton. Elle a également déplacé facilement une icône de pointeur de souris sur l'écran.
Jeux: La dernière démo à laquelle nous avons joué était une simple Astéroïdes-comme un jeu. Votre mission est de protéger la Terre d'un barrage de comètes et d'astéroïdes de la taille d'un apocalypse qui se dirigent vers vous. Regarder un astéroïde déclenche un laser qui le fait exploser. Il existe une tonne de jeux tactiles comme celui-ci, qui opposent vos réflexes à l'ordinateur, mais le contrôle visuel augmente la vitesse et l'intensité de ces jeux d'un cran. Je suis incroyablement excité de voir quel genre de jeux peuvent être créés en utilisant la vitesse de l'œil.
Ce ne sont là que quelques-unes des nombreuses nouvelles façons dont le contrôle visuel vous permettrait d'interagir avec un ordinateur de bureau ou un ordinateur portable. Lorsque vous commencez à réfléchir à la façon dont cette technologie pourrait interagir avec la reconnaissance vocale, les possibilités semblent infinies. Dans quelques années, Rapport minoritaire peut sembler daté.
C'est comme Kinect pour PC
Microsoft a déclaré qu'il publiera éventuellement une technologie de mouvement de type Kinect pour les PC. Eh bien, je déteste le leur dire, mais Tobii a fait beaucoup de travail acharné. Déplacer Kinect vers un PC signifierait déplacer l'attention du corps vers les yeux et le visage, ce que Tobii a réalisé avec une précision remarquable.
J'ai beaucoup écrit sur Microsoft et les nombreux défis auxquels il est confronté avec Windows 8. Actuellement, la société a une plate-forme de téléphone défaillante et aucune stratégie de tablette. Pour aller de l'avant, Microsoft doit générer de l'enthousiasme autour de son pain quotidien, qui est encore traditionnel, tapé au clavier PC. Le contrôle visuel de Tobii est exactement le type d'interface innovante que Microsoft pourrait créer une nouvelle expérience complète autour. Cela pourrait simplifier les complexités du système d'exploitation de bureau Windows tout en comblant certaines des lacunes entre les plates-formes tactiles PC et mobiles. Si elle est correctement mise en œuvre, une technologie comme celle-ci pourrait raviver le buzz sur le marché des ordinateurs portables, en particulier en combinaison avec de nombreuses idées que Microsoft a démontrées sur Windows Phone et Xbox Kinect.
Barbara m'a informé que Microsoft est déjà client de Tobii pour certaines de ses plus grandes unités de recherche, que le géant de Redmond utilise pour étudier l'efficacité de ses propres mises en page et interfaces d'application en suivant les mouvements oculaires des clients potentiels lorsqu'ils font l'expérience d'un nouveau conception. Microsoft, je te regarde. Si vous n'essayez pas quelque chose comme ça, quelqu'un d'autre le fera.
Peu importe de qui il s'agit, une chose est claire: Tobii a besoin d'un partenaire solide qui réalise le potentiel de sa technologie.
Le contrôle des yeux arrive, espérons-le
Comme toute bonne technologie, le contrôle visuel de Tobii est aussi utile que les développeurs de logiciels qui écrivent pour lui. La société est en pourparlers avec un certain nombre de fabricants de matériel, de logiciels et de plates-formes pour travailler à la mise en œuvre de sa technologie dans les PC d'ici deux ans, mais ce sera un chemin difficile à parcourir. La technologie doit encore être plus petite, utiliser moins de batterie et coûter moins cher. Sans la vision d'Apple, les tablettes tactiles ont stagné dans les limbes pendant une décennie. Espérons que l'un de ces fabricants de plateformes reconnaisse le potentiel du contrôle visuel. Le seul perdant ici est la souris, et je suis désolé mon ami, je t'aime, mais tes jours sont comptés.
