Le chercheur Christopher Clarke controle un televiseur avec sa tasse de cafe. Universite de Lancaster
Etes-vous deja alle changer de chaine, puis realise que votre telecommande etait tombee derriere le canape? Ou vous vouliez faire defiler une recette sur votre tablette, mais vos mains etaient couvertes de pate?
Eh bien, vous pourriez avoir de la chance. Des chercheurs de l’Universite de Lancaster en Angleterre ont developpe une technologie de reconnaissance gestuelle qui peut transformer pratiquement n’importe quoi – votre main, une spatule, un tournevis – en une telecommande. La technologie, que les chercheurs appellent « Matchpoint », fonctionne via une webcam, utilisant la vision par ordinateur pour suivre une partie du corps ou un objet lorsqu’il interagit avec un petit widget dans le coin de l’ecran. Le widget est entoure de cibles correspondant a differentes fonctions : controle du volume, defilement, changement de chaine, etc. L’utilisateur fait des gestes pour interagir avec les cibles, en activant des curseurs qui se deplacent de haut en bas avec le mouvement de l’utilisateur pour controler des fonctions telles que le volume.
Les technologies de controle gestuel existantes ne fonctionnent generalement qu’avec des objets ou des parties du corps specifiques que le systeme reconnait deja, comme un controleur dedie ou une main humaine. Et ils peuvent etre pointilleux sur la distance entre l’utilisateur et l’ecran, ou s’ils sont completement visibles par la camera, car le systeme doit pouvoir identifier clairement l’objet en question. La technologie de Matchpoint est differente en ce sens qu’elle ne recherche pas un objet specifique, mais un mouvement de rotation. Les createurs de Matchpoint esperent que cela facilitera l’experience utilisateur.
« Le systeme est plus utile lorsque l’utilisateur est engage dans d’autres activites et peut ne pas etre dans la position la plus conventionnelle pour effectuer un geste », explique Christopher Clarke, l’un des createurs de Matchpoint. « Comme le systeme ne repose pas sur la detection d’humains ou d’objets en soi, il fonctionne toujours independamment de la position ou de la posture de l’utilisateur, ou des objets qu’il peut tenir – se cachant sous une belle couverture confortable avec une tasse de the. »
Matchpoint permet egalement a plusieurs mains ou objets d’interagir avec des tableaux blancs numeriques, de zoomer et de faire pivoter des images, ce qui pourrait etre utile pour donner des presentations de groupe. De plus, les utilisateurs peuvent lier de maniere permanente des objets specifiques aux controles, ce qui signifie qu’ils conserveront leur fonction de controle sans avoir besoin d’une initialisation. Ainsi, un utilisateur pourrait, par exemple, associer un petit train a la fonction de controle du volume de sa tablette. Chaque fois qu’ils avancaient le jouet, le volume augmentait.
Il est facile de voir comment Matchpoint pourrait etre utile a la maison, permettant aux utilisateurs, par exemple, de mettre en pause une video de reparation de voiture sans s’eloigner du moteur, ou de changer de chaine avec une vague de biberon sans reveiller un nouveau-ne endormi . Mais ses createurs esperent qu’il a des utilisations au-dela du divertissement.
« Les applications que nous trouvons les plus interessantes impliquent des applications « steriles », telles que la chirurgie ou le travail dans la cuisine, ou il est souhaitable d’avoir un systeme avec lequel les utilisateurs peuvent utiliser n’importe quel type d’objet et qui n’implique pas de toucher des choses et de contaminer objets », dit Clarke.
Le systeme pourrait egalement etre utile aux personnes handicapees qui ont du mal a utiliser des outils d’interface traditionnels comme une telecommande ou une souris d’ordinateur.
Clarke et son co-createur, Hans Gellersen, presenteront un article sur Matchpoint ce mois-ci lors du symposium ACM Symposium on User Interface Software and Technology 2017 a Quebec, une conference sur les technologies d’interface homme-machine. A l’avenir, ils esperent faire passer Matchpoint au-dela de la phase de prototype et explorer les opportunites de commercialisation.
Les technologies de controle gestuel sont devenues plus courantes ces dernieres annees, mais les developpeurs travaillent toujours sur les problemes. La plupart des systemes ont du mal a reconnaitre les gestes dans des conditions de faible luminosite ou si l’utilisateur est trop eloigne. Ils ne fonctionnent generalement pas non plus a l’exterieur, car ils s’appuient sur des capteurs infrarouges pour evaluer la distance ; la lumiere naturelle du soleil obscurcit les rayons infrarouges. Ils ont besoin de cameras, ce qui signifie qu’ils ne fonctionneront pas avec des televiseurs plus anciens. Et certains utilisateurs se sentent simplement stupides ou mal a l’aise en agitant la main.
Matchpoint represente un changement « progressif » plutot que « transformationnel » dans le developpement de meilleurs systemes de reconnaissance gestuelle, explique Juan P. Wachs, professeur a la School of Industrial Engineering de l’Universite Purdue qui etudie les interfaces homme-machine.
« Le grand saut se produira lorsque l’ordinateur ou l’appareil ne vous dira pas quel est le mouvement que vous devez faire pour controler quelque chose, mais vous agissez naturellement et la technologie peut » deduire « ce que vous voulez faire », dit-il. « Peut-etre en utilisant egalement des signaux cerebraux, dans le cadre d’une solution integree. »
Mais si Matchpoint arrive sur le marche, au moins les telecommandes perdues appartiendront bientot au passe, et nous changerons tous de chaine avec la vague d’une banane.
