Met Android-apps kun je binnenkort je gezicht gebruiken om de cursor te besturen

Ontwikkelaars kunnen de toegankelijkheidsfunctie nu in hun apps integreren, waardoor gebruikers de cursor kunnen besturen met gezichtsgebaren of door hun hoofd te bewegen. Ze kunnen bijvoorbeeld hun mond openen om de cursor te verplaatsen of hun wenkbrauwen optrekken om te klikken en te slepen.

Project Gameface werd vorig jaar aangekondigd tijdens de Google I/O desktopconferentie en maakt gebruik van de camera van het apparaat en een database met gezichtsuitdrukkingen van… MediaPipe-API voor gezichtsoriëntatiedetectie Om de indicator te manipuleren.

“Via de camera van het apparaat volgt het naadloos gezichtsuitdrukkingen en hoofdbewegingen en vertaalt deze in intuïtieve, persoonlijke bediening”, legt Google uit in de aankondiging. “Ontwikkelaars kunnen nu apps maken waarmee hun gebruikers hun ervaring kunnen configureren door gezichtsuitdrukkingen, gebarengroottes, cursorsnelheid en meer aan te passen.”

Hoewel Gameface in eerste instantie is ontworpen voor gamers, zegt Google ook samen te werken uitgebreid – Een sociale onderneming in India die zich richt op toegankelijkheid – om te zien hoe ze deze kunnen uitbreiden naar andere omgevingen zoals werk, school en sociale situaties.

Project Gameface is geïnspireerd op een verlamde videogamestreamer Lance Carr, die lijdt aan spieratrofie. Carr werkte samen met Google aan het project, met als doel een goedkoper en toegankelijker alternatief te creëren voor dure head-trackingsystemen.