La technologie HeadGaze d'eBay réagit aux mouvements de la tête à l'aide de la caméra TrueDepth d'Apple

eBay a annoncé une nouvelle technologie open source qui pourrait faciliter les achats ou les déplacements d'applications pour les personnes ayant une déficience motrice. HeadGaze utilise la caméra TrueDepth d'Apple aux côtés d'Apple ARKit pour vous permettre de naviguer dans une application en utilisant votre mouvement de tête.

Créé dans le cadre d'un projet de stage sur eBay, HeadGaze implique un stylet virtuel qui suit le mouvement de votre tête (haut, bas, côte à côte), et prend les informations 3D de la tête d'ARKit et applique une cartographie géométrique 3D pour obtenir l'emplacement de le «curseur» sur l'écran.

À partir de là, les widgets d'interface détectent et répondent à l'interaction «curseur». Semblable à la façon dont une souris navigue avec le curseur sur un bureau, la conception vous permet de pointer n'importe où sur l'écran avec votre tête et d'activer les «boutons» désignés.

Regarde:

Muratcan Cicek, stagiaire eBay et Ph.D. Candidat à l'Université de Californie, Santa Cruz explique:

HeadGaze vous permet de faire défiler et d'interagir sur votre téléphone avec seulement des mouvements subtils de la tête. Pensez à toutes les façons dont cela pourrait prendre vie. Fatigué d'essayer de faire défiler une recette sur l'écran de votre téléphone avec les doigts graisseux pendant la cuisson? Trop salissant pour suivre le manuel d'utilisation de votre téléphone portable pendant que vous bricolez le moteur de la voiture sous le capot? Trop froid pour retirer vos gants pour utiliser votre téléphone?

HeadGaze ressemble à un projet passionnant, et parce qu'il est open source, tout le monde peut commencer à l'utiliser. Le logiciel est disponible sur GitHub.com. Mieux encore, le nombre d'appareils Apple équipés d'une caméra TrueDepth devrait augmenter considérablement dans les prochains jours. Désormais uniquement disponibles sur iPhone X, TrueDepth et Face ID devraient s'étendre à trois nouveaux iPhones et deux nouvelles tablettes iPad Pro.

Vous pouvez en savoir plus sur HeadGaze sur ce lien.