Le brevet d'Apple détaille la cartographie AR et les casques avec écrans semi-transparents

Une extension du brevet de Metaio qui a été attribué à Apple suite à son acquisition de la société en 2015, la nouvelle demande de brevet d'Apple publiée jeudi par le United States Patents and Trademark Office (USPTO) détaille les applications potentielles de la réalité augmentée tout en illustrant un affichage rumeur monté sur la tête Apple travaillerait sur.

Intitulée «Méthode de représentation de points d'intérêt dans une vue d'un environnement réel sur un appareil mobile et appareil mobile à cet effet», l'invention améliorerait les cartes bidimensionnelles actuelles en ajoutant des points d'intérêt en réalité augmentée au mélange.

Améliorer le monde réel d'un utilisateur en superposant des images informatiques de points d'intérêt à proximité au-dessus du flux de caméras en direct constituerait une belle application Maps basée sur ARKit. Cela pourrait être facilement accompli en fusionnant les données haute résolution du capteur de la caméra avec les informations de géolocalisation glanées du GPS, de la boussole et d'autres capteurs intégrés.

L'utilisation de données de capteurs de latitude, longitude et altitude pourrait permettre à un iPhone ou iPad de déterminer sa position et son cap par rapport à l'environnement environnant, permettant au système de superposer des marqueurs interactifs à leurs emplacements corrects au-dessus de l'image capturée.

Comme nous l'avons vu avec le suivi fiable et fou d'ARKit, les annotations de POI peuvent suivre avec précision les mouvements des utilisateurs, leur permettant de rester ancrés aux objets du monde réel. Le système fonctionnerait même si un utilisateur tenait l'appareil incliné vers le sol en utilisant une interface de ballon pour connecter les POI à leurs homologues du monde réel.

Et si un utilisateur inclinait son appareil vers le sol au-delà d'un certain seuil, la vue passerait à une vue claire de la liste des points d'intérêt. L'invention est particulièrement utile lors de l'utilisation d'un affichage monté sur la tête comprenant la caméra et l'écran.

D'après la description du brevet d'Apple:

Par exemple, l'afficheur monté sur la tête est un afficheur monté sur la tête transparent pour la vidéo. Il n'est généralement pas possible pour l'utilisateur de toucher l'écran monté sur la tête d'une manière similaire à un écran tactile.

Cependant, la caméra qui capture une image de l'environnement réel peut également être utilisée pour détecter des positions d'image du doigt de l'utilisateur dans l'image. Les positions de l'image du doigt de l'utilisateur peuvent être équivalentes aux points de contact touchés par le doigt de l'utilisateur sur l'écran tactile.

En fait, la demande de brevet mentionne les deux approches: la réalité augmentée uniquement pour smartphone et une solution hybride qui rendrait des images AR sur votre téléphone et votre casque, avec un iPhone agissant comme contrôleur interactif pour la scène que vous voyez à travers le casque.

«L'appareil mobile peut effectuer une action liée au au moins un point d'intérêt si au moins une partie de l'objet virtuel généré par ordinateur mélangé sur l'écran semi-transparent est chevauchée par le doigt d'un utilisateur ou un appareil tenu par l'utilisateur,» note Apple.

L'invention a été déposée pour la première fois en avril 2017 et crédite les ingénieurs Anton Fedosov, Stefan Misslinger et Peter Meier comme inventeurs.