Apple se rapproche de faire des gestes de la main une méthode d’entrée pratique à travers son écosystème de dispositif, y compris les futurs Mac, MacBooks, IDEvices et Vision Products. La société a déposé une nouvelle demande de brevet américaine détaillant comment ses systèmes pourraient distinguer les entrées gestiques et l’utilisation périphérique, garantissant la précision des interactions utilisateur.
Détection plus intelligente de l’intention
Le brevet décrit les méthodes pour analyser les poses de la main pour déterminer si un utilisateur a l’intention de faire un geste ou utilise simplement un appareil périphérique comme un clavier ou une souris. Si une main tape ou s’aligne sur une surface plane, le système interprète cela comme utilisation périphérique. Dans ce cas, la reconnaissance des gestes est désactivée pour empêcher les faux déclencheurs.
D’un autre côté, si la main est gratuite et n’est engagée avec aucun appareil, il peut être en mode «mode d’utilisation des gestes», permettant une entrée comme des gestes de pincement ou de balayage pour contrôler les éléments à l’écran. Apple introduit également un modèle de geste biphasé: le système reconnaît d’abord le geste, puis exécute l’action ou l’annule si un événement périphérique contradictoire suit immédiatement.
Intégration de suivi du regard
Pour affiner l’interprétation des gestes, le système d’Apple peut intégrer le suivi du regard. En analysant où cherche un utilisateur, il peut déterminer si un geste est destiné à une cible à l’écran spécifique. Ces données pourraient également former des réseaux de neurones pour améliorer la prédiction du mode manuel, ce qui rend le système plus fiable et réactif.
Selon Pomme manifestementce travail s’appuie sur des années de développement, remontant à l’acquisition d’Apple en 2013 de PrimeSense, la société israélienne derrière la technologie originale de détection de mouvement. Les documents récents d’Apple suggèrent que la société intègre désormais ce système de saisie avancé plus profondément dans ses principaux appareils.