Apple développe une technologie qui vous permet de contrôler un curseur dans l’air en utilisant des gestes de la main sans souris, sans trackpad. La société a déposé un brevet qui décrit la façon dont les utilisateurs peuvent interagir avec les environnements 3D en utilisant des mouvements de main, un suivi des yeux et des entrées vocales sur Mac, Vision Pro et futurs lunettes intelligentes.
Le brevet décrit un système qui aborde les problèmes actuels avec les interactions basées sur le curseur dans les espaces 3D. Apple affirme que les méthodes d’aujourd’hui sont lentes, inefficaces et sujettes aux erreurs, en particulier en ce qui concerne l’édition de texte ou la manipulation d’objets numériques. Leur solution réduit la contrainte cognitive en rendant les contrôles gestuels plus intuitifs et économes en énergie, en particulier sur les dispositifs alimentés par batterie comme les appareils portables et les ordinateurs portables.
Appliquer manifestement rapports Cette proposition d’Apple comprend une gamme de méthodes d’entrée: le suivi des mains via des caméras, un stylet ou un contact avec les doigts sur les surfaces tactiles, les mouvements oculaires et les commandes vocales. Le brevet montre comment le système peut prendre en charge un large ensemble de cas d’utilisation, du dessin et de l’édition vidéo à la messagerie et aux jeux.
Contrôles des gestes dans les lunettes intelligentes et les macs
Le brevet décrit plusieurs types d’appareils. Sur les Mac, les utilisateurs peuvent faire des gestes d’air devant une caméra ou utiliser un grand trackpad pour contrôler le curseur. Sur les lunettes intelligentes, l’interface afficherait des fenêtres virtuelles et permettrait aux utilisateurs d’interagir avec le contenu dans un environnement 3D stéréoscopique.
Les lunettes intelligentes utiliseraient des modules à double affichage pour simuler la profondeur et fournir une interaction immersive. L’utilisateur pourrait déplacer le curseur simplement en décalant sa main dans l’espace. Le système interprète la position et le mouvement de la main, permettant une interaction directe avec le contenu numérique flottant dans la vue de l’utilisateur.
Un deuxième brevet, déposé aux côtés du premier, introduit des modes de correction pour le suivi des mains. Il garantit une meilleure précision en ajustant les entrées en fonction de la proximité de la main de l’utilisateur avec le contenu virtuel. Si la main se trouve dans un certain seuil, le système corrige la position pour un contrôle plus fiable. Sinon, il enregistre le geste brut sans correction.
Ces données de suivi des mains prennent en charge les applications comme le dessin, la navigation ou la manipulation d’objets virtuels. Il pourrait également réduire les erreurs dans les tâches de réalité augmentée en améliorant la précision des entrées.
Selon l’Office américain des brevets et des marques, Apple a déposé ces demandes en vertu des numéros 20250199623 et 20250199620. Eugene Krivoruchko, concepteur d’interface humaine d’Apple pour l’entrée spatiale, est nommé inventeur principal.
