Le casque Apple Vision Pro permettra aux porteurs d’obtenir des informations sur divers éléments en les regardant simplement, créant essentiellement une version en réalité augmentée de la fonction Visual Lookup que l’on trouve dans les iPhones et les iPads.
Surnommée « Recherche visuelle », cette fonctionnalité a été découverte par le contributeur de MacRumors Steve Moserqui a plongé dans la version bêta Xcode de visionOS, le système d’exploitation de réalité augmentée d’Apple qui alimentera le casque Vision Pro.
Apparemment, Visual Search permettra aux utilisateurs de Vision Pro d’obtenir des informations sur des objets dans le monde réel et de fournir du texte sur ces éléments devant leurs yeux. À partir de là, ils peuvent copier et coller le texte dans diverses applications, ainsi que traduire ce texte en 17 langues différentes.
Ce texte contiendra apparemment des informations utiles telles que des pages Web, des coordonnées, des conversions d’unités, etc. MacRumors cite un exemple de la possibilité d’extraire des données d’une brochure du monde réel, puis de partager ces informations avec d’autres ou de les enregistrer pour plus tard.
Nous pouvons voir qu’une telle fonction est pratique dans les entreprises créatives, par exemple en permettant aux concepteurs publicitaires de mieux mettre en évidence les informations contenues dans des éléments physiques tels que des affiches et des dépliants. Cela pourrait également être un moyen pour les artistes de fournir des informations et un contexte autour de leurs installations artistiques en offrant aux utilisateurs de Vision Pro une expérience artistique augmentée.
De même, MacRumors a noté que la possibilité d’effectuer une traduction en direct serait une aubaine pour les personnes voyageant à l’étranger, obtenant rapidement des traductions et des informations sur ce qu’elles voient sous leurs yeux. Le léger hic serait de porter une telle technologie dans un marché ou un site historique occupé, par exemple, qui pourrait vous faire ressortir comme un pouce endolori.
Comme mentionné, la possibilité d’obtenir des informations sur le monde réel en regardant simplement les choses existe déjà dans les smartphones. Google Lens, que l’on trouve dans le Google Pixel 7 Pro et d’autres téléphones Android, est particulièrement efficace dans ce domaine. Mais les prochaines étapes logiques pour une telle technologie seraient les wearables de réalité augmentée. Je ne suis pas sûr que le Vision Pro sera tout à fait le casque pour cela compte tenu de sa taille et de la durée de vie de sa batterie, mais je pourrais le voir fonctionner pour des lunettes de réalité augmentée plus minces, disons les lunettes Apple à longue rumeur.