Après des années de spéculation, Apple se lance à grande échelle dans la réalité virtuelle et la réalité augmentée. Lors de son discours d’ouverture de la conférence des développeurs WWDC 2023, la société a dévoilé Vision Pro, un casque XR combinant réalité virtuelle et augmentée. Il s’agit de la première grande catégorie de matériel d’Apple depuis la sortie de l’Apple Watch en 2015. Elle débutera à 3 499 $ l’année prochaine et sera expédiée sur Apple.com et dans les magasins de détail américains. Il est maintenant montré pour impliquer les développeurs.
Le casque a une seule pièce de verre feuilleté avec un « large éventail de caméras et de capteurs ». Le cadre comprend un bouton pour les photos et les vidéos, et un appareil photo numérique pour basculer entre les niveaux AR et VR. Le cadre de Vision Pro a une conception thermique qui aspire l’air à travers les trous du système pour le garder au frais. Inutile de dire qu’il ne s’agit pas d’un design sans ventilateur, bien qu’Apple dise qu’il est « presque silencieux » en fonctionnement.
Apple l’appelle « l’appareil électronique personnel le plus avancé » et affirme qu’il est basé sur plus de 5 000 brevets.
Le joint léger est disponible en plusieurs tailles et s’adapte à votre visage. Les sangles sortent du cadre avec des « pods audio » pour fournir un son spatial. Le bandeau est une pression 3D nervurée qui s’étire avec un mécanisme amovible. Une molette de réglage vous permet de faire de petits ajustements pendant l’utilisation.
Les porteurs de lunettes utiliseront des inserts fabriqués par Zeiss qui se fixent aux verres. Il n’y avait aucune mention du coût de ces accessoires pour un casque déjà cher.
Apple promet deux heures de batterie sur une charge (mais elle peut être utilisée plus longtemps lorsqu’elle est branchée). Le matériel comprend une batterie câblée au casque, que vous mettez ensuite dans une ceinture ou une poche.
Un écran externe montrera vos yeux afin que les gens puissent reconnaître si vous êtes immergé dans la réalité virtuelle ou non, et empêcher les gens de se sentir isolés.
Nous avons pu voir le design à distance à la WWDC. C’est l’ère spatiale, et le verre réfléchissant le long du devant est étonnamment accueillant. C’est un appareil très attrayant, mais le porter reste encore un peu mystérieux. Apple s’est assuré que ces modèles n’étaient pas touchés, mais nous avons pu mieux voir la batterie qui pend sur le côté de l’appareil.
Technologie dans Apple Vision Pro
Vision Pro présentera des spécifications impressionnantes. Il tient 64 pixels dans l’espace d’un seul pixel iPhone. Il dispose de 23 millions de pixels sur deux panneaux pour une résolution supérieure à 4K. Il prend en charge une plage dynamique élevée et permet un texte net, déclare Apple.
Apple utilise une conception à double puce avec Vision Pro, avec M2 et une nouvelle puce appelée R1. R1 est conçu pour l’entrée de 12 caméras, cinq capteurs et six microphones. M2 permet des performances, tandis que R1 est conçu pour rendre les expériences immersives.
Le Quest Pro de 1 499 $ de Meta possède deux panneaux LCD à 1800 x 1920 pixels avec un champ de vision horizontal de 106 degrés et un champ de vision vertical de 96 degrés. (La semaine dernière, Meta a annoncé la Meta Quest 3, mais n’a pas fourni les spécifications complètes avant un lancement complet plus tard cette année). Et oui, il y a un écran à l’extérieur pour montrer vos yeux.
Les Audio Pods tracent votre pièce avec du son pour la personnaliser pour vous. Apple appelle cela « le traçage de rayons audio ». Il existe des tonnes de scanners, y compris LiDAR, pour le suivi 3D. Il existe des caméras infrarouges et des LED pour suivre vos yeux, vous n’avez donc pas besoin de « contrôleurs matériels maladroits ».
Pour FaceTime, Apple crée une version numérique de votre visage. Après avoir été scanné par les caméras frontales, Apple utilise un réseau de neurones pour créer un avatar 3D à utiliser dans les appels FaceTime. Lorsque quelqu’un d’un autre Vision Pro discute avec vous, il le verra en 3D.
Le nouveau système d’exploitation s’appelle visionOS, qui prend en charge le framework iOS, un nouveau sous-système en temps réel, un pipeline de rendu fovéal et un moteur 3D multi-applications pour maintenir plusieurs applications en cours d’exécution dans la même simulation.
Pour des raisons de sécurité, Apple utilise Optic ID, une nouvelle version de fonctionnalités telles que Face ID et Touch ID. Votre analyse de l’iris sera stockée sur l’appareil dans l’enclave sécurisée. Apple indique que la saisie oculaire sera séparée dans un processus d’arrière-plan spécial afin que les sites Web ou les applications ne puissent pas voir où vous regardez. Seuls les tapotements de doigts seront enregistrés.
Utilisation d’Apple Vision Pro
Le système d’exploitation d’Apple pour AR et VR sera quelque peu familier aux utilisateurs d’iOS et d’iPadOS avec un écran d’accueil avec des icônes d’application et des widgets qui peuvent être réorganisés. Il y a une vue d’accueil dans votre espace, avec des applications qui apparaissent lorsqu’elles flottent dans votre chambre. Ils réagissent à la lumière et projettent des ombres sur votre maison. Vous pouvez faire évoluer les applications et les placer où vous le souhaitez dans votre espace.
Le basculement entre AR et VR est ici essentiel. Apple s’appuie sur un mélange des deux pour que les personnes qui utilisent le casque ne se sentent pas complètement exclues du monde. Le cadran, similaire à la couronne numérique de l’Apple Watch, vous permet de vous déplacer entre les modes AR et VR.
Le casque repose uniquement sur vos yeux, vos mains et votre voix. Il n’y a pas de contrôleur. Les éléments graphiques à l’écran répondent à votre regard, et une pression des doigts sélectionne. Vous pouvez feuilleter vos mains pour faire défiler.
Apple utilise le surnom EyeSight pour montrer vos yeux aux autres près de vous sur un écran externe. La société affirme que cela vous empêche d’être isolé des autres et permet aux autres de savoir si vous êtes immergé dans la réalité virtuelle ou si vous pouvez voir en réalité augmentée.
Pour la productivité, vous obtenez une « toile pour les applications ». Vous pouvez placer vos applications n’importe où sur l’écran. Il ressemble à une version flottante de Mac, avec une navigation Web et d’autres applications de productivité dans l’espace. Vous pouvez tourner la tête pour passer d’une application à l’autre ou même mettre des objets 3D devant vous et les voir sous n’importe quel angle.
Vision Pro fonctionne avec le Magic Trackpad, le Magic Keyboard et d’autres accessoires Bluetooth. Vous pouvez également utiliser votre Mac pour mettre l’écran de votre Mac sur le casque pour un affichage 4K massif.
Il existe également une version de FaceTime qui vous permet de voir des versions numériques d’autres personnes lors d’appels individuels. Lorsque de nouvelles personnes sont ajoutées, elles flottent devant vous. Vous pouvez partager des applications avec d’autres pendant un appel.
Apple l’a présenté comme une machine multimédia à utiliser lorsque vous ne travaillez pas. Les photos flottent dans les airs et les panoramas pris depuis l’iPhone s’enroulent autour de vous. Vous pouvez prendre des photos ou des vidéos en appuyant sur un bouton de l’appareil pour les regarder en 3D plus tard. Vision Pro clignote pour permettre aux autres de voir que vous prenez des photos.
Vision Pro fonctionne également comme une salle de cinéma personnelle. Vous pouvez ajuster la taille de votre espace et le système d’exploitation atténue automatiquement la zone environnante tout en ajoutant de l’audio spatial. Vous pouvez même ajouter un « environnement » pour fonctionner comme une immense salle de cinéma plus grande que votre maison. Une salle de cinéma spécialisée est censée se concentrer sur le cinéma et rien d’autre. Vous pouvez également regarder des films « spatiaux » en 3D ; Apple a dévoilé Avatar : la voie de l’eau.
Vous pouvez également utiliser le Vision Pro pour jouer à des jeux Apple Arcade avec prise en charge du contrôleur de jeu. Apple promet des centaines de titres le jour du lancement.
Le PDG de Disney, Bob Iger, a rejoint le PDG d’Apple, Tim Cook, à la WWDC, présentant Disney Plus, y compris des versions personnalisées d’émissions telles que Le Mandalorien, ainsi que des vues de jeu ESPN personnalisées qui affichent les rediffusions en 3D. Si également montré un Marvel : et si ? jeu qui semble vous mettre dans la peau d’un super-héros. Apple a clairement des partenaires prêts pour ce casque – Disney Plus sera prêt le jour du lancement, a déclaré Iger.
Développement pour Apple Vision Pro
Certains développeurs ont déjà mis la main sur Vision Pro. Par exemple, Apple a fait la démonstration d’un cœur battant en 3D ainsi que du design d’une voiture Alfa Romeo F1. Celles-ci sont similaires à ce que nous avons vu sur d’autres casques et même sur HoloLens de Microsoft.
Mais d’autres semblent plus uniques, comme une interface spatiale pour le DJing et un guide du ciel pour transformer Vision Pro en planétarium. Et Microsoft a ses applications Office prêtes à l’emploi, tout comme un tas de sociétés de logiciels de vidéoconférence.
Les mêmes cadres dans iOS et iPadOS sont intégrés à visionOS, ce qui signifie que de nombreuses applications existantes devraient en grande partie fonctionner immédiatement avec les commandes intégrées.
Apple travaille avec Unity et indique que les jeux et autres applications basés sur Unity pourront fonctionner avec des modifications mineures. Il y aura un tout nouvel App Store pour voir tout ce qui est conçu pour Vision Pro ainsi que toutes les autres applications compatibles.