L’assistant basé sur l’IA de Meta est disponible sur les lunettes connectées Ray-Ban depuis un certain temps déjà, mais la société ne commencera à le déployer sur ses casques Quest que le mois prochain. L’assistant sera toutefois encore en mode expérimental et sa disponibilité sera limitée aux utilisateurs aux États-Unis et au Canada. Meta a dévoilé la mise à jour en même temps que ses annonces concernant le Llama 3.1 et les nouvelles capacités d’IA de Meta.
Les utilisateurs qui auront accès à l’assistant en août pourront tester ses commandes mains libres. La société a déclaré que Meta AI remplacera la technologie actuelle utilisée pour les commandes vocales sur Quest, ce sera donc elle qui contrôlera le casque lorsque les gens utiliseront la voix pour la navigation et qui répondra à leurs questions s’ils demandent des informations. Ils pourront par exemple demander à l’assistant des recommandations de restaurants pour un prochain voyage, ou lui demander la météo de ces jours-là, ainsi que des suggestions sur la façon de s’habiller pour ce voyage.
Ils pourront également utiliser la fonction « Meta AI with Vision », qui leur permettra de demander à l’assistant des informations sur ce qu’ils voient, tout en utilisant Passthrough sur le Quest. Passthrough permet aux utilisateurs de voir leur environnement à travers un flux vidéo tout en regardant ou en faisant autre chose sur leur casque. Un utilisateur peut, par exemple, demander à l’assistant de regarder ce qu’il y a dans le réfrigérateur et de suggérer ce qu’il peut cuisiner, ou demander des conseils sur le type de haut qui irait avec une jupe qu’il tient, tout en regardant une vidéo YouTube.