Google a introduit une autre fonctionnalité pour sa fonctionnalité Circle to Search lors de la conférence annuelle des développeurs d’E/S de l’entreprise, et cela pourrait aider les étudiants à mieux comprendre les sujets de cours potentiellement difficiles. La fonctionnalité sera désormais capable de leur montrer des instructions étape par étape pour une « gamme de problèmes de physique et de mathématiques ». Il leur suffit d’activer la fonctionnalité en appuyant longuement sur le bouton d’accueil ou sur la barre de navigation, puis en encerclant le problème qui les a laissés perplexes, bien que certains problèmes mathématiques nécessiteront que les utilisateurs s’inscrivent à la fonctionnalité expérimentale Search Labs de Google.
La société affirme que la nouvelle fonctionnalité de Circle to Search a été rendue possible grâce à sa nouvelle famille de modèles d’IA appelée LearnLM, spécialement créée et optimisée pour l’apprentissage. Il est également prévu d’apporter des ajustements à cette fonctionnalité particulière et de déployer une version améliorée plus tard cette année, qui pourrait résoudre des problèmes encore plus complexes « impliquant des formules symboliques, des diagrammes, des graphiques et bien plus encore ». Google a lancé Circle to Search plus tôt cette année lors d’un événement Samsung Unpacked, car la fonctionnalité était initialement disponible sur le Galaxy 24, ainsi que sur les appareils Pixel 8. Il est désormais également disponible sur les appareils Galaxy S23, Galaxy S22, Z Fold, Z Flip, Pixel 6 et Pixel 7, et il sera probablement disponible sur davantage de matériel à l’avenir.
En plus de la nouvelle fonctionnalité Circle to Search, Google a également révélé que les appareils prenant en charge l’assistant chatbot Gemini pour Android pourront désormais l’afficher en superposition au-dessus de l’application actuellement ouverte. Les utilisateurs peuvent ensuite glisser et déposer des images directement depuis la superposition vers des applications comme Gmail, par exemple, ou utiliser la superposition pour rechercher des informations sans avoir à s’éloigner de ce qu’ils font. Ils peuvent appuyer sur « Demander cette vidéo » pour rechercher des informations spécifiques dans une vidéo YouTube ouverte, et s’ils ont accès à Gemini Advanced, ils peuvent utiliser l’option « Demander ce PDF » pour rechercher des informations dans de longs documents.
Google déploie également des capacités multimodales sur Nano, le plus petit modèle de la famille Gemini capable de traiter les informations sur l’appareil. Le Gemini Nano mis à jour, qui sera capable de traiter les images, les sons et la langue parlée, arrivera sur le lecteur d’écran TalkBack de Google plus tard cette année. Gemini Nano permettra à TalkBack de décrire les images à l’écran plus rapidement et même sans connexion Internet. Enfin, Google teste actuellement une fonctionnalité Gemini Nano qui peut alerter les utilisateurs lorsqu’un appel est en cours s’il détecte des modèles de conversation courants associés à des escroqueries. Les utilisateurs seront alertés, par exemple, s’ils parlent à quelqu’un qui leur demande leur code PIN ou leur mot de passe ou à quelqu’un qui leur demande d’acheter des cartes cadeaux.
Restez informé de toutes les actualités de Google I/O 2024 directement ici!