L’application Seeing AI de Microsoft est disponible pour la première fois sur les appareils Android à partir d’aujourd’hui. Vous pouvez le télécharger depuis le Google Play Store. L’objectif de l’application gratuite est d’aider les personnes aveugles et malvoyantes à mieux comprendre le monde qui les entoure avec l’aide des caméras de leur smartphone et de la narration basée sur l’IA. Microsoft affirme que l’application Android utilise les dernières avancées de l’entreprise en matière d’IA générative et qu’elle possède les mêmes fonctionnalités que la version iOS. Étant donné qu’il y a plus de 3 milliards d’utilisateurs d’Android dans le monde, l’application pourrait contribuer à améliorer la qualité de vie de nombreuses personnes.
Les dernières fonctionnalités de Seeing AI ont été créées avec l’aide des commentaires des utilisateurs. Microsoft affirme que l’application propose désormais des descriptions plus détaillées des images. Par défaut, Seeing AI fournira un bref résumé de ce que représente une photo. Lorsqu’un utilisateur appuie sur l’icône « plus d’informations », l’application génère une description beaucoup plus détaillée de l’image. Déplacez votre doigt sur l’écran et l’application peut vous indiquer l’emplacement de divers objets. Les photos peuvent également être importées depuis d’autres applications.
Une autre fonctionnalité récemment déployée par Microsoft suite aux commentaires des utilisateurs est la possibilité de poser des questions sur un document. Après avoir numérisé un document, vous pouvez poser des questions à Seeing AI sur des éléments tels que les éléments de menu ou le prix d’un article sur une facture. Vous pouvez également lui demander de résumer un article que vous avez numérisé. L’application fournit à l’utilisateur des conseils audio sur la façon de numériser une page imprimée.
Seeing AI offre aux utilisateurs de nombreuses autres façons de découvrir le monde qui les entoure en pointant leur appareil photo vers ou en prenant une photo de quelque chose. Par exemple, l’application lira un court morceau de texte dès que la caméra le captera. Seeing AI peut scanner les codes-barres et fournir des informations sur le produit telles que le nom et les détails de l’emballage lorsqu’ils sont disponibles, ce qui pourrait être particulièrement utile lorsqu’il s’agit de traiter des médicaments.
De plus, l’application peut aider à identifier les personnes (et leurs expressions faciales), la monnaie, les couleurs et la luminosité. Il est également capable de lire du texte manuscrit dans certaines langues.
Seeing AI débarque sur Android à l’occasion de la Journée internationale des personnes handicapées. L’application est désormais disponible en 18 langues : tchèque, danois, néerlandais, anglais, finnois, français, allemand, grec, hongrois, italien, japonais, coréen, bokmal norvégien, polonais, portugais, russe, espagnol, suédois et turc. Microsoft prévoit d’étendre ce nombre à 36 langues en 2024.