Les lunettes ChatGPT amènent l’IA dans votre vie réelle

Alors que beaucoup de gens se sont amusés à discuter avec ChatGPT d’OpenAI, un étudiant de Stanford a trouvé une nouvelle utilisation pour le grand modèle de langage : interagir avec les autres dans le monde réel.

Étudiant en informatique et génie électrique Bryan Hau-Ping Chiang a rendu ChatGPT portable et interactif grâce au matériel open source Monocle AR et à la reconnaissance automatique de la parole Whisper (ASR) d’OpenAI. Un smartphone est également actuellement utilisé dans la configuration. Ces technologies combinées ont reçu le nom accrocheur rizzGPT (« Rizz » est l’argot pour « charisme ») par Chiang. Guidé en temps réel, Chaing a utilisé l’assistant de chat IA lors d’événements tels qu’une simulation d’entretien d’embauche, une rencontre fortuite avec un ami et le choix des meilleurs plats dans un nouveau restaurant.

Dans un guide de rizzGPT, partagé sur Twitter, Chiang décrit le système comme le début « d’une nouvelle ère d’informatique ambiante activée par AR + AI, où chacun a son propre assistant personnel disponible 24h/24 et 7j/7 ». Plus brièvement et avec humour, rizzGPT peut être utilisé lors d’événements de la vie tels que des rendez-vous embarrassants et des entretiens d’embauche, fournissant « le charisme en temps réel en tant que service (CaaS) », plaisante l’étudiant de Stanford.

Un excellent exemple de rizzGPT en action est fourni par le Tweet intégré ci-dessus. Dans la vidéo, un Chiang amélioré par l’IA répond à une série de questions d’entretien, en utilisant le gadget discret Monocle AR attaché à la monture de ses lunettes. L’affichage intégré du Monocle le nourrit d’un autocue de réponses perfectionnées par l’IA directement de ChatGPT.

Une autre utilisation situationnelle interactive personnelle du système rizzGPT est fournie lorsque Chiang tombe sur un ami. L’IA a appris qui sont ses amis, s’est entraînée à l’aide de photos et peut les reconnaître. Le porteur de Monocle connecté est capable d’évoquer des conversations pertinentes basées sur les messages du smartphone échangés avec n’importe quel ami en particulier. Cela pourrait facilement être déployé à des « dates difficiles », afin que les porteurs puissent piloter automatiquement une conversation brillante. Cela étant dit, les autres autour de vous ne seront peut-être pas aussi ravis de vous voir porter des lunettes qui scannent leur visage et vous disent quoi dire. Il y a quelques échos de Google Glass ici.

Un autre exemple convaincant d’agents IA combinés à Monocle AR est de fournir des conseils de menu dans un restaurant. Dans ce Vidéo tweetée vous pouvez voir que l’IA lit le menu (silencieusement) de Chiang et, lorsqu’elle est interrogée verbalement, fournit des conseils verbaux basés sur ce qu’elle sait de ses goûts et de ses aversions alimentaires – et de ses valeurs nutritionnelles. L’étudiant de Stanford exploite également des services connectés pour la transcription vocale, TTS et OCR dans cette application d’IA du monde réel.