Le logiciel de streaming de Nvidia a désormais une option pour donner l’impression que vous établissez un contact visuel avec la caméra, même si vous regardez ailleurs dans la vraie vie. À l’aide de l’IA, la fonction « Eye Contact » ajoutée à Nvidia Broadcast 1.4 remplacera vos yeux par des yeux « simulés » alignés avec votre appareil photo – un effet qui a très bien fonctionné lorsque nous l’avons testé nous-mêmes, sauf pour toutes les fois. t.
Dans un poste d’annonce, la société écrit que la fonctionnalité est destinée aux « créateurs de contenu cherchant à s’enregistrer tout en lisant leurs notes ou un script » sans avoir à regarder directement une caméra. Le présenter comme quelque chose que vous utiliseriez lors d’une représentation publique, au lieu de quelque chose que vous utiliseriez socialement, évite en quelque sorte les dilemmes qui accompagnent ce type de technologie. Est-il impoli d’utiliser l’IA pour tromper ma mère en lui faisant croire que je participe à notre appel vidéo alors que je regarde mon téléphone ? Ou, faire croire à mon patron que je n’écris pas un article sur mon autre écran lors d’une réunion ? (Je vais dire oui, étant donné que se faire prendre dans l’un ou l’autre scénario me mettrait dans l’eau chaude.)
Nvidia suggère que Eye Contact essaie de faire en sorte que vos yeux simulés correspondent à la couleur de vos vrais yeux, et il y a « même une fonction de déconnexion au cas où vous regarderiez trop loin ».
Voici une démo côte à côte avec un flux non édité, afin que vous puissiez comparer la façon dont mes yeux bougent réellement à la façon dont le logiciel de Nvidia les rend :
En regardant les résultats que j’ai obtenus, je ne suis pas un grand fan du contact visuel – je pense que cela rend les choses juste un peu désactivé. Une partie de cela est le mouvement oculaire animé. Bien que ce soit très cool que ce soit même possible, cela finit parfois par donner l’impression que mes yeux se déplacent à des vitesses surhumaines. Il y a aussi les pop-ins étranges et très distrayants que vous pouvez voir vers la fin de la vidéo.
Il y a certainement eu quelques fois où la fonctionnalité a bien fonctionné, et quand elle l’a fait, c’était très impressionnant. Pourtant, les ratés étaient trop fréquents et trop visibles pour que je les utilise la prochaine fois que je me présente à une réunion (bien qu’en théorie, je le puisse).
Nvidia qualifie la fonctionnalité de bêta et sollicite les commentaires des membres de la communauté pour l’aider à s’améliorer. « Il existe des millions de couleurs d’yeux et de combinaisons d’éclairage », explique la société. « Si vous le testez et trouvez des problèmes, ou si vous voulez simplement nous aider à développer davantage cet effet d’IA, veuillez nous envoyer une vidéo rapide iciNous serions très reconnaissants! »
Nvidia s’est fortement penché sur ce type de génération d’IA ces dernières années – l’un des principaux arguments de vente de ses cartes graphiques est DLSS, une fonctionnalité qui utilise l’apprentissage automatique pour mettre à l’échelle intelligemment les images, en ajoutant des informations qui n’existent pas lorsque vous passez à un niveau inférieur (mais plus facile à exécuter) résolution. La dernière version, DLSS 3, génère et insère des images entièrement nouvelles dans votre jeu, comme la façon dont Broadcast génère et ajoute une nouvelle paire d’yeux à votre visage.
La diffusion a également d’autres fonctionnalités alimentées par l’IA, telles que le remplacement de l’arrière-plan qui fonctionne comme un écran vert virtuel et la possibilité de nettoyer les bruits de fond que votre microphone capte.
Ce n’est pas la première fonctionnalité de contact visuel que nous avons vue. Apple a commencé à tester une fonctionnalité similaire appelée « Correction de l’attention » pour FaceTime en 2018. Dans les versions actuelles d’iOS, elle est étiquetée « Contact visuel » dans Paramètres > FaceTime. Microsoft propose également une version de la fonctionnalité dans Windows 11 pour les appareils dotés d’une unité de traitement neuronal.
Eye Contact n’est pas la seule fonctionnalité ajoutée par Nvidia à la version 1.4 de Broadcast. La dernière mise à jour apporte également un effet de vignette qui, selon Nvidia, est similaire à celui d’Instagram et améliore les effets de flou, de remplacement et de suppression de l’arrière-plan virtuel. La mise à jour est actuellement disponible en téléchargement pour tous ceux qui ont une carte graphique RTX.