La plupart du temps, lorsque nous avons besoin de l'aide d'un assistant AI, cela a quelque chose à voir avec le contenu sur notre écran. Au cours de plusieurs mois, Gemini a lentement gagné la capacité de voir ce qu'il y a sur votre écran. Eh bien, Google vient d'ajouter une nouvelle fonctionnalité d'écran Gemini qui complète le puzzle.
Il existe quelques fonctionnalités qui permettent aux Gémeaux de lire ce qui se trouve sur votre écran. Premièrement, lorsque vous invoquez des Gémeaux, vous verrez le Renseignez-vous sur cet écran bouton. Lorsque vous appuyez dessus, vous pourrez poser des questions sur les Gémeaux sur ce qui se trouve sur votre écran. La fonction de captures d'écran est similaire en ce qu'elle peut lire ce qu'il y a dans vos captures d'écran. De plus, bien que ce ne soit pas techniquement une fonctionnalité Gemini, le cercle à rechercher vous permet de rechercher rapidement ce qui se trouve sur votre écran.
Cependant, les gens attendaient une solution tout-en-un pour déterminer ce qui se passe sur leurs téléphones ou comprimés. C'est quelque chose sur lequel toutes les grandes entreprises d'IA travaillent.
Gemini a maintenant une fonctionnalité d'écran
C'est quelque chose que Google a dévoilé lors des E / S de Google l'année dernière, donc les gens ont eu beaucoup d'attente. Bien que Gemini puisse déjà lire votre écran, Google a ajouté une méthode beaucoup plus transparente pour le faire. En l'état, vous ne pouvez poser des questions que sur ce qui se trouve sur un seul écran. Si vous souhaitez modifier les écrans ou faire défiler, vous devrez lancer une nouvelle conversation.
Cependant, lundi, Google a annoncé une nouvelle fonctionnalité Gemini appelée Screnshare. Cette fonction partagera votre écran aux Gémeaux en temps réel. Dans la vidéo ci-dessous, Google a donné un exemple d'une personne qui regarde une paire de jeans sur son écran. Ensuite, tout en partageant son écran, la personne a pu faire défiler vers le bas dans une partie inférieure de l'écran et poser une autre question à Gemini.
Ainsi, la personne est en mesure d'avoir une conversation en direct sur le pantalon comme si elle parlait à une personne réelle. Non seulement vous pouvez faire défiler pendant que les Gémeaux vous parlent, mais vous n'aurez pas besoin d'invoquer des Gémeaux lorsque vous voulez poser une autre question. Tout comme avec Gemini Live, vous pourrez avoir une conversation naturelle.
Gemini en direct avec la vidéo
La fonctionnalité la plus attendue est peut-être Gemini Live avec la vidéo. Vous vous en souvenez peut-être de la vitrine du projet Astra. Cela a montré aux gens posant des questions aux Gémeaux sur un flux vidéo en direct. Dans la vidéo ci-dessous, nous voyons la personne demander quel glaçage couleur elle devrait ajouter à un vase. Eh bien, Gemini a pu leur donner des suggestions en temps réel. Tout comme avec l'exemple de capture d'écran, la personne a pu avoir une conversation en direct avec les Gémeaux.
Comme il s'agit d'une fonctionnalité Gemini assez nouvelle et passionnante, elle sera exclusive aux utilisateurs avancés de Gemini. Google déroulera la fonctionnalité Gemini Screnshare aux utilisateurs payants plus tard ce mois-ci.
