Gemini Autorise les Utilisateurs à Poser des Questions sur Leur Écran
Aujourd’hui, Gemini for Android propose deux nouvelles fonctionnalités qui permettent aux utilisateurs de poser des questions sur l’écran actuel de leur smartphone. Surnommés ‘Demander à propos de cet écran’ et ‘Demander à propos de cette vidéo’, ces outils capturent une capture d’écran et analysent le contenu de l’écran. Ensuite, lorsque sollicité par l’utilisateur, il peut répondre avec des informations pertinentes que l’utilisateur recherche. La fonction vidéo, qui semble uniquement compatible avec YouTube, peut également fournir des résumés vidéo à condition que des sous-titres soient ajoutés à la vidéo.
Gemini Permet Désormais aux Utilisateurs de Poser des Questions Sur Leur Écran
Les membres de l’équipe de Gadgets 360 ont repéré les fonctionnalités dans la version 15.33.38.28.arm64 de l’application Google, puis sur plusieurs smartphones différents. Elles apparaissent en haut de la fenêtre flottante de Gemini lorsque l’utilisateur invoque l’assistant IA. Ceux qui ont accès à la fonctionnalité verront une bande rectangulaire distincte avec le texte “Demander à propos de cet écran” et une icône de capture d’écran. Si Gemini a été activé pendant la lecture d’une vidéo sur YouTube, le texte est remplacé par “Demander à propos de cette vidéo” et l’icône YouTube.
Fonctionnalité Demander à propos de cet écran de Gemini
En appuyant sur l’icône ‘Demander à propos de cet écran’, une capture d’écran temporaire est réalisée dans Gemini, puis l’utilisateur peut poser n’importe quelle question sur l’écran. Les réponses seront uniquement basées sur ce que l’IA peut voir dans la capture d’écran, cependant, les utilisateurs peuvent également demander à Gemini d’accéder à Internet pour trouver plus d’informations. L’un de ses cas d’utilisation pourrait être de demander un bref résumé d’un article d’actualité.
Pour poser une question de suivi, les utilisateurs peuvent simplement appuyer sur l’icône de microphone ou sur l’icône du clavier en bas de la fenêtre flottante. À noter que la capture d’écran réalisée n’est pas sauvegardée sur l’appareil. De plus, les captures d’écran longues ne sont pas prises en charge avec cette fonctionnalité.
Fonctionnalité Demander à propos de cette vidéo de Gemini
La fonction ‘Demander à propos de cette vidéo’ ne fonctionne que pour une vidéo YouTube où des sous-titres ont été ajoutés. Dans nos tests, nous avons constaté qu’aucune autre plateforme vidéo, malgré la présence de sous-titres, n’était compatible avec cette fonctionnalité. Cependant, sur une vidéo YouTube, en utilisant cette fonctionnalité, les utilisateurs peuvent poser des questions sur la vidéo. Les réponses sont générées en fonction des sous-titres, et la vidéo elle-même n’est pas analysée.
Source : www.gadgets360.com
