Google déploie lentement les fonctions vidéo visuelles alimentées par Astra de Gemini Live, mais commence à s’élargir. Voici ce qu’il faut savoir sur son utilisation.

La société suggère que l’arrivée de la caméra et des contrôles de partage d’écran fait partie d’un « Pixel Drop d’avril 2025 », mais un ensemble de fonctions non programmé semble étrange étant donné que la fonction fonctionnera sur pratiquement n’importe quel téléphone Android.

Lorsque vous lancez l’application Gemini sur votre téléphone Android, une fenêtre contextuelle indiquera que les fonctionnalités alimentées par Astra de Gemini Live sont prêtes à être testées. La mini fenêtre contextuelle indique que vous pouvez « discuter d’idées, en savoir plus sur votre environnement » ou « obtenir de l’aide sur ce qui se trouve sur votre écran. » Cette dernière fait référence à la fonction de partage d’écran, qui est comme une version améliorée de Circle to Search.

Gemini Live Astra : Comment y accéder

Pour accéder à l’un des nouveaux modes visuels, vous aurez besoin d’un abonnement Google One AI Advanced. Si vous possédez un Pixel 9 Pro, Pro XL, Pro Fold, ou certains modèles Galaxy S25, vous aurez reçu un essai gratuit substantiel de ce niveau payant. L’essai dure 12 mois sur les modèles Pixel 9 Pro et 6 mois sur les appareils S25.

Google a proposé plusieurs moyens d’accéder aux nouveaux contrôles. Le plus simple est via l’application Gemini dédiée. Lorsque vous lancez Gemini Live, l’interface habituelle de type appel gagnera quelques boutons supplémentaires. Il y a un bouton de caméra et une icône de présentation.

Vous pouvez utiliser votre voix avec la phrase de réveil « Hey, Google ». Au-dessus de la barre contextuelle compacte de Gemini, vous verrez un bouton cliquable « Partager l’écran avec Live » qui démarrera le partage d’écran alimenté par l’IA. Pour l’instant, vous ne pouvez pas sélectionner une seule application. Au lieu de cela, vous devez partager l’ensemble de votre écran, ce qui peut être intrusif pour certaines personnes. Une puce de barre d’état indiquera que cette fonction est active. Un simple tapotement vous permettra de fermer ou de terminer votre session rapidement.

Comment est-ce à utiliser ?

Le démarrage initial et l’introduction sont très rapides, mais le viseur s’ouvre et est très facile à comprendre. Il imite en quelque sorte l’interface de l’appareil photo Pixel, ce qui est instantanément familier pour quelqu’un qui a utilisé des téléphones Google pendant un certain temps. Vous n’êtes pas obligé d’utiliser la caméra arrière. Il existe un bouton permettant de passer à la caméra selfie si vous souhaitez vous inclure vous-même ou votre arrière-plan dans le cadre et poser des questions ou demander des conseils.

Lorsque j’utilise le mode Gemini Live Astra, j’ai constaté que la mise au point de la caméra est un peu capricieuse, car les objectifs qui passent automatiquement peuvent être agaçants de près. Il vous est conseillé de rester immobile ou de garder le sujet aussi immobile que possible. Je peux attester de cela, mais malgré certains sujets flous, Gemini détermine rapidement ce que c’est ou produit des informations sans trop de difficulté.

Le fait de ne pas pouvoir zoomer, même avec des objectifs téléobjectifs dédiés sur votre téléphone, semble également une limitation. Si vous souhaitez pointer quelque chose dans le monde, vous devrez vous rapprocher ou espérer que Gemini puisse déterminer ce que vous montrez.

Pour des requêtes simples ou basiques, c’est parfaitement adéquat. Cependant, les meilleurs cas d’utilisation concernent des questions plus profondes, comme de l’aide ou des conseils sur des objets, des zones et des lieux, plutôt que de poser des questions simples que vous pourriez probablement rechercher vous-même.

Un exemple typique est d’obtenir les informations caloriques sur des aliments ou des informations sur les allergènes. J’ai même essayé des traductions en temps réel, mais bien qu’elles semblent assez précises, Gemini Live ne donne pas ou n’affiche pas de texte à l’écran. Vous obtenez uniquement des signaux audio et des réponses. Google Lens superpose le texte traduit, donc cela peut être une meilleure option pour traduire des panneaux, du texte et plus encore.

Pour l’instant, vous devez attendre de fermer une session avant de pouvoir « voir » certaines des réponses textuelles. Vous obtenez donc un journal de discussion sur ce qui a été dit, ce que Gemini a répondu et toutes les actions que vous pouvez entreprendre. Cela pourrait être un peu mieux mis en œuvre, mais pour l’instant, c’est acceptable. En tandem avec d’autres applications comme Google Maps et divers autres services, vous pourriez probablement utiliser cela comme un outil d’apprentissage visuel ou une option de tutoriel.

J’ai testé les fonctions vidéo de style Astra de Gemini Live sur un modèle Android, et bien que ce ne soit pas toujours instantané, cela semblait assez fluide, et les réponses étaient presque toujours suffisamment rapides pour donner cette impression.

Le partage d’écran semble un peu moins « naturel » que l’utilisation d’une caméra. Comme vous n’obtenez aucun retour visuel, juste des signaux audio et des informations, cela ne semble pas intégré de la même manière. Obtenir des résumés de pages web est à peu près l’étendue de l’utilité de cette fonction ou obtenir plus d’informations sans quitter une page ou un écran. Je parierais que cela changera au fur et à mesure que nous obtiendrons plus d’intégrations. Pensez à la possibilité d’ajouter des éléments à des listes de courses avec des URL ou des informations de vol à votre calendrier lors de la planification de voyages. Nous ne pouvons pas encore faire cela.

Précision et autres considérations

Comme presque toutes les plateformes d’IA, Gemini n’est pas un système parfait. En fait, il peut se tromper dans de nombreux scénarios. Là où il excelle, c’est dans le rappel d’informations.

J’ai constaté que certains éléments posaient des problèmes où Gemini n’était pas capable de me donner des informations précises. Cela va bien pour des choses que vous connaissez, et vous pouvez efficacement interrompre et corriger le cheminement de l’IA égarée. Le problème ici est que les hallucinations concernant des choses que vous ne connaissez pas très bien pourraient mener à des problèmes.

Par exemple, j’ai demandé des informations sur une cartouche de jeu Gameboy, et Gemini a mal identifié la cartouche et m’a donné des informations incorrectes sur le titre et le gameplay. S’assurer que vous avez une vue claire de quelque chose dans le viseur aide à atténuer cela. Juste en ajustant l’endroit où j’ai « filmé », cela a instantanément résolu le problème sans intervention. Vous ne pouvez tout simplement pas faire confiance à l’information sans réserve à ce stade. Gemini est toujours sujet à des erreurs, allant de mineures à majeures de manière égale.

La caméra orientée vers le monde… avec des réserves

Android XR et la plateforme AR dépendront fortement de Gemini comme moyen d’interagir avec et d’obtenir des informations sur le monde qui nous entoure. Gemini Live utilisant les fonctions Astra constitue le premier pas vers la réalisation de cet objectif. Selon les démonstrations présentées l’année dernière, nous pourrions être à quelques années de lunettes AR fabriquées par Google, mais cette première introduction n’est pas une mauvaise façon de commencer.

Comme pour tout produit d’IA, soyez prudent en plaçant 100 % de votre confiance dans les informations fournies. Cela dit, cela semble être un bon début et un moyen solide d’interagir avec le monde qui vous entoure ou de vous aider lorsque vous êtes dans une impasse. Il s’améliorera avec le temps et deviendra meilleur à mesure que plus de points de données seront introduits, donc en théorie, c’est le pire que les modes vidéo de Gemini Live seront jamais – ce qui n’est pas si mal pour commencer.

Le partage de votre écran est actuellement très limité, et bien que cela soit une option secondaire agréable, il est encore plus restreint. S’il peut évoluer pour bien fonctionner avec plus de vos autres services, cela deviendra un outil utile. Pour l’instant, c’est un truc de salon qui fait peu de plus que le Gemini Live régulier.

Qu’est-ce que Gemini Live Astra ?

Gemini Live Astra est une fonction vidéo alimentée par Astra de Google, qui permet aux utilisateurs de partager leur écran et d’utiliser des contrôles de caméra lors des appels. Elle a été introduite lentement et est maintenant en cours d’expansion pour les utilisateurs d’Android.

Comment accéder à Gemini Live Astra ?

Pour accéder aux nouveaux modes visuels, il est nécessaire d’avoir un abonnement Google One AI Advanced. Les utilisateurs de certains modèles de Pixel et de Galaxy S25 peuvent bénéficier d’un essai gratuit substantiel de ce niveau payant.

Comment est l’expérience utilisateur avec Gemini Live Astra ?

L’interface de Gemini Live Astra est rapide et facile à utiliser, imitant la conception de l’appareil photo des téléphones Google. Cependant, il peut y avoir des problèmes de mise au point et de zoom lors de l’utilisation de la fonction.

Quelle est la précision de Gemini Live Astra ?

Gemini Live Astra n’est pas un système parfait et peut donner des informations incorrectes dans certains scénarios. Cependant, il excelle dans le rappel d’informations et peut fournir des réponses utiles, bien qu’il faille être prudent et ne pas faire confiance aveuglément aux résultats fournis.