Le modèle d'IA Gemini implémente les fonctionnalités de rotation de la caméra et de réponse en direct

Alex Joseph, porte-parole de Google, a confirmé la nouvelle. Ces fonctionnalités arrivent près d'un an après que Google a présenté pour la première fois Project Astra, la plate-forme technologique d'IA à l'origine du développement de Gemini Live.

Fonctionnalité vidéo IA en temps réel de Gemini. Photo : chromeunboxed

Un utilisateur de Reddit a déclaré que la nouvelle fonctionnalité était apparue sur son téléphone Xiaomi. Dans une vidéo publiée aujourd'hui, l'utilisateur a démontré les nouvelles capacités de lecture d'écran de Gemini, l'une des deux fonctionnalités clés que Google a annoncé qu'il déploierait fin mars pour les abonnés Gemini Advanced sur son plan Google One AI Premium.

L'autre fonctionnalité clé est la vidéo en direct, qui permet à Gemini d'analyser le flux d'images provenant de la caméra du téléphone et de répondre aux questions des utilisateurs en temps réel. Dans une vidéo de démonstration publiée par Google plus tôt ce mois-ci, un utilisateur a testé la fonctionnalité en demandant à Gemini des conseils sur la bonne couleur de peinture pour son produit en céramique nouvellement émaillé.

Le lancement de ces fonctionnalités d’IA montre que Google est en tête de la course au développement d’assistants virtuels intelligents.

Amazon se prépare à lancer Alexa Plus, mais il est encore en version bêta. Apple a retardé la mise à niveau de Siri, rendant impossible pour l'assistant virtuel de concurrencer Gemini. Samsung maintient toujours Bixby, mais en fait, Gemini est désormais l'assistant par défaut sur les derniers téléphones Samsung.

Lors du MWC 2025, Google s'est engagé à intégrer le projet Astra dans Gemini Live et le déploie actuellement par phases. 9to5Google rapporte avoir repéré des fonctionnalités de partage d'écran et d'appareil photo commençant à apparaître sur une poignée d'appareils Android individuels.

Parallèlement à cela, la capacité d’analyser la vidéo en direct est également étendue. Les utilisateurs peuvent ouvrir l'interface Gemini Live, démarrer le flux vidéo en direct, puis appuyer sur le bouton de basculement de la caméra dans le coin droit pour permettre à Gemini d'interagir directement avec son environnement.

« Fondamentalement, cette fonctionnalité aide Gemini à « voir » le monde en temps réel », a déclaré un expert en technologie.

Bien que Google n'ait pas annoncé de liste spécifique d'appareils pris en charge, dans un communiqué en janvier, la société a déclaré que les gammes Pixel et Galaxy S25 seraient les premiers appareils à recevoir la mise à jour du projet Astra. Cependant, il n’existe actuellement aucune limitation technique qui limiterait l’Astra à un modèle spécifique.

Google pourrait étendre Gemini Live aux appareils iOS à l'avenir, mais pour l'instant, il s'agit toujours d'une fonctionnalité exclusive à Android. Les experts affirment que le projet Astra pourrait complètement changer la façon dont les humains interagissent avec l’IA, inaugurant une ère d’IA en temps réel plus puissante.

Cao Phong (selon TheVerge, Google, 9to5Google)