Gemini AI モデルがカメラ回転とライブ応答機能を実装

グーグルの広報担当者アレックス・ジョセフ氏がこのニュースを認めた。これらの機能は、Google が Gemini Live の開発を支える AI テクノロジー プラットフォームである Project Astra を初めて導入してから約 1 年後に登場しました。

Gemini のリアルタイム AI ビデオ機能。写真: chromeunboxed

Redditのユーザーによると、この新機能は自分のXiaomiの携帯電話に搭載されているという。本日投稿されたビデオでは、ユーザーが Gemini の新しいスクリーン リーダー機能を実演しました。これは、Google が 3 月下旬に Google One AI プレミアム プランの Gemini Advanced 加入者向けに展開すると発表した 2 つの主要機能のうちの 1 つです。

もう一つの重要な機能はライブビデオであり、これにより Gemini は携帯電話のカメラからの画像ストリームを分析し、ユーザーの質問にリアルタイムで回答することができます。 Google が今月初めに公開したデモ ビデオでは、ユーザーが Gemini に、新しく釉薬をかけた陶器製品に適した塗装色についてアドバイスを求めることで、この機能をテストしました。

これらの AI 機能の導入は、Google がインテリジェントな仮想アシスタントの開発競争をリードしていることを示しています。

Amazon は Alexa Plus のリリースを準備中ですが、まだ初期ベータ版の段階です。 AppleはSiriのアップグレードを遅らせており、この仮想アシスタントがGeminiと競争することは不可能となっている。 Samsung は依然として Bixby を維持していますが、実際のところ、最新の Samsung 携帯電話では Gemini がデフォルトのアシスタントになっています。

MWC 2025 で、Google は Project Astra を Gemini Live に統合することを約束し、現在段階的に展開しています。 9to5Google は、少数の Android デバイスに画面共有機能とカメラ機能が搭載され始めていることを確認したと報告しています。

それに伴い、ライブビデオを分析する機能も拡張されます。ユーザーは、Gemini Live インターフェースを開いてライブ ビデオ ストリームを開始し、右隅にあるカメラ切り替えボタンをタップして、Gemini が周囲と直接やり取りできるようにすることができます。

「基本的に、この機能はジェミニが世界をリアルタイムで『見る』のに役立っている」と技術専門家は語った。

Googleはサポート対象デバイスの具体的なリストを発表していないが、1月の声明では、PixelとGalaxy S25シリーズがProject Astraアップデートを受け取る最初のデバイスになると述べた。ただし、現在のところ、Astra を特定のモデルに限定するような技術的な制限はありません。

Google は将来的に Gemini Live を iOS デバイスに拡張する可能性がありますが、現時点では、これはまだ Android 専用の機能です。専門家は、プロジェクト・アストラは人間とAIの関わり方を完全に変え、より強力なリアルタイムAIの時代を先導する可能性があると述べている。

カオ・フォン（TheVerge、Google、9to5Googleによる）