AI時短ラボ
検索
検証

Gemini「エージェント型の動画理解」毎秒1フレームで丸ごと読む代わりに、必要な区間だけ探して見直す。トークン最大88%減・費用最大66%減・精度最大7%向上(Google DeepMind、3.7 Flash・3.6 Flash・3.5 Flash-Lite)。APIの設定を"agentic"にするだけ、追加料金なし。Geminiアプリと「Ask YouTube」にも順次

執筆:約5分で読めます

日刊AIニュース11月7日(土)号:前日のAIのニュース3本を短くまとめました(約5分)›

Google DeepMindは2026年9月1日、Gemini APIに「agentic video understanding(エージェント型の動画理解)」を導入した。従来は動画を固定のフレームレート(既定1FPS)で丸ごと取り込んでいたが、新方式はモデルが内部ツールで動画の必要な区間だけを読み込み、何を・どの速さで・どの様相(フレーム・音声・字幕)で見るかを自分で決める。標準的な動画ベンチマークで費用最大66%減・トークン最大88%減・精度最大7%向上(3.7 Flashの例)。0.1秒未満の瞬間の特定、数時間の動画からの検索、異常検知、動作や物体の数え上げに向く。Gemini 3.7 Flash・3.6 Flash・3.5 Flash-Liteで、Google AI StudioとGemini Enterprise Agent Platformから、API設定のprocessingを"agentic"にすれば使え、料金は通常のトークン課金のみ。Geminiアプリ全ユーザーと、YouTubeの「Ask YouTube」にも数か月内に。

Gemini「エージェント型の動画理解」──毎秒1フレームで丸ごと読む代わりに、必要な区間だけ探して見直す。トークン最大88%減・費用最大66%減・精度最大7%向上(Google DeepMind、3.7 Flash・3.6 Flash・3.5 Flash-Lite)。APIの設定を"agentic"にするだけ、追加料金なし。Geminiアプリと「Ask YouTube」にも順次
目次

2026年9月18日・日本時間時点の情報です。 Google DeepMindのブログ(9月1日)を読んだ。当サイトはGemini 3.7 Flashの発売は追ったが、同月に入ったこの動画機能は扱っていなかった。Gemini APIの使い方はGoogle AI StudioとGemini APIの手引きに。

3行まとめ

  1. 何が変わるか。 これまでの動画理解は「静的」で、動画を固定のフレームレート(既定1FPS、APIで変更可)で丸ごと取り込んでいた。新しいエージェント型の動画理解は、モデルが何を見るか・どの速さで見るか・どの様相(フレーム/音声/字幕)で見るかを自分で決め、内部ツールで動画ファイルの必要な部分だけを読み込む。画像版の「agentic vision」(コード実行と画像理解の組み合わせ)と同じ発想の動画版で、開発者が手で組んでいた「該当区間を切り出して見直す」ループをモデル側が回す。
  2. 数字。 標準的な動画ベンチマークで、費用最大66%減・トークン最大88%減・精度最大7%向上(グラフは3.7 Flash)。10分の解説動画から90分の講義、数時間の録画まで長いほど差が出る。向く用途として、1FPSでは落ちる1秒未満の状態変化の特定(自動編集)、数時間の動画からの「干し草の山から針」検索、注目区間を高FPSで再サンプルする異常検知、繰り返し動作や物体の数え上げを挙げる。
  3. 使い方と範囲。 Gemini 3.7 Flash・3.6 Flash・3.5 Flash-Liteで、Google AI StudioとGemini Enterprise Agent PlatformのGemini APIから、動画のアップロードとYouTube動画に使える。API設定のprocessingを"agentic"にするだけで、料金は通常のトークン課金のみ・機能追加料なし。Geminiアプリの全ユーザー(FlashとFlash-Lite)に近く展開し、数か月内にYouTubeの**「Ask YouTube」**の裏側にも入る。

精度が上がる理由と対象外モデル

  • 「安くなる」の仕組みが明快で、読むフレームを減らしているだけなので、精度が上がる理由は「注目区間を高FPSで見直せる」側にある。1FPSの取りこぼしが多い速い動作の動画ほど恩恵が大きい、と読める
  • 当サイトのAsk YouTubeの記事で見た「視聴ページの質問機能」が、この動画理解に載り替わる予定だと本文にある
  • 数字はGoogle自身の測定で、ベンチマーク名として本文に出るのはLongVideoBench。「最大」の値なので平均ではない
  • 3.8 Flash(9月2日発売)は対象に書かれていない。時系列上は前日の発表なので、対応状況は別途確認が要る

ブログの記載を照合、動画は未検証

この記事の下調べで、筆者は9月18日にGoogle DeepMindのブログを取得し、対象モデル・数字・設定名(processing: "agentic")・コード例がその原文にあることを確認した。開発者ガイドは開いていない。筆者は自分のAPIで動画を投げて試していない。

3.8対応・内訳・展開日は非公開

  • 3.8 Flashでの対応
  • ベンチマークの内訳(LongVideoBench以外)と「最大」の条件
  • Geminiアプリ側の展開日

出典はGoogle DeepMindのブログ

関連記事

Geminiの最近の変更

Geminiのいま(稼働状況・料金と上限・変わったことの一覧)
シェア: ポスト はてブ

出典・参照資料

AI時短ラボ

大きいニュースはYouTubeでも解説しています。Xでは新着記事をお知らせしています。

コメント

まだコメントはありません。最初のコメントを書いてみませんか?

AIについて聞きたいことはありますか?

質問箱で無料で受け付けています。回答は公開され、他の方の参考にもなります。

質問箱を見る →

関連記事

Google、Gemini 3.7 Flashを発表──3.6から3週間・導入価格は半額の0.75ドル、一方で総合指標と知識労働は他社の下の記事画像動画

Google、Gemini 3.7 Flashを発表 3.6から3週間・導入価格は半額の0.75ドル、一方で総合指標と知識労働は他社の下

モデル
Google AI Studio(グーグル エーアイ スタジオ)とは──トップ画面は英語、Gemini API の対応言語の一覧には日本語あり。無料枠あり(入力は製品の改善に使われる)、上限を上げる有料プランもある。使い方とAPIキー【2026年10月版】の記事画像

Google AI Studio(グーグル エーアイ スタジオ)とは トップ画面は英語、Gemini API の対応言語の一覧には日本語あり。無料枠あり(入力は製品の改善に使われる)、上限を上げる有料プランもある。使い方とAPIキー【2026年10月版】

活用
YouTube「Ask YouTube」発表、動画を会話型AI検索で探す新機能とShortsのGemini Omniリミックスの記事画像

YouTube「Ask YouTube」発表、動画を会話型AI検索で探す新機能とShortsのGemini Omniリミックス

プロダクト
Gemini(ジェミニ)とは──Googleの対話型AIアプリ、無料で使える。Geminiアプリの使い方、モデル(Flash-Lite・Flash・Pro)の選び方、5時間ごとの使用量上限、Live・Deep Research・Canvas・Gem(2026年11月にスキルへ)の入口【2026年10月版】の記事画像

Gemini(ジェミニ)とは Googleの対話型AIアプリ、無料で使える。Geminiアプリの使い方、モデル(Flash-Lite・Flash・Pro)の選び方、5時間ごとの使用量上限、Live・Deep Research・Canvas・Gem(2026年11月にスキルへ)の入口【2026年10月版】

活用
Google ADKに「ライブ・音声エージェントの評価」──模擬ユーザーがGemini TTSで話し、音声の返答をルーブリックで採点。名前確認→生年月日の検証(ツール呼び出し)→予約案内の3段ワークフローを、会話計画とペルソナ(NOVICE等)で即興させるか台本どおりに回す。test_config.jsonのlive_model_configを外せば同じケースをテキストで実行、CI/CDにもの記事画像

Google ADKに「ライブ・音声エージェントの評価」 模擬ユーザーがGemini TTSで話し、音声の返答をルーブリックで採点。名前確認→生年月日の検証(ツール呼び出し)→予約案内の3段ワークフローを、会話計画とペルソナ(NOVICE等)で即興させるか台本どおりに回す。test_config.jsonのlive_model_configを外せば同じケースをテキストで実行、CI/CDにも

検証(発表 8月24日)
Google「AI Agents Challenge」上位に共通した4つの設計──①自分のツール層をMCPサーバーとして他のエージェントにも開く②呼び出し連鎖でなくイベントバスで並列に反応③フォールバック先のFlashも同じ検証関数を通す④正規表現→10トークンの分類→本モデルの3層で4割超をモデル呼び出し前に処理。「名前つきプロンプトの連鎖」は多エージェントではないの記事画像

Google「AI Agents Challenge」上位に共通した4つの設計 ①自分のツール層をMCPサーバーとして他のエージェントにも開く②呼び出し連鎖でなくイベントバスで並列に反応③フォールバック先のFlashも同じ検証関数を通す④正規表現→10トークンの分類→本モデルの3層で4割超をモデル呼び出し前に処理。「名前つきプロンプトの連鎖」は多エージェントではない

検証(発表 9月2日)
Google DeepMind「クライアントSDKの生成はオープンであるべき」──2026年5月、使っていたSDK生成ベンダーが買収され突然の終了。Interactions APIのGA直前に乗り換え、Speakeasyと組んでOpenAPI生成スイートをAGPLv3でオープンソース化。7言語のSDK・エージェント向けCLI・ドキュメントMCPサーバーを生成、6ターゲットを約1人で保守の記事画像

Google DeepMind「クライアントSDKの生成はオープンであるべき」 2026年5月、使っていたSDK生成ベンダーが買収され突然の終了。Interactions APIのGA直前に乗り換え、Speakeasyと組んでOpenAPI生成スイートをAGPLv3でオープンソース化。7言語のSDK・エージェント向けCLI・ドキュメントMCPサーバーを生成、6ターゲットを約1人で保守

検証(発表 9月17日)
Google「ゼロトラスト・エージェント」第2回──構文でなく意図を判定する。正規表現の脱獄辞書をModel Armor(入口で403)に、「30ドル超のソフトライセンスは返金不可」を自然言語のポリシー(1判定2,576トークン)に、20ドル×8回で160ドルを抜く多ターン攻撃をAgent Anomaly Detectionに置き換え、再デプロイなしで新ポリシーを足して閉じるの記事画像

Google「ゼロトラスト・エージェント」第2回 構文でなく意図を判定する。正規表現の脱獄辞書をModel Armor(入口で403)に、「30ドル超のソフトライセンスは返金不可」を自然言語のポリシー(1判定2,576トークン)に、20ドル×8回で160ドルを抜く多ターン攻撃をAgent Anomaly Detectionに置き換え、再デプロイなしで新ポリシーを足して閉じる

検証(発表 9月15日)