DeepSeek V4-Flash-Vision-Exp:視覚 Agent は Opus 4.8 に近いが、動画全体の理解とは別物
トレンド

DeepSeek V4-Flash-Vision-Exp:視覚 Agent は Opus 4.8 に近いが、動画全体の理解とは別物

公開日 · 著者: BibiGPT チーム
BibiGPT を Google の優先ソースに追加 トップニュースと AI による回答に BibiGPT がもっと表示されます。

40分の製品デモを見終えたところです。音声の議事録はきれいに並んでいます:機能、価格、次のアクション。すると発表者が図を指して「このトレンドを見てください」と言います。議事録には「図表を参照」の四文字だけ。巻き戻してそのフレームを探すと、シークバーは広告に飛び、図表はすでに次のページに差し替わっています。

この問題は 2026年8月21日以降、「転写が十分か」だけでは済みません。視覚 Agent の判断になります:モデルはその図を見えるのか、そして見たあと、本当に持ち帰りたい成果物につなげられるのか。

多くの記事は「Opus-4.8 に近い」で止まります。本稿が分解するのはもう半分です:視覚 Agent が画像を見られることと、動画全体を理解できることは等しくない。

目次

8月21日に何が公開されたか

2026年8月22日時点:DeepSeek は公式 changelog で実験的マルチモーダルモデル DeepSeek-V4-Flash-Vision-Exp を公開しました。呼び出し名は deepseek-v4-flash-vision-exp です。同日 DeepSeek Harness 0.1.1 が組み込み対応しました。

公式自身が二本の線を引いています:

  1. テキスト側は V4-Flash と同等:Agent・推論・世界知識がビジョン追加で崩れない。
  2. 視覚 Agent ベンチマークは Opus-4.8 に接近:純テキストの V4-Flash に対して「見える」一段階の飛躍。

API 層でもコスト境界は固定です:画像は token 課金、1枚あたり最大 384 token、価格は V4-Flash と同額;Chat Completions、Messages、Responses に対応;画像は base64、外部 URL、または新たに加わった Files API(無料で一度アップロードし、以降は file_id で再利用)を使えます。ビジョン入門は API Guides - Vision を参照。The Decoder の補足:JPEG / PNG / GIF / WebP は拡張子ではなくファイル内容で形式を判定します。

依然として Exp サフィックス付きです。公式は重みのオープンソース化を同時に発表しておらず、V4 マルチモーダルの最終形とも書いていません。

オンライン講座のあの PPT ページこそ、ビジョンモデルが本当に見るべきものです:

動画から抜き出した講義スライドのキーフレームと、対応する時間帯のテキスト スクリーンショット:講義スライドのキーフレームと対応テキスト。出典:BibiGPT。

実用ルール: 実験モデルの告知を読むときは、まずサフィックスを探す。Exp は試せるが、製品の約束にはならない。

テキストは同等、ビジョンは飛躍:数字の読み方

公式の言い方は「Opus-4.8 に近い」です。The Next Web が同じ表を最後まで読みました:新モデルは 11 項目中 Opus-4.8 に 3 項目勝ち、残り 8 項目は負けています。NL2Repo は 57.7 対 69.7 で 12 点差;DSBench-Hard は 63.6 対 71.7。近い項目も本当に近い:Terminal Bench 2.1 は 83.9 対 85.0、Chartography は 64.3 対 65.0。

V4-Flash に対する飛躍はより具体的です。ApexBench Pass@1 は 26.2 から 36.5、Agents’ Last Exam は 25.2 から 27.3。DeepSeek 自身の脚注は明記しています:この 2 項目で、純テキストの V4-Flash は「その中のマルチモーダル要素を無視」します。言い換えれば、飛躍の一部は盲目テストに目を一つ足したことであり、テキスト能力が突然倍になったわけではありません。

次元V4-FlashV4-Flash-Vision-Exp動画全体を見る
入力テキストテキスト + 画像リンク / ファイル + タイムライン
Agent が画像を見る画面 + 音声を一緒に理解
公式の位置づけテキスト基線視覚 Agent が Opus-4.8 に近い製品ワークフローであり、ベンチマーク名ではない
課金V4-Flash 価格同額、画像は最大 384 token/枚成果物単位であり、「1枚見る」単位ではない

デモ:Harness がモデルを実タスクに接続する方法。出典:YouTube 公開解説、対照 DeepSeek Harness

実用ルール: 「Opus に近い」を見たら、まず何項目勝ち、何項目負けたかを数える。3勝8敗でも「近い」は言えるが、「リード」とは書けない。

長尺動画の層は、DeepSeek V4 100万コンテキストワークフロー で書きました;Harness スキルの入れ方は dsh 音视频 skill を参照。本稿が打つのは「視覚 Agent → 動画の画面理解」だけです。

視覚 Agent が動画全体を理解するまで、あと何層あるか

答えを先に言います:画像を読める Agent がデフォルトで食べるのは、1枚の画像、1枚のスクリーンショット、1枚の表です。動画全体が求めるのはタイムライン上の連続画面に、音声・字幕・チャプターを重ねたものです。

V4-Flash-Vision-Exp の正当な場面ははっきりしています:画像の説明、スクリーンショットの文字読み取り、図表の読み取り、見たものをツール呼び出しにつなぐこと。これで GUI Agent、レポート Q&A、スライドの抜き打ち検査には十分です。足りないのは:40分のデモで図表が 11 秒だけ現れ、「17分目のあの図は何を言ったか」が欲しいのに、「このフレームをアップロードした」で終わることです。

オフィス Agent の次の駅は、より賢い計画ではなく、音動画を送り込めるかどうかです。会議録画、オンライン講座、製品デモは、デフォルトでいまだ入力層で止まっています。「見えたフレーム」を「検索可能なチャプター」につなげた側が、クリエイター・学生・ビジネスの三つの高頻度パスを覆います。

既存の差分もここにあります。100万コンテキストは「一度にどれだけ詰め込めるか」を解決し;Harness は「スキルフォルダを runtime がどう発見するか」を解決し;視覚実験モデルは「画像が Agent に入れるか」を解決します。三段とも必要で、どの一段も動画理解にはなりません。

キーフレーム分析パネル:まず画面を抽出し、次にビジョンモデルが各フレームを読む スクリーンショット:キーフレーム分析パネル。出典:BibiGPT。

実用ルール: 視覚 Agent が画像を見られることと、動画全体を見られることは等しくない。タイムラインが欠けていれば、アルバム Q&A にすぎない。

クリエイター・学生・ビジネスそれぞれにとっての意味

クリエイター。 欲しいのは「このサムネがきれい」ではなく、「この 20 分の解説を投稿できる図文に分解できるか」です。視覚 Agent は 1 フレームの図表を読み;動画の画面内容まとめ が全体を見たうえで、動画から図文へ につなぎます。

学生。 オンライン講座の価値は、しばしば板書と PPT にあり、講師の口癖にはありません。視覚 Agent はある 1 ページの抜き打ち検査に向き;コース全体が求めるのはキーフレームのグリッド + 対応字幕で、4時間をもう一度見るのではなく講義スライドをめくる感覚です。

ビジネス。 週次会議の録画で本当に落とせないのは、共有画面上の数字です。純テキストの議事録は「画面を参照」と書きます。視覚 Agent は切り出した 1 枚を読めます;検索可能なチャプターがあれば「23分目の表」から戻れます。すでに 100 万人超のユーザー、累計 500 万回超の要約、30+ プラットフォームをカバーしていて、足りないのはもう一つのモデル名ではなく、見えたフレームをタイムライン上に残すことです。

選択フィルタは一文だけ:欲しいのは「1枚の画像を読む」か、「動画全体で見るべき図を持ち帰る」か。

実用ルール: ビジョンモデルを評価するなら、まず成果物がどのフレームに落ちるかを問う。時点が言えなければ、まだ動画理解ではない。

ビジョンモデルセレクタ:同じキーフレーム群で、画像を見るモデルを切り替えられる スクリーンショット:キーフレーム分析のモデル選択。出典:BibiGPT。

画面理解をワークフローに接続する

判断の章はここまでです。製品の使い方はこの節だけに置きます。手元に図表つきの解説動画があるとします:

  1. Bilibili / YouTube / ポッドキャストのリンクを貼り、まずタイムスタンプ付きチャプターを出す。先にスクリーンショットしない。
  2. ビジュアル要約を開き、システムにキーフレームを抽出させる。自分でシークバーを運に任せて引きずらない。
  3. 図表・コード・板書を含むフレームで画面分析し、「図表を参照」を読める要点に書き換える。
  4. 二次配信が必要なら、図文または講義スライドビューへ。手作業でサムネを切り抜かない。
  5. 元の時点に戻って照合する。モデルの記述を最終事実にしない。

対照デモ:リンクを1本貼り、画面がどう引用可能な要点になるかを見てください。

動画のフレームを図解ノートに

AI は音声だけでなく画面も見ます——スライド、図表、画面の文字まで文章化。

サンプルを試す:

キーフレーム

画面の文字: nanoGPT

Karpathy が bigram モデルをライブコーディング——現在の文字から次を予測する最も単純なモデル。

汎用要約の入口は依然として AI 動画要約ガイド です。視覚実験モデルはこのプロダクションラインの「画像読み取り」の一環になれますが、ラインそのものではありません。本稿公開時点で、製品側は当該実験モデルを「接続済み」とは書いていません——話題としてモデル公開を書くのは合法ですが、専用エンジンとして結びつけるのは合法ではありません。

動画リンクを画面分析に渡す。入口はリンクでありアルバムではない スクリーンショット:動画から図文への入口。出典:BibiGPT。

反証可能な予測

2027年2月 までに、主流の視覚 Agent が依然として単枚画像 / 短いスクリーンショットしか扱えず、タイムライン上で「第 N 分のあの表」を揃え、検索可能なチャプターを書けないなら、「視覚 Agent がフラッグシップに近い ≠ 動画全体を理解できる」という判断は成立します。半年以内に公開・再現可能な「動画全体の画面理解」ベンチマークが現れ、Flash Vision 系の実験モデルが製品ワークフローを直接並走するなら、この判断は無効になります。

よくある質問

V4-Flash-Vision-Exp はすでに Opus 5 と対比しているのか? いいえ。公式と第三者報道が比べているのは Opus-4.8 です。TNW は表に Opus 5 列がないと明記しています。

384 token で 1 枚は高いのか? 公式の位置づけは V4-Flash と同額、1枚上限 384 token で、ビジョン専用料金は別建てではありません。Files API は無料で、同じ画像を繰り返し問う用途に向きます。

100万コンテキストの記事との違いは? あちらは「一度にどれだけ詰め込めるか」を打ちます。本稿は「目が Agent につながったあと、動画ワークフローにまだタイムラインが足りない」を打ちます。

BibiGPT はすでにこの実験モデルを接続しているのか? 製品統合稿としては書いていません。公開前に当該実験モデルは未接続です。ユーザーが選べるモデルは指名できます;システムが自動で決める環節を専用エンジンの宣伝文には結びません。

画像だけ見たい、動画要約はしたくない。このラインはまだ必要か? 画像読み取りだけなら、ビジョン API で足ります。動画全体の図表・板書・デモ画面を持ち帰るなら、依然としてチャプター + キーフレーム + 戻れるタイムスタンプが必要です。

表を読んでから、追従するかを決めてください。フラッグシップに近いのは視覚 Agent ベンチマークであり、「リンクを貼れば 40 分のデモがわかる」ではありません。見えたフレームをタイムライン上に残すなら、BibiGPT でまず自分のリンクを1本走らせてください。

いますぐ始める。動画の画面を検索可能な要点に:

BibiGPT チーム

「モデル更新」の記事 47 本をすべて見る →

これらの AI ツールを試す