网易首页 > 网易号 > 正文 申请入驻

DeepSeek V4终于补上视觉:多模态Agent能力逼近Opus 4.8

0
分享至



DeepSeek 的 Agent 路线,终于补上了视觉这一块。

就在今天下午,DeepSeek 正式上线实验性多模态视觉理解模型 DeepSeek-V4-Flash-Vision-Exp,并同步开放 API。用户只需将模型名称设置为 deepseek-v4-flash-vision-exp,即可在原有 V4-Flash 的基础上加入图片理解能力。

按照 DeepSeek 公布的数据,新模型在纯文本 Agent、推理和世界知识等能力上与正式版 V4-Flash 基本持平,而在需要视觉理解的 Agent Benchmark 上出现明显提升。DeepSeek 称,其多模态 Agent 能力已经接近 Claude Opus 4.8。

这次更新其实延续了 DeepSeek 最近一个相当清晰的方向:把模型能力进一步推向 Agent。

在今年 4 月 V4 发布后,DeepSeek 一直在强化工具调用和 Agent 能力。7 月底更新的 V4-Flash 已专门针对 Agent 做过后训练,8 月 13 日正式版 V4-Pro 又进一步提升了生产环境中的 Agent 表现,并原生支持 Responses API。与此同时,DeepSeek 最近还开放了自家的 Agent 框架 DeepSeek Harness,试图把模型、工具调用、文件操作、搜索、子 Agent 等能力组织进同一套工作流。

此前,视觉是这套体系里此前比较明显的一块缺口。 但在昨天,Harness v0.1.0-rc.8 更新中,DeepSeek 已经加入更完整的多模态支持:模型适配器可以配置原生图片请求,/goal、/plan 等指令开始支持图文输入,同时还修复了大尺寸图片和历史图片过多导致请求失败的问题。现在随着 V4-Flash-Vision-Exp 上线,Harness 不再只是“接口上做好了看图准备”,而是有了 DeepSeek 自己的原生多模态模型可以接入。

从跑分看,新模型的提升并不主要来自文本能力。在考察终端环境复杂任务执行能力的 Terminal Bench 2.1 上,新模型从 V4-Flash 的 82.7 提升至 83.9;在面向真实软件工程长任务的 DeepSWE 上,从 54.4 升至 59.3;NL2Repo 和 DSBench-Hard 也分别提升至 57.7 和 63.6。整体来看,新模型原本已经较强的 Coding Agent 能力继续小幅上升。

更明显的变化出现在视觉任务上。比如在考察专业图表理解能力的 Chartography 中,新模型达到 64.3(p0.95);此外,ApexBench Pass@1 为 36.5,Agents' Last Exam 为 27.3,ZeroBench Pass@5 为 35.0。DeepSeek 特别说明,旧版 V4-Flash 在 ApexBench 和 Agents' Last Exam 中会直接忽略其中的多模态信息,因此这部分差距更能反映加入视觉能力后的变化。


(来源:DeepSeek)

这对于 Agent 的意义,比普通的“看图问答”更大。现实中的 Agent 很多时候并不是只在文本和代码之间工作。它需要读网页布局、判断按钮位置、理解截图和图表、查看生成出来的 PPT 或网页效果,再根据视觉结果继续修改。也就是说,只有能“看见”自己的工作结果,Agent 才更容易形成完整的执行闭环。

DeepSeek 官方展示的三个案例也都指向这一点:一个是自动制作高端西藏自驾游 PPT,一个是根据视觉要求重新设计 Harness 官网,另一个则是制作带 3D 黏土怪物动态效果的前端 Demo。它们都不只是识别一张图片,而是需要让模型在长链条任务中同时处理视觉信息、代码和工具调用。


(来源:DeepSeek)

API 层面,DeepSeek 也直接围绕 Agent 使用做了适配。V4-Flash-Vision-Exp 支持 Chat Completions、Messages 和 Responses 三种格式,图片可以通过 Base64、外部 URL 或 Files API 传入。图片会转换成 token 计费,单张图片最多占 384 tokens,价格与 V4-Flash 保持一致。新上线的 Files API 还允许同一张图片上传一次后,在多个请求中通过 file_id 重复调用,减少重复传输。官方文档显示,目前 Files API 支持 JPEG、PNG、GIF 和 WebP。


(来源:DeepSeek)

当然,这并不是 DeepSeek 第一次做多模态。早在 2024 年,DeepSeek 就发布过 DeepSeek-VL,随后又推出统一多模态理解与生成模型 Janus。不同之处在于,这一次视觉能力第一次真正进入 V4 主力模型、官方 API 和 Harness Agent 工作流。

目前 V4-Flash-Vision-Exp 仍然带着 “Exp” 后缀,DeepSeek 也明确将其定义为实验模型,尚未公布新的开源权重或完整技术报告。因此,它还不能被视为 V4 多模态能力的最终形态。

但从最近几次连续更新来看,DeepSeek 的路径已经越来越明确:V4 负责模型能力,Harness 负责把模型接入真实任务,而视觉则让 Agent 从主要处理文本和代码,进一步开始理解屏幕上的世界。

参考资料

1.https://api-docs.deepseek.com/updates/

2.https://api-docs.deepseek.com/quick_start/pricing/

3.https://api-docs.deepseek.com/news/news260424/

4.https://github.com/deepseek-ai/DeepSeek-Harness

5.https://github.com/deepseek-ai/DeepSeek-VL

6.https://github.com/deepseek-ai/Janus

运营/排版:何晨龙

注:封面/首图由 AI 辅助生成

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
河北保定通报“家长班级群自报干部身份”:经初步核实,网传情况属实,将依规依纪严肃处理

河北保定通报“家长班级群自报干部身份”:经初步核实,网传情况属实,将依规依纪严肃处理

荔枝新闻
2026-09-03 15:56:00
欧盟市场留给我们的窗口期只剩下16个月。

欧盟市场留给我们的窗口期只剩下16个月。

流苏晚晴
2026-09-02 19:04:44
对抗组织审查,搞迷信活动,肖友华被“双开”!

对抗组织审查,搞迷信活动,肖友华被“双开”!

中国青年报
2026-09-04 02:00:12
观音持枪射击图:确实是300多年前的文物

观音持枪射击图:确实是300多年前的文物

收藏大视界
2026-09-02 16:07:16
吴刚携妻出游遭翻车!评论区全是骂声,他和陈宝国栽同一个坑

吴刚携妻出游遭翻车!评论区全是骂声,他和陈宝国栽同一个坑

乡野小珥
2026-09-04 06:29:05
今日赛事!CCTV5+郑钦文VS普丁塞娃,拿下比赛将发生三大质变!

今日赛事!CCTV5+郑钦文VS普丁塞娃,拿下比赛将发生三大质变!

梦忆之浅
2026-09-04 00:11:24
美国害怕的,可能不是华为的芯片,而是中国可再生的、低价的电力

美国害怕的,可能不是华为的芯片,而是中国可再生的、低价的电力

揽星戈
2026-09-04 00:50:00
孙宇晨紧急报案,场面彻底失控了!

孙宇晨紧急报案,场面彻底失控了!

TOP电商
2026-09-03 18:52:40
己方阵亡79人,歼敌数超过50000人!交换比达1:637?

己方阵亡79人,歼敌数超过50000人!交换比达1:637?

战风
2026-09-01 16:57:30
还没出道就火了!神似宋威龙北电新生报到引围观

还没出道就火了!神似宋威龙北电新生报到引围观

韩小娱
2026-09-03 20:38:58
中俄谈完2天不到,普京给中俄蒙管道改名,俄罗斯终于认清现实?

中俄谈完2天不到,普京给中俄蒙管道改名,俄罗斯终于认清现实?

浯江孤舟
2026-09-03 08:12:20
严重涉台错误,中国团队当场撤!韩国官方紧急切割,希望就此揭过

严重涉台错误,中国团队当场撤!韩国官方紧急切割,希望就此揭过

涵豆说娱
2026-09-04 06:14:17
赛力斯问界销量近乎腰斩,“遥遥领先”为何卖不动了?

赛力斯问界销量近乎腰斩,“遥遥领先”为何卖不动了?

大厂财经社
2026-09-02 13:22:05
冷湖——这样的废墟未来将随处可见

冷湖——这样的废墟未来将随处可见

细雨中的呼喊
2026-09-03 23:37:35
罚款5000元!事发东莞南站……

罚款5000元!事发东莞南站……

东莞好生活
2026-09-03 23:11:29
“不如炒盘鸡蛋!”山东家长晒4个孩子晚餐,蛋白质趋近于0!

“不如炒盘鸡蛋!”山东家长晒4个孩子晚餐,蛋白质趋近于0!

林林先生
2026-08-27 19:14:35
1973 年王玉龄受到周恩来总理接见,聊到张灵甫时总理一番谈话,让王玉龄失声痛哭

1973 年王玉龄受到周恩来总理接见,聊到张灵甫时总理一番谈话,让王玉龄失声痛哭

唠叨说历史
2026-08-15 16:22:23
芜湖两名干部通报被查,一人为主动投案

芜湖两名干部通报被查,一人为主动投案

最芜湖
2026-09-03 22:54:39
星宇股份股价连跌6天,市值一周蒸发超32亿元

星宇股份股价连跌6天,市值一周蒸发超32亿元

新京报
2026-09-03 19:04:51
太贵了!4人吃南昌拌粉花156元,辽宁游客怀疑被多收100元,看完菜单恍然大悟

太贵了!4人吃南昌拌粉花156元,辽宁游客怀疑被多收100元,看完菜单恍然大悟

火山詩话
2026-09-02 10:20:03
2026-09-04 06:59:00
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技评论独家合作
17185文章数 515199关注度
往期回顾 全部

科技要闻

英伟达129亿美元拿下Hugging Face

头条要闻

男子逛夜市遭按摩摊大妈拉住 被5个大妈服务按到发红

头条要闻

男子逛夜市遭按摩摊大妈拉住 被5个大妈服务按到发红

体育要闻

梅西:巴萨10号与阿根廷10号

娱乐要闻

王宝强携女友回工作室!相恋8年仍未婚

财经要闻

章子怡套现3亿 上美拿什么补韩束的缺?

汽车要闻

限时权益价28.99万起 FREELANDER神行者8正式上市

态度原创

房产
旅游
手机
游戏
公开课

房产要闻

投资50亿!三亚又一重大配套,方案曝光!

旅游要闻

巴黎自行车旅游升温,多家公司推出特色骑行线路   新民侨梁

手机要闻

8月性价比最高入门机榜单出炉:摩托罗拉霸榜前2

《食人鲨2》正式公布!新预告亮相 2027年发售

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版