搜索 猫眼电影 融媒体矩阵
  • 山东手机报

  • 猫眼电影

  • 大众网官方微信

  • 大众网官方微博

  • 抖音

  • 人民号

  • 全国党媒平台

  • 央视频

  • 百家号

  • 快手

  • 头条号

  • 哔哩哔哩

首页 >新闻 >社会新闻

DeepSeek-V3.2系列开源,性能直接对标Gemini-3.0-Pro

2025-12-27 07:55:04
来源:

猫眼电影

作者:

丁克族

手机查看

  猫眼电影记者 高咏 报道首次登录送91元红包

衡宇 发自 奥特赛德量子位 | 公众号 QbitAI

ChatGPT发布三周年,DeepSeek嚯一下发出两个模型:

DeepSeek-V3.2DeepSeek-V3.2-Speciale

前者聚焦平衡实用,适用于日常问答、通用Agent任务、真实应用场景下的工具调用。

推理达GPT-5水平,略低于Gemini-3.0-Pro。

后者主打极致推理,推理基准性能媲美Gemini-3.0-Pro。

还一把斩获IMO 2025、CMO 2025、ICPC World Finals 2025、IOI 2025金牌。

划重点,ICPC达到人类选手第二、IOI人类选手第十名水平。

具体来说,DeepSeek-V3.2侧重于平衡推理能力与输出长度,降低计算开销。

DeepSeek官微推文中写道,“DeepSeek-V3.2模型在Agent评测中达到了当前开源模型的最高水平”。

该模型其他情况如下:

推理能力比肩GPT-5;相比Kimi-K2-Thinking大幅缩短输出长度,减少用户等待时间;DeepSeek旗下首个“思考融入工具调用” 的模型,支持思考/非思考双模式工具调用;基于1800+环境、85000+复杂指令的大规模Agent训练数据,泛化能力强。

下图展示的是DeepSeek-V3.2与其他模型在各类Agent工具调用评测集上的得分

——特别强调,DeepSeek-V3.2并没有针对这些测试集的工具做特殊训练。

DeepSeek-V3.2-Speciale是DeepSeek-V3.2的长思考增强版,融合了DeepSeek-Math-V2的定理证明能力。

在指令跟随、数学证明、逻辑验证方面,DeepSeek-V3.2-Speciale能力出众,推荐用来完成高度复杂数学推理、编程竞赛、学术研究类任务。

特别注明!这个版本目前没有针对日常对话与写作做专项优化。

而且仅供研究使用,不支持工具调用。

在高度复杂任务上,Speciale模型大幅优于标准版本,但消耗的Tokens也显著更多,成本更高。

目前,DeepSeek的App和Web端,都已经更新为正式版DeepSeek-V3.2;Speciale版本目前仅供临时API使用。

模型发布同时,技术报告也已经挂出来了。

论文里透露的技术细节相当硬核:

新的稀疏注意力机制DSA大幅降低计算复杂度,强化学习训练的计算量超过预训练的10%,还有全新的大规模Agent任务合成管线……

具体情况,我们详细来看。

提出DSA高效稀疏注意力机制,长文本不再是负担

DeepSeek-V3.2最大的架构创新是引入了DSA(DeepSeek Sparse Attention)机制。

传统的注意力机制在处理长序列时计算复杂度是O(L²),严重制约了模型的部署效率和后续训练的可扩展性。

DSA让计算复杂度降低到O(L·k),k远小于L。

与此同时,DSA让模型在长上下文任务中显著加速推理,且无明显性能损失。

支持FP8精度,适配MLA(Multi-Query Attention)架构,训练友好。

怎么做到的?

DSA主要包含两个组件,一个叫lightning indexer(闪电索引器),另一个叫fine-grained token selection(细粒度token选择)机制。

闪电索引器负责快速计算查询token和历史token之间的相关性分数,然后只选择top-k个最相关的token进行注意力计算。

团队特意选用了ReLU激活函数来提升吞吐量。

DeepSeek-V3.1-Terminus开始继续训练时,团队采用了两阶段策略。

第一阶段是Dense Warm-up,保持密集注意力,只训练lightning indexer,让它学会对齐主注意力的分布。

这个阶段只用了1000步,处理了21亿个tokens。

第二阶段才引入稀疏机制,每个查询token选择2048个键值对,训练了15000步,总共处理了9437亿个tokens。

实测效果相当给力——

在128k长度的序列上,DeepSeek-V3.2的推理成本比V3.1-Terminus降低了好几倍。

H800集群上的测试显示,当序列长度达到128K时,预填充阶段每百万token的成本从0.7美元降到了0.2美元左右,解码阶段从2.4美元降到了0.8美元。

后训练算力超过预训练的10%

值得注意的是,DeepSeek团队这次在强化学习上下了血本。

论文里明确提到,RL训练的计算预算已经超过了预训练成本的10%,这在开源模型里相当罕见。

DeepSeek在技术报告中提到,开源模型在post-training阶段的计算资源投入不足,限制了其在困难任务上的性能。

为此,团队开发了稳定、可扩展的RL协议,使训练后阶段的计算预算超过了预训练成本的10%,从而解锁了模型的先进能力。

展开讲讲——

为了稳定地扩展RL计算规模,团队在GRPO(Group Relative Policy Optimization)算法基础上做了好几项改进。

首先是无偏KL估计,修正了原始的K3估计器,消除了系统性误差。

原来的估计器在某些情况下会给出无界的梯度权重,导致训练不稳定。

其次是离线序列掩码策略。

在实际训练中,为了提高效率通常会生成大批量的rollout数据,然后分成多个mini-batch进行梯度更新。这种做法本身就引入了off-policy行为。

团队通过计算数据采样策略和当前策略之间的KL散度,把那些偏离太远的负样本序列给mask掉,避免它们干扰训练。

团队还特别针对MoE模型设计了Keep Routing操作。

推理框架和训练框架的实现差异可能导致同样的输入激活不同的专家,这会造成参数空间的突变。通过保存推理时的路由路径并在训练时强制使用相同路径,确保了参数优化的一致性。

在具体训练上,团队采用了专家蒸馏的策略。

先为每个任务训练专门的模型,包括数学、编程、通用逻辑推理、通用Agent任务、Agent编程和Agent搜索这6个领域,每个领域都支持思考和非思考两种模式。

然后用这些专家模型生成特定领域的数据来训练最终模型。

Agent能力的突破

此外,此次新模型在Agent任务上的突破也让人眼前一亮。

这次团队找到了让模型同时具备推理和工具使用能力的方法。

在思考上下文管理方面,团队发现DeepSeek-R1那种每次开启新对话就丢弃推理内容的策略,实在是太——浪费token了。

于是设计了新的管理机制:

只有在引入新的用户消息时才丢弃历史推理内容,如果只是添加工具相关消息,推理内容会被保留。即使推理痕迹被删除,工具调用历史和结果也会保留在上下文中。

冷启动阶段,DeepSeek-V3.2团队采用了巧妙的prompt设计。

团队通过精心设计的系统提示,让模型学会在推理过程中自然地插入工具调用。

比如在处理编程竞赛题目时,系统会明确要求模型先思考再给出答案,并用特殊标签标记推理路径。

最硬核的是团队开发了一个自动环境合成pipeline,生成了1827个任务导向的环境和85000个复杂提示。

以旅行规划为例,模型需要在满足各种约束条件下规划三天的行程,包括不重复城市、根据酒店价格调整餐厅和景点预算等复杂逻辑。

虽然在巨大的组合空间中找到满足所有约束的方案很困难,但验证给定方案是否满足约束相对简单,这种”难解易验”的特性非常适合RL训练。

在代码Agent方面,团队从GitHub挖掘了数百万个issue-PR对,经过严格筛选和自动环境构建,成功搭建了数万个可执行的软件问题解决环境,涵盖Python、Java、JavaScript等多种语言。

搜索Agent则采用多Agentpipeline生成训练数据,先从大规模网络语料中采样长尾实体,再通过问题构建、答案生成和验证等步骤产生高质量数据。

评测结果显示,DeepSeek-V3.2在SWE-Verified上达到73.1%的解决率,在Terminal Bench 2.0上准确率46.4%,都大幅超越了现有开源模型。

在MCP-Universe和Tool-Decathlon等工具使用基准测试上,DeepSeek-V3.2也展现出了接近闭源模型的性能。

这些提升,证明了模型能够将推理策略泛化到训练时未见过的Agent场景。

One More Thing

技术报告最后,研究人员坦诚地指出了一些局限性。

由于总训练FLOPs较少,DeepSeek-V3.2的世界知识广度仍落后于领先的闭源模型。

Token效率也是个挑战。通常情况下,本次上新的两个模型需要生成更长的轨迹,才能达到Gemini-3.0-Pro的输出质量。

但团队发话了,这些都是未来版本的改进方向。

不过——

DeepSeek啊DeepSeek,我们心心念念的R2,什么时候给抬上来啊!!!!

 时事1:乐橙ag

  12月27日,香港大埔火灾已致151人遇难 30多人失联,从一季度的市场情况来看,人均消费在二三百元的中端餐饮日子确实不那么好过。近日,一家人均消费约为320元的海鲜餐厅相关负责人告诉记者:“我们门店以前一个月能做350万左右的营业额,现在只能做到250万元。”另一家人均消费约为222元的苏浙菜员工则表示:“生意比去年下滑20%。”甚至还有一家人均消费约为276元的私营浙菜馆老板表示:“我们马上倒闭了。”,游戏厅打鱼游戏。

  12月27日,应急管理部调度连霍高速交通事故 派出工作组赶赴现场指导处置,这三起枪击事件的受害者,都是年轻人。一位16岁的非裔男孩敲错门,被白人户主开枪打伤;一位20岁的女子走错车道,惨遭枪杀;还有年轻的拉拉队员因为上错车,被人开枪打成重伤。,bc体育哪里有玩,9号赌城,优德体育网站。

 时事2:下载炸金花三张牌

  12月27日,铸牢中华民族共同体意识丨凡人善举耀天山,为全力抗旱保夏种,山东自5月29日就启动了抗旱Ⅳ级应急响应,加强旱情监测,统筹配置黄河水、长江水及当地水资源的同时,强化应急引水,目前已调增应急引黄指标4.11亿立方米。山东还加强灌溉技术指导,省、市、县三级水利部门累计派出175个工作组,下沉工程、田间一线,指导当地充分利用水库、河道、机井等一切可利用的水源,抗旱抢浇,造墒播种。,正规pg电子游戏,uc8体育平台,188体育比分直播吧。

  12月27日,包银高铁开通运营 京兰通道实现全线贯通,4月7日,遵义市人民政府发布的《遵义市网络预约出租汽车经营服务管理办法(修订)》中,也将出租车驾驶员的年龄限制在60周岁以下。,正规ag平台有哪些,和记app下载,世界杯国外赌球网站。

 时事3:手机版牛牛

  12月27日,中国、瑞典医学专家团队携手发布全球首个《婴儿前庭功能筛查国际专家共识》,泽连斯基8日晚在与马克龙和朔尔茨举行的联合新闻发布会上再次呼吁称,法国和德国可以向乌克兰提供主战坦克、现代战斗机和远程导弹,以及可在与俄罗斯的战斗中“改变游戏规则” 的导弹。,百苑国际,hth华体会app链接,火狐平台app。

  12月27日,秘鲁山体滑坡已致13人死亡,昊海生科表示,公司通过投资标的公司,并获取标的公司产品在中国境内经销权,切入生物羊膜这一高价值医疗器械赛道,有效补充了公司现有的产品组合,拓展眼科与骨科领域的业务覆盖。,188体育入口,澳门尼斯尼网址,365bet安卓版。

 时事4:od体育最新版下载

  12月27日,警惕“境外高薪”陷阱 河南边检打击电信诈骗等各类跨境违法犯罪活动,过去3小时,广东省深圳市南山区和宝安区(石岩、西乡、新安街道)累计雨量已达暴雨,预计强降雨还将持续1至2小时,深圳市气象台2024年6月14日8时59分在上述区域发布暴雨橙色预警信号,深圳市进入暴雨防御状态。,bet登录看不见官网,百家乐软件,二八杠下载。

  12月27日,香港法律周2025开幕 聚焦法律科技及大湾区协作等,以北京为例,今年“五一”假期期间,记者走访海淀某新盘项目。一名房产中介对记者表示:“这处新房单价较低,但得房率不占优势,在76%左右;旁边的次新房得房率约85%。按照新房8.2万元/平方米计算,相当于买100平方米的三居,要花近200万在公摊面积上。”,爱体育官网登录入口,鸭脖体育娱乐地址,线上电子游戏。

责编:埃德蒙兹

审核:切尼

责编:孟庆云

相关推荐 换一换