您的位置: 首页 > 实时讯息 >

比DeepSeek R2先发!阿里巴巴Qwen3上新8款,登顶全球最强开源模型

0次浏览     发布时间:2025-04-29 07:14:00    

Qwen3千呼万唤始出来,直接登顶全球最强开源模型。

4月29日凌晨,阿里巴巴开源新一代通义千问模型Qwen3(简称千问3),旗舰模型Qwen3-235B-A22B参数量仅为DeepSeek-R1的1/3,总参数量235B,激活仅需22B,成本大幅下降,性能全面超越R1、OpenAI-o1等全球顶尖模型,登顶全球最强开源模型。

千问3预训练数据量达36T ,并在后训练阶段多轮强化学习,将快思考模式和慢思考模式无缝整合,同时在推理、指令遵循、工具调用、多语言能力等方面均大幅增强,创下所有国产模型及全球开源模型的性能新高。

千问3共计八款模型,包含2款30B、235B的MoE模型,以及0.6B、1.7B、4B、8B、14B、32B等6款密集模型,每款模型均斩获同尺寸开源模型SOTA(最佳性能)。

其中,千问3的30B参数MoE模型实现了10倍以上的模型性能杠杆提升,仅激活3B就能媲美上代Qwen2.5-32B模型性能;千问3的稠密模型性能继续突破,一半的参数量可实现同样的高性能,如32B版本的千问3模型可跨级超越Qwen2.5-72B性能。

4月是大模型集中发布的一月,OpenAI发布了GPT-4.1 o3、o4 mini系列模型,谷歌Gemini 2.5 Flash Preview混合推理模型上新,豆包也公布了1.5·深度思考模型,其他大模型厂商也开源或者更新了不少模型,业内也传出DeepSeek R2模型即将发布的消息,但目前大部分消息都是捕风捉影。

不论DeepSeek R2发布与否,“先发制人”的千问3,先一步站在大模型“平民化”的真正起点上。

国内首个混合推理思考模型,增强 Agent 能力且支持MCP

千问3模型支持两种思考模式:

  • 慢思考模式:在这种模式下,模型会逐步推理,经过深思熟虑后给出最终答案。这种方法非常适合需要深入思考的复杂问题。
  • 快思考模式:在此模式中,模型提供快速、近乎即时的响应,适用于那些对速度要求高于深度的简单问题。

所有千问3模型都是混合推理模型,这也使其成为国内首个“混合推理模型”,“快思考”与“慢思考”集成进同一个模型,对简单需求可低算力“秒回”答案,对复杂问题可多步骤“深度思考”,大大节省算力消耗。

API可按需设置“思考预算”(即预期最大深度思考的tokens数量),进行不同程度的思考,灵活满足AI应用和不同场景对性能和成本的多样需求。比如,4B模型是手机端的绝佳尺寸;8B可在电脑和汽车端侧丝滑部署应用;32B最受企业大规模部署欢迎,有条件的开发者也可轻松上手。

在奥数水平的AIME25测评中,千问3斩获81.5分,刷新开源纪录;在考察代码能力的LiveCodeBench评测中,千问3突破70分大关,表现甚至超过Grok3;在评估模型人类偏好对齐的ArenaHard测评中,千问3以95.6分超越OpenAI-o1及DeepSeek-R1。

性能大幅提升的同时,千问3的部署成本还大幅下降,仅需4张H20即可部署千问3满血版,显存占用仅为性能相近模型的三分之一。

千问3模型还支持 119 种语言和方言。目前这些模型均在 Apache 2.0 许可下开源,现已在 Hugging Face、ModelScope 和 Kaggle 等平台上开放使用。

阿里巴巴也推荐使用 SGLang 和 vLLM 等框架部署,而对于本地使用,Ollama、LMStudio、MLX、llama.cpp 和KTransformers 等工具也支持。

千问3也考虑了智能体Agent和大模型应用落地。在评估模型Agent能力的BFCL评测中,千问3创下70.8的新高,超越Gemini2.5-Pro、OpenAI-o1等顶尖模型,将大幅降低Agent调用工具的门槛。

同时,千问3原生支持MCP协议,并具备强大的工具调用(function calling)能力,结合封装了工具调用模板和工具调用解析器的Qwen-Agent 框架,将大大降低编码复杂性,实现高效的手机及电脑Agent操作等任务。

36万亿token预训练,四阶段后训练

在预训练方面,Qwen3 的数据集相比 Qwen2.5 有了显著扩展。Qwen2.5是在 18 万亿个 token 上进行预训练的,而Qwen3 使用的数据量几乎是其两倍,达到了约 36 万亿个 token。

为了构建这个庞大的数据集,千问团队不仅从网络上收集数据,还从 PDF 文档中提取信息。例如使用 Qwen2.5-VL 从这些文档中提取文本,并用 Qwen2.5 改进提取内容的质量。

为了增加数学和代码数据的数量,千问团队利用 Qwen2.5-Math 和 Qwen2.5-Coder 这两个数学和代码领域的专家模型合成数据,合成了包括教科书、问答对以及代码片段等多种形式的数据。

预训练过程分为三个阶段。在第一阶段(S1),模型在超过 30 万亿个 token 上进行了预训练,上下文长度为 4K token。这一阶段为模型提供了基本的语言技能和通用知识。

在第二阶段(S2),千问团队通过增加知识密集型数据(如 STEM、编程和推理任务)的比例来改进数据集,随后模型又在额外的 5 万亿个 token 上进行了预训练。

在最后阶段,千问团队使用高质量的长上下文数据将上下文长度扩展到 32K token,确保模型能够有效地处理更长的输入。

由于模型架构的改进、训练数据的增加以及更有效的训练方法,Qwen3 Dense 基础模型的整体性能与参数更多的Qwen2.5基础模型相当。

例如,
Qwen3-1.7B/4B/8B/14B/32B-Base 分别与
Qwen2.5-3B/7B/14B/32B/72B-Base 表现相当。特别是在 STEM、编码和推理等领域,Qwen3 Dense 基础模型的表现甚至超过了更大规模的 Qwen2.5 模型。

对于 Qwen3 MoE 基础模型,它们在仅使用 10% 激活参数的情况下达到了与 Qwen2.5 Dense 基础模型相似的性能。这带来了训练和推理成本的显著节省。

后训练方面,为了开发能够同时具备思考推理和快速响应能力的混合模型,千问团队实施了一个四阶段的训练流程。该流程包括:(1)长思维链冷启动,(2)长思维链强化学习,(3)思维模式融合,以及(4)通用强化学习。

在第一阶段,先使用多样的的长思维链数据对模型进行了微调,涵盖了数学、代码、逻辑推理和 STEM 问题等多种任务和领域。这一过程旨在为模型配备基本的推理能力。

第二阶段的重点是大规模强化学习,利用基于规则的奖励来增强模型的探索和钻研能力。

在第三阶段,在一份包括长思维链数据和常用的指令微调数据的组合数据上对模型进行微调,将非思考模式整合到思考模型中,确保了推理和快速响应能力的无缝结合。

在第四阶段,在包括指令遵循、格式遵循和 Agent 能力等在内的 20 多个通用领域的任务上应用了强化学习,以进一步增强模型的通用能力并纠正不良行为。

目前个人用户可立即通过通义APP直接体验千问3,夸克也即将全线接入千问3。阿里通义已开源200余个模型,全球下载量超3亿次,千问衍生模型数超10万个,已超越美国Llama,成为全球第一开源模型。(本文首发于钛媒体APP,作者 | 张帅,编辑 | 盖虹达)

相关文章

2025-04-30 14:18:00 百万奖金!郑州航空港区向全球发出邀请

【大河财立方 记者 段伟朵 程帅星 文图】4月30日,第二届郑州航空港全球创业大赛暨全民创业季发布会举行。大河财立方记者现场获悉,郑州航空港区正打造“INNOPORT创业郑州航空港”品牌,涵盖全球创业大赛、全球创业者大会、全民创业季三大活动。会上,郑州航空港区还发布了《加快构建一流创业生态,建设“青

2025-04-30 11:20:00 “数字中国”10周年!中国数字经济加速跑

“数字中国”10周年,中国数字经济“成绩单”亮眼!2024年,我国数据生产总量同比增长25%;数字经济核心产业增加值占GDP比重10%左右;算力总规模达到280EFLOPS,建成5G基站425.1万个……2025年恰逢推进数字中国建设10周年。4月29日在福建福州开幕的第八届数字中国建设峰会上,一连

2025-04-30 10:35:00 移动互联网未成年人模式正式发布

4月29日上午,移动互联网未成年人模式在第八届数字中国建设峰会主论坛上正式发布。立足未成年人网络保护现实需要、回应社会各界期待关切,国家网信办持续指导国内软硬件企业共同推进移动互联网未成年人模式(以下简称“未成年人模式”)建设工作。今年4月,未成年人模式突破一系列技术瓶颈,实现了全方位优化和系统性升

2025-04-30 08:02:00 AI在网络舆情治理中的应用与挑战

作者:龚程 庄营 赵永宝 王瑾来源:《全媒体探索》2025年3月号AI既能成为舆情信息监测、数据搜集、分析研判、应对处置的“快捷键”,也是虚假信息、算法偏见、伦理争议、舆论操控等的“催化剂”。舆情工作场景中如何将AI这把“双刃剑”用得恰到好处?本文以半岛都市报清渠AI在舆情产业中的应用实践为例,探讨

2025-04-29 22:16:00 第三届闽港数字经济合作论坛举办 共拓数字经济新局

中新网福州4月29日电 (郑江洛)第三届闽港数字经济合作论坛暨A.I³探索大会29日在福州举行,闽港与会人士共论数字经济和人工智能合作,为区域协同发展注入全新活力。论坛启动仪式上,福州市人民政府党组成员,福州新区党工委副书记、管委会主任兰文表示,闽港地缘相接、商缘相连、人缘相亲,以人工智能推进数字经

2025-04-29 17:20:00 教育部:对多所国外院校学历学位认证加强审查

4月28日,教育部留学服务中心发布《关于对部分国外院校学历学位认证加强认证审查的公告(七)》(下文简称《公告》)。对多所认证数据出现显著异常的国外院校(项目)的相关认证申请启动加强审查程序。《公告》称,为维护留学人员合法权益,维持留学市场正常秩序,该中心持续关注认证数据及相关举报情况。近期,下列院校

2025-04-29 12:45:00 苏能股份:“数智”融新 “链”接未来

巨幕之上,柱状图、饼状图、曲线图错落有致,实时数据流奔腾不息,算法模型精准解析,轻点鼠标即可实现数据“穿透”溯源,从宏观态势到微观交易明细都能尽收眼底……这正是苏能股份物资供销分公司供应链大数据中心呈现的数字化图景。多维度、多层级、细颗粒度的可视化供应链业务巨幕带来的视觉冲击令人震撼。该公司是如何以

2025-04-29 07:14:00 比DeepSeek R2先发!阿里巴巴Qwen3上新8款,登顶全球最强开源模型

Qwen3千呼万唤始出来,直接登顶全球最强开源模型。4月29日凌晨,阿里巴巴开源新一代通义千问模型Qwen3(简称千问3),旗舰模型Qwen3-235B-A22B参数量仅为DeepSeek-R1的1/3,总参数量235B,激活仅需22B,成本大幅下降,性能全面超越R1、OpenAI-o1等全球顶尖模