您的位置: 首页 > 实时讯息 >

比DeepSeek R2先发!阿里巴巴Qwen3上新8款,登顶全球最强开源模型

0次浏览     发布时间:2025-04-29 07:14:00    

Qwen3千呼万唤始出来,直接登顶全球最强开源模型。

4月29日凌晨,阿里巴巴开源新一代通义千问模型Qwen3(简称千问3),旗舰模型Qwen3-235B-A22B参数量仅为DeepSeek-R1的1/3,总参数量235B,激活仅需22B,成本大幅下降,性能全面超越R1、OpenAI-o1等全球顶尖模型,登顶全球最强开源模型。

千问3预训练数据量达36T ,并在后训练阶段多轮强化学习,将快思考模式和慢思考模式无缝整合,同时在推理、指令遵循、工具调用、多语言能力等方面均大幅增强,创下所有国产模型及全球开源模型的性能新高。

千问3共计八款模型,包含2款30B、235B的MoE模型,以及0.6B、1.7B、4B、8B、14B、32B等6款密集模型,每款模型均斩获同尺寸开源模型SOTA(最佳性能)。

其中,千问3的30B参数MoE模型实现了10倍以上的模型性能杠杆提升,仅激活3B就能媲美上代Qwen2.5-32B模型性能;千问3的稠密模型性能继续突破,一半的参数量可实现同样的高性能,如32B版本的千问3模型可跨级超越Qwen2.5-72B性能。

4月是大模型集中发布的一月,OpenAI发布了GPT-4.1 o3、o4 mini系列模型,谷歌Gemini 2.5 Flash Preview混合推理模型上新,豆包也公布了1.5·深度思考模型,其他大模型厂商也开源或者更新了不少模型,业内也传出DeepSeek R2模型即将发布的消息,但目前大部分消息都是捕风捉影。

不论DeepSeek R2发布与否,“先发制人”的千问3,先一步站在大模型“平民化”的真正起点上。

国内首个混合推理思考模型,增强 Agent 能力且支持MCP

千问3模型支持两种思考模式:

  • 慢思考模式:在这种模式下,模型会逐步推理,经过深思熟虑后给出最终答案。这种方法非常适合需要深入思考的复杂问题。
  • 快思考模式:在此模式中,模型提供快速、近乎即时的响应,适用于那些对速度要求高于深度的简单问题。

所有千问3模型都是混合推理模型,这也使其成为国内首个“混合推理模型”,“快思考”与“慢思考”集成进同一个模型,对简单需求可低算力“秒回”答案,对复杂问题可多步骤“深度思考”,大大节省算力消耗。

API可按需设置“思考预算”(即预期最大深度思考的tokens数量),进行不同程度的思考,灵活满足AI应用和不同场景对性能和成本的多样需求。比如,4B模型是手机端的绝佳尺寸;8B可在电脑和汽车端侧丝滑部署应用;32B最受企业大规模部署欢迎,有条件的开发者也可轻松上手。

在奥数水平的AIME25测评中,千问3斩获81.5分,刷新开源纪录;在考察代码能力的LiveCodeBench评测中,千问3突破70分大关,表现甚至超过Grok3;在评估模型人类偏好对齐的ArenaHard测评中,千问3以95.6分超越OpenAI-o1及DeepSeek-R1。

性能大幅提升的同时,千问3的部署成本还大幅下降,仅需4张H20即可部署千问3满血版,显存占用仅为性能相近模型的三分之一。

千问3模型还支持 119 种语言和方言。目前这些模型均在 Apache 2.0 许可下开源,现已在 Hugging Face、ModelScope 和 Kaggle 等平台上开放使用。

阿里巴巴也推荐使用 SGLang 和 vLLM 等框架部署,而对于本地使用,Ollama、LMStudio、MLX、llama.cpp 和KTransformers 等工具也支持。

千问3也考虑了智能体Agent和大模型应用落地。在评估模型Agent能力的BFCL评测中,千问3创下70.8的新高,超越Gemini2.5-Pro、OpenAI-o1等顶尖模型,将大幅降低Agent调用工具的门槛。

同时,千问3原生支持MCP协议,并具备强大的工具调用(function calling)能力,结合封装了工具调用模板和工具调用解析器的Qwen-Agent 框架,将大大降低编码复杂性,实现高效的手机及电脑Agent操作等任务。

36万亿token预训练,四阶段后训练

在预训练方面,Qwen3 的数据集相比 Qwen2.5 有了显著扩展。Qwen2.5是在 18 万亿个 token 上进行预训练的,而Qwen3 使用的数据量几乎是其两倍,达到了约 36 万亿个 token。

为了构建这个庞大的数据集,千问团队不仅从网络上收集数据,还从 PDF 文档中提取信息。例如使用 Qwen2.5-VL 从这些文档中提取文本,并用 Qwen2.5 改进提取内容的质量。

为了增加数学和代码数据的数量,千问团队利用 Qwen2.5-Math 和 Qwen2.5-Coder 这两个数学和代码领域的专家模型合成数据,合成了包括教科书、问答对以及代码片段等多种形式的数据。

预训练过程分为三个阶段。在第一阶段(S1),模型在超过 30 万亿个 token 上进行了预训练,上下文长度为 4K token。这一阶段为模型提供了基本的语言技能和通用知识。

在第二阶段(S2),千问团队通过增加知识密集型数据(如 STEM、编程和推理任务)的比例来改进数据集,随后模型又在额外的 5 万亿个 token 上进行了预训练。

在最后阶段,千问团队使用高质量的长上下文数据将上下文长度扩展到 32K token,确保模型能够有效地处理更长的输入。

由于模型架构的改进、训练数据的增加以及更有效的训练方法,Qwen3 Dense 基础模型的整体性能与参数更多的Qwen2.5基础模型相当。

例如,
Qwen3-1.7B/4B/8B/14B/32B-Base 分别与
Qwen2.5-3B/7B/14B/32B/72B-Base 表现相当。特别是在 STEM、编码和推理等领域,Qwen3 Dense 基础模型的表现甚至超过了更大规模的 Qwen2.5 模型。

对于 Qwen3 MoE 基础模型,它们在仅使用 10% 激活参数的情况下达到了与 Qwen2.5 Dense 基础模型相似的性能。这带来了训练和推理成本的显著节省。

后训练方面,为了开发能够同时具备思考推理和快速响应能力的混合模型,千问团队实施了一个四阶段的训练流程。该流程包括:(1)长思维链冷启动,(2)长思维链强化学习,(3)思维模式融合,以及(4)通用强化学习。

在第一阶段,先使用多样的的长思维链数据对模型进行了微调,涵盖了数学、代码、逻辑推理和 STEM 问题等多种任务和领域。这一过程旨在为模型配备基本的推理能力。

第二阶段的重点是大规模强化学习,利用基于规则的奖励来增强模型的探索和钻研能力。

在第三阶段,在一份包括长思维链数据和常用的指令微调数据的组合数据上对模型进行微调,将非思考模式整合到思考模型中,确保了推理和快速响应能力的无缝结合。

在第四阶段,在包括指令遵循、格式遵循和 Agent 能力等在内的 20 多个通用领域的任务上应用了强化学习,以进一步增强模型的通用能力并纠正不良行为。

目前个人用户可立即通过通义APP直接体验千问3,夸克也即将全线接入千问3。阿里通义已开源200余个模型,全球下载量超3亿次,千问衍生模型数超10万个,已超越美国Llama,成为全球第一开源模型。(本文首发于钛媒体APP,作者 | 张帅,编辑 | 盖虹达)

相关文章

2025-06-13 01:24:00 全球因战争流离失所人数公布,排名第一的你想不到

据新华社报道,联合国难民署12日发布的最新《全球趋势报告》显示,截至今年4月底,全球因战争、暴力和迫害行为而流离失所的人数达1.221亿,较去年同期的1.2亿再次上升,这一数字已连续十年增长。报告显示,截至2024年年底,被迫在本国境内流离失所的人数达到7350万人,与此同时,被迫逃离本国的难民人数

2025-06-12 16:34:00 菜鸟与全球糖果巨头不凡帝范梅勒达成合作

IT之家 6 月 12 日消息,菜鸟集团今日宣布与全球糖果行业巨头不凡帝范梅勒(Perfetti Van Melle)达成供应链合作,双方首个落地项目 —— 西安智慧糖果仓已正式投入运营。IT之家从官方介绍获悉,位于西安的智慧糖果仓占地 3800 余平方米,是菜鸟为不凡帝范梅勒量身定制的 B2B 仓

2025-06-12 15:29:00 南昌多维发力着力构建全域安全防线

全面提升基层应急管理能力  近日,南昌市安全生产和防灾减灾救灾委员会办公室印发《关于推进落实〈关于进一步提升基层应急管理能力的若干措施〉的工作提示函》,从责任体系、风险防控、指挥机制、救援保障等多个维度对基层应急管理工作进行全面部署,着力构建全域安全防线。  在健全应急管理责任体系方面,我市将重点推

2025-06-12 11:13:00 深圳累计开通无人机航线近300条 | 直击发布会

顶端新闻记者 聂辉 北京报道6月12日上午,国新办举行新闻发布会,介绍《关于深入推进深圳综合改革试点深化改革创新扩大开放的意见》有关情况。人工智能、低空经济作为新质生产力的典型代表,已经成为全球竞逐的产业新蓝海。深圳把人工智能、低空经济作为战略性新兴产业的重点集群加以培育,全面做好技术创新、产业集聚

2025-06-09 17:12:00 联化科技8天6板股价翻倍,从农药炒到“创新药”靠谱吗?

一场化工事故引发的K胺涨价风暴,推动联化科技成为资本市场“妖股”。自5月23日起,联化科技(002250.SZ)股价在10个交易日内翻倍,8天录得6个涨停板。6月9日,因创新药概念,联化科技早盘再次强势封板,股价报收14.08元。2024年联化科技营收同比下滑11.88%,靠医药业务毛利率大幅增长勉

2025-06-06 16:28:00 野生菌中毒风险地图来了!保山5县(市、区)属于……

近日云南省疾病预防控制中心公布2025年云南省野生菌中毒风险分级表全省共划定野生菌中毒高风险地区7个中风险地区49个低风险地区73个云南是全球野生菌品种和数量较多地区,世界已知野生食用菌2500余种,云南有900余种,约占全球种类的36%,占全国种类的90%;全国已知有毒野生菌500余种,云南有20

2025-06-05 11:36:00 二连浩特公路口岸首开“跨境电商+TIR”货运新模式

6月3日,两辆满载跨境电商商品的TIR货车从二连浩特公路口岸驶出,经蒙古国抵达莫斯科,全程6800公里。这也标志着“跨境电商零售+国际公路运输”的创新模式正式落地二连浩特口岸。该批商品大多来自国内电商平台的零散订单,货物总重15.9 吨,包含摆件、工具套件、时尚帽子等中小件商品。近年来,随着中欧跨境

2025-06-05 11:00:00 金斯瑞生物科技(01548)上涨3.06%,报13.48元/股

6月5日,金斯瑞生物科技(01548)盘中上涨3.06%,截至10:54,报13.48元/股,成交3.01亿元。金斯瑞生物科技股份有限公司是全球的生命科学研发与生产服务提供商,以DNA合成技术为基础,主要服务包含生命科学服务及产品业务、生物制剂合约开发及生产、工业合成产品业务、以及综合性全球细胞疗法