网易首页 > 网易号 > 正文 申请入驻

微软新款Maia 300:167千瓦机架集成96颗芯片,token 效率提升40%

0
分享至

微软计划从 2027 年开始部署其自研 Maia 芯片,规模达数吉瓦。



微软计划摆脱对英伟达的依赖,于 2027 年部署其下一代 Maia 300 AI 加速器,目标是每兆瓦 token 数比领先的基于 GPU 的系统高出 40%。该芯片将为微软不断扩展的 AI 基础设施提供动力,其 96 个加速器的机架配置旨在实现高达前代 7 倍的 token 吞吐量。

这一发布标志着微软在构建用于大规模 AI 推理的定制芯片方面又迈出一步。其 Maia 200 加速器已经承担生产工作负载,包括 Microsoft Copilot。微软预计 GitHub Copilot 和 Microsoft Foundry 将在 2026 年底前采用该硬件。

Maia 300 采用系统级方法来提升推理效率。其架构面向内存密集型工作负载、长上下文推理,以及跨多步骤执行复杂任务的 AI 智能体。

内存带宽驱动设计

Maia 300 将八个 HBM4 内存堆栈与每秒 18 TB 的峰值带宽搭配。系统在 950 瓦热设计功耗范围内运行,以满足大型 AI 模型日益增长的内存需求。

微软还采用了多芯粒设计,将计算、内存控制器和输入/输出功能分离。计算芯粒采用台积电的 N2P 制造工艺,旨在提升每瓦性能。

该加速器还支持增强的 MXFP4 低精度计算。这种方法降低了模型计算和键值缓存存储的内存需求。这些节省可帮助系统在相同功耗预算内支持更长的上下文窗口并服务更多请求。

软件在该设计中发挥重要作用。微软的软件定义数据流架构旨在让数据靠近计算资源,减少不必要的传输。AI 辅助的内核优化也有助于提高不同工作负载下的硬件利用率。

网络连接 96 个加速器

Maia 300 将其架构从单个芯片扩展到整个机架。每种配置在 167 千瓦功耗范围内组合 96 个加速器。

微软列出该机架高速纵向扩展域内总计 27.6 TB 的 HBM 容量和每秒 1.7 PB 的聚合内存带宽。这一组合面向更大的推理工作负载,以及单次部署内更多同时进行的 AI 交互。

定制网络通过针对张量并行优化的高带宽链路连接加速器。一个面向 AI 的传输层使用基于以太网的基础设施,支持跨加速器和跨机架的通信。该设计旨在扩展工作负载,而不把网络视为单独的瓶颈。

微软表示,Maia 300 每兆瓦应能提供比领先的基于 GPU 的系统多 40% 的 token。其预计的机架级吞吐量也比 Maia 200 大幅提升,不过该公司尚未详细说明这些比较所依据的独立基准测试。

Maia 200 扩大生产

微软已在美国、欧洲和澳大利亚部署 Maia 200。该公司报告称,与领先的 GPU 基础设施相比,Teams、Copilot 和 Cowork 体验中的内置 AI 功能每瓦 token 数最高可达到后者的 1.7 倍。

现有加速器运行 OpenAI 模型、微软的 MAI 模型以及开源模型系列。微软利用这些服务的性能数据来指导硬件开发并优化真实工作负载。

Maia 300 将支持微软的模型开发工作、云端推理和基于智能体的编码工具。微软还预计该硬件将帮助扩展其临床 AI 助手 Dragon Copilot。

生产部署将于 2027 年开始。微软的长期计划要求从当年开始进行数吉瓦级的 Maia 部署,将定制芯片定位为其不断扩展的 AI 计算能力的重要组成部分。

如果朋友们喜欢,敬请关注“知新了了”!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
我大使火力全开,当面对菲抛出七连问,马科斯改口了,将坚持访华

我大使火力全开,当面对菲抛出七连问,马科斯改口了,将坚持访华

麓谷隐士
2026-10-21 00:10:04
76人掀翻卫冕冠军勒布朗新东家首秀14+9+7,布朗19分8板

76人掀翻卫冕冠军勒布朗新东家首秀14+9+7,布朗19分8板

湖人崛起
2026-10-21 10:00:52
“超级牛散”章建平大幅加仓,与葛卫东看中同一公司!答案就藏在AI算力里!

“超级牛散”章建平大幅加仓,与葛卫东看中同一公司!答案就藏在AI算力里!

证券市场周刊
2026-10-21 21:06:25
问界汽车回应起火:线路短路及油液泄露导致起火

问界汽车回应起火:线路短路及油液泄露导致起火

鞭牛士
2026-10-21 15:23:05
近6万兵力集结,美舰冲闯中国南沙群岛仙宾礁附近海域,中方回应

近6万兵力集结,美舰冲闯中国南沙群岛仙宾礁附近海域,中方回应

墨兰史书
2026-10-21 19:00:04
慈禧深爱的稀世珍珠被日本皇室展出,我国多次索要均被拒绝!

慈禧深爱的稀世珍珠被日本皇室展出,我国多次索要均被拒绝!

凉州辞
2026-10-21 10:15:05
985招牌留不住白大褂:曝东南大学医学生流失率43.6%,影像专业七成转走

985招牌留不住白大褂:曝东南大学医学生流失率43.6%,影像专业七成转走

秋风妃
2026-10-16 23:53:55
《街头霸王》真人电影春丽特写洗澡戏 全身一览无余

《街头霸王》真人电影春丽特写洗澡戏 全身一览无余

3DM游戏
2026-10-21 07:50:11
2.1亿真不贵!乔治你太狠,换队第一场,就创造80年NBA历史纪录

2.1亿真不贵!乔治你太狠,换队第一场,就创造80年NBA历史纪录

大西体育
2026-10-21 09:22:59
51%对49%!巴西大选次轮决战,卢拉冲刺翻盘

51%对49%!巴西大选次轮决战,卢拉冲刺翻盘

时尚的弄潮
2026-10-21 08:03:11
陕西一辆问界M9碰撞后起火 司机已遇难

陕西一辆问界M9碰撞后起火 司机已遇难

爆角追踪
2026-10-21 14:19:55
网传社保调整的大幕已经拉开,评论区一片哗然..

网传社保调整的大幕已经拉开,评论区一片哗然..

慧翔百科
2026-10-20 17:39:42
越南向乌克兰提供新援助!俄军珍贵的龙卷风火箭系统遭击毁

越南向乌克兰提供新援助!俄军珍贵的龙卷风火箭系统遭击毁

项鹏飞
2026-10-21 16:59:36
一夜之间,宋佳把内娱得罪光了

一夜之间,宋佳把内娱得罪光了

最人物
2026-10-21 16:15:26
蛇冬眠的时候有多危险?一个专业捕蛇人坦言:90% 的人根本想不到,蛇进入冬眠,它就可能变成老鼠的一顿大餐

蛇冬眠的时候有多危险?一个专业捕蛇人坦言:90% 的人根本想不到,蛇进入冬眠,它就可能变成老鼠的一顿大餐

扶苏聊历史
2026-10-21 16:34:58
欧冠3连冠悬了?巴黎官宣3大主力受伤!1.4亿巨星韧带断裂+赛季报销

欧冠3连冠悬了?巴黎官宣3大主力受伤!1.4亿巨星韧带断裂+赛季报销

我爱英超
2026-10-21 17:20:33
17岁少年手持菜刀威胁28岁舅妈:“让我睡一次,不然死给你看!”

17岁少年手持菜刀威胁28岁舅妈:“让我睡一次,不然死给你看!”

四海神君
2026-10-21 12:00:04
亚历山大32分5板雷霆战胜马刺开门红,文班亚马13投1中仅12分

亚历山大32分5板雷霆战胜马刺开门红,文班亚马13投1中仅12分

湖人崛起
2026-10-21 12:24:38
被牺牲的一代人

被牺牲的一代人

枫冷慕诗
2026-10-21 11:47:32
中国还有14亿人,为什么“预期人口”只有2.64亿?

中国还有14亿人,为什么“预期人口”只有2.64亿?

育娲人口智库
2026-10-21 18:23:08
2026-10-22 01:56:49
知新了了
知新了了
专注于新知、科普的传播
6700文章数 2297关注度
往期回顾 全部

科技要闻

SpaceX收入暴涨!马斯克:这事"不再不可能"

头条要闻

21岁男子稻城亚丁高反死亡 其姐与报警人聊天记录披露

头条要闻

21岁男子稻城亚丁高反死亡 其姐与报警人聊天记录披露

体育要闻

“我,对得起天津足球!”

娱乐要闻

张柏芝自曝五点陪伴儿子 谢霆锋尴尬了

财经要闻

昔日彩电一哥缘何在今天被挤下牌桌?

汽车要闻

纯电/插混动力+乾崑智驾 北汽星钽5X预售价13.99万起

态度原创

教育
时尚
旅游
本地
数码

教育要闻

直到孩子上了高中才发现:我曾坚决反对“超前学”,错得有多离谱

50岁的马伊琍,迎来了最佳赏味期

旅游要闻

延庆将分阶段推进长城大景区建设

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

数码要闻

康佳退市!昔日彩电一哥缘何在今天被挤下牌桌?

无障碍浏览 进入关怀版