网易首页 > 网易号 > 正文 申请入驻

微软新款Maia 300:167千瓦机架集成96颗芯片,token 效率提升40%

0
分享至

微软计划从 2027 年开始部署其自研 Maia 芯片,规模达数吉瓦。



微软计划摆脱对英伟达的依赖,于 2027 年部署其下一代 Maia 300 AI 加速器,目标是每兆瓦 token 数比领先的基于 GPU 的系统高出 40%。该芯片将为微软不断扩展的 AI 基础设施提供动力,其 96 个加速器的机架配置旨在实现高达前代 7 倍的 token 吞吐量。

这一发布标志着微软在构建用于大规模 AI 推理的定制芯片方面又迈出一步。其 Maia 200 加速器已经承担生产工作负载,包括 Microsoft Copilot。微软预计 GitHub Copilot 和 Microsoft Foundry 将在 2026 年底前采用该硬件。

Maia 300 采用系统级方法来提升推理效率。其架构面向内存密集型工作负载、长上下文推理,以及跨多步骤执行复杂任务的 AI 智能体。

内存带宽驱动设计

Maia 300 将八个 HBM4 内存堆栈与每秒 18 TB 的峰值带宽搭配。系统在 950 瓦热设计功耗范围内运行,以满足大型 AI 模型日益增长的内存需求。

微软还采用了多芯粒设计,将计算、内存控制器和输入/输出功能分离。计算芯粒采用台积电的 N2P 制造工艺,旨在提升每瓦性能。

该加速器还支持增强的 MXFP4 低精度计算。这种方法降低了模型计算和键值缓存存储的内存需求。这些节省可帮助系统在相同功耗预算内支持更长的上下文窗口并服务更多请求。

软件在该设计中发挥重要作用。微软的软件定义数据流架构旨在让数据靠近计算资源,减少不必要的传输。AI 辅助的内核优化也有助于提高不同工作负载下的硬件利用率。

网络连接 96 个加速器

Maia 300 将其架构从单个芯片扩展到整个机架。每种配置在 167 千瓦功耗范围内组合 96 个加速器。

微软列出该机架高速纵向扩展域内总计 27.6 TB 的 HBM 容量和每秒 1.7 PB 的聚合内存带宽。这一组合面向更大的推理工作负载,以及单次部署内更多同时进行的 AI 交互。

定制网络通过针对张量并行优化的高带宽链路连接加速器。一个面向 AI 的传输层使用基于以太网的基础设施,支持跨加速器和跨机架的通信。该设计旨在扩展工作负载,而不把网络视为单独的瓶颈。

微软表示,Maia 300 每兆瓦应能提供比领先的基于 GPU 的系统多 40% 的 token。其预计的机架级吞吐量也比 Maia 200 大幅提升,不过该公司尚未详细说明这些比较所依据的独立基准测试。

Maia 200 扩大生产

微软已在美国、欧洲和澳大利亚部署 Maia 200。该公司报告称,与领先的 GPU 基础设施相比,Teams、Copilot 和 Cowork 体验中的内置 AI 功能每瓦 token 数最高可达到后者的 1.7 倍。

现有加速器运行 OpenAI 模型、微软的 MAI 模型以及开源模型系列。微软利用这些服务的性能数据来指导硬件开发并优化真实工作负载。

Maia 300 将支持微软的模型开发工作、云端推理和基于智能体的编码工具。微软还预计该硬件将帮助扩展其临床 AI 助手 Dragon Copilot。

生产部署将于 2027 年开始。微软的长期计划要求从当年开始进行数吉瓦级的 Maia 部署,将定制芯片定位为其不断扩展的 AI 计算能力的重要组成部分。

如果朋友们喜欢,敬请关注“知新了了”!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
100年前李鸿章告诫后世:若想中国无后患,必先灭其国,是哪国?

100年前李鸿章告诫后世:若想中国无后患,必先灭其国,是哪国?

小豫讲故事
2026-10-21 06:00:12
这个孕妇太恶毒,怀孕期间为了满足丈夫的性欲,2013年,她诱骗女孩给丈夫享用

这个孕妇太恶毒,怀孕期间为了满足丈夫的性欲,2013年,她诱骗女孩给丈夫享用

法网恢恢
2026-10-08 20:42:16
15999元起的iPhone Duo,微信还没适配好

15999元起的iPhone Duo,微信还没适配好

我是一个养虾人
2026-10-21 22:55:39
美国没想到,维密大秀请了一堆欧美明星,却被个中国女星抢了风头

美国没想到,维密大秀请了一堆欧美明星,却被个中国女星抢了风头

观史搜寻着
2026-10-21 06:07:14
爆料!公爵夫人很忙,事业日程排满,无暇陪伴哈里,哈里非常沮丧

爆料!公爵夫人很忙,事业日程排满,无暇陪伴哈里,哈里非常沮丧

艺利森
2026-10-21 08:19:44
比尔盖茨表示:他这辈子犯过最大的错误,就是把原本属于微软的移动生态,拱手让给了安卓

比尔盖茨表示:他这辈子犯过最大的错误,就是把原本属于微软的移动生态,拱手让给了安卓

元气科技馆
2026-10-10 21:56:30
美国大使警告欧洲:动马斯克的频谱,就拿保时捷和LV的真金白银换

美国大使警告欧洲:动马斯克的频谱,就拿保时捷和LV的真金白银换

林子说事
2026-10-20 13:43:01
人形机器人+商业航天概念,4连板个股最新公告

人形机器人+商业航天概念,4连板个股最新公告

数据宝
2026-10-21 23:34:11
动真格!追溯30年履职倒查来了,这4类人要当心!

动真格!追溯30年履职倒查来了,这4类人要当心!

细说职场
2026-10-21 10:17:49
浙江男子喜当爹,亲子鉴定后医生却说:恭喜,三个孩子三个爹

浙江男子喜当爹,亲子鉴定后医生却说:恭喜,三个孩子三个爹

民间精选故事汇
2025-02-11 08:10:03
去了一趟伊朗才发现:原来在伊朗人眼里,中国人是这样的

去了一趟伊朗才发现:原来在伊朗人眼里,中国人是这样的

千秋文化
2026-03-24 21:40:40
2015年,方静客死他乡,11年后,那个诬陷她是间谍的主持人已荣休

2015年,方静客死他乡,11年后,那个诬陷她是间谍的主持人已荣休

小先生笔记
2026-09-21 17:37:33
一个奇怪的社会现象,凡是有退休金的老人,都不愿意和儿女住一起

一个奇怪的社会现象,凡是有退休金的老人,都不愿意和儿女住一起

大熊欢乐坊
2026-09-10 04:47:51
为什么小国都不怕中国?曾有一个伊朗人给出了答案!他表示:是你们中国,中国人太尊重外国,外国人了,也太善良了,太乐善好施了

为什么小国都不怕中国?曾有一个伊朗人给出了答案!他表示:是你们中国,中国人太尊重外国,外国人了,也太善良了,太乐善好施了

扶苏聊历史
2026-10-05 14:13:25
存款大势落定?从2027年1月起,银行存款利率,也许面临3大变化

存款大势落定?从2027年1月起,银行存款利率,也许面临3大变化

白日追梦人
2026-10-21 07:38:39
第一作者承认,新冠疫苗论文造假

第一作者承认,新冠疫苗论文造假

药时空
2026-10-19 18:54:21
黄牛当心了!苹果抓紧供货iPhone Duo 用户们晒订单:有人提前2个多月

黄牛当心了!苹果抓紧供货iPhone Duo 用户们晒订单:有人提前2个多月

快科技
2026-10-20 09:00:38
海底沉睡4万年!澎湖渔网捞出史前巨人,科学界连夜改写结论!

海底沉睡4万年!澎湖渔网捞出史前巨人,科学界连夜改写结论!

小莜读史
2026-09-13 11:13:22
胡歌上海商场瘦到脱相穿亮紫冲锋衣,网友:这是去徒步还是走秀?

胡歌上海商场瘦到脱相穿亮紫冲锋衣,网友:这是去徒步还是走秀?

秋风悲画芯
2026-10-21 14:46:07
黄景瑜未成名地铁旧照,模样普通认不出

黄景瑜未成名地铁旧照,模样普通认不出

喜欢历史的阿繁
2026-10-20 02:15:38
2026-10-22 04:00:49
知新了了
知新了了
专注于新知、科普的传播
6700文章数 2297关注度
往期回顾 全部

科技要闻

SpaceX收入暴涨!马斯克:这事"不再不可能"

头条要闻

21岁男子稻城亚丁高反死亡 其姐与报警人聊天记录披露

头条要闻

21岁男子稻城亚丁高反死亡 其姐与报警人聊天记录披露

体育要闻

“我,对得起天津足球!”

娱乐要闻

张柏芝自曝五点陪伴儿子 谢霆锋尴尬了

财经要闻

昔日彩电一哥缘何在今天被挤下牌桌?

汽车要闻

纯电/插混动力+乾崑智驾 北汽星钽5X预售价13.99万起

态度原创

教育
旅游
房产
艺术
数码

教育要闻

直到孩子上了高中才发现:我曾坚决反对“超前学”,错得有多离谱

旅游要闻

延庆将分阶段推进长城大景区建设

房产要闻

J&P 集团亮相 2026 中国品牌出海博览会| 深耕跨境20载,品牌出海有J&P

艺术要闻

连列宾都称天才的画家!费欣人物油画原版作品,绝到不敢相信

数码要闻

康佳退市!昔日彩电一哥缘何在今天被挤下牌桌?

无障碍浏览 进入关怀版