网易首页 > 网易号 > 正文 申请入驻

巴掌大超算中心跑200B大模型?技嘉桌面AI超算竞赛现场直击

0
分享至



7月26号下午,技嘉联合NVIDIA主办的“桌面AI超算竞赛”在京举行。这次活动核心玩法是利用技嘉AI TOP ATOM这台桌面AI超算平台,11队、30位开发者选手要在本地跑通推理、微调,产出能落地、可复现的解决方案,挖掘AI算力价值,最后现场演示答辩、由行业资深专家评审颁奖,整个竞赛精彩纷呈,气氛还挺燃,作为一位关注AI的数码博主,我有幸受邀观摩,在此和大家伙儿聊聊感受。

亮眼全场的桌面超算中心——技嘉AI TOP ATOM



进入会场,我一眼就锁定了参赛队伍们桌上用的小方盒——技嘉AI TOP ATOM。它比传统工作站小了不知道多少圈,但别被它呆萌的体积骗了,里面塞的是NVIDIA最新的GB10 Grace Blackwell超级芯片。



这颗芯片的20核ARM处理器和Blackwell架构GPU用NVLink-C2C技术,实现了共享128GB LPDDR5x统一内存池,带宽飙到273 GB/s。这意味着什么?CPU和GPU之间的通讯延迟大幅降低到传统PCIe5.0的1/5,FP16算力能干到31.25 TFLOPs,最惊人的是,技嘉ATOM整机功耗仅170瓦,远低于传统显卡或算力卡,ATOM这种能效比确实很让人服气了。

现场直击:200B本地大模型说跑就跑



活动现场最让我震撼的是,开发者们直接在现场用ATOM跑起了各种大模型,内存利用率达到100GB以上,甚至吃满128G内置统一内存,而且基于NVIDIA GB10 Grace Blackwell 超级芯片,ATOM的推理速度、吐字速度也快的惊人。更夸张的是,通过ConnectX网络互联,两台ATOM还能协同支持405B模型的推理,这性能直接把桌面超算的天花板往上抬了一大截。



另一大亮点是内置的趋境科技AIMA推理智能管控平台,搞过模型部署的兄弟们都懂:装驱动、搞依赖库挺耗费时间的,而AIMA内置AI Agent,能自动检测硬件、匹配最优配置、一键部署,开箱即用真不是吹的。而且它的核心功能100%离线可用——对于重视数据安全隐私的企业级场景来说,这简直是神器。而且系统还会自己跑基准测试、学习最优配置,越用越聪明,运维成本也被压到了极低。

桌面AI的民主化,从技嘉AI TOP ATOM开始



这次技嘉ATOM桌面AI超算竞赛让我感触最深的,是AI算力真正在走向民主化。以前跑大模型默认都得靠云端服务器或高价工作站,而现在一台巴掌大的设备就能轻松搞定本地AI大模型。无论个人开发者、高校师生、爱好者,都能轻松在本地离线跑模型做调校;而且它可以不依赖网络而离线使用、也无数据泄露风险,特别适配对隐私或数据安全要求很高的使用场景。



我觉得消费级桌面AI这场变革,技嘉用AI TOP ATOM这个小钢炮点起了一把火。轻量、高能效、低门槛,这才是未来AI该有的样子,这波我必须得给技嘉ATOM狠狠点赞。最后,我也希望未来能有更多的用户能用上这种AI超算平台,并做出更有价值的AI应用成果。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
金正恩公开表示:对参与“海外军事行动”的朝军士兵给予赞扬;法国媒体确认了:金正恩所说很可能是被派往俄罗斯参与乌克兰战争的朝鲜部队

金正恩公开表示:对参与“海外军事行动”的朝军士兵给予赞扬;法国媒体确认了:金正恩所说很可能是被派往俄罗斯参与乌克兰战争的朝鲜部队

吉刻新闻
2026-09-10 09:58:21
今晚20:30!中国女篮VS法国女篮,杨舒予放狠话,或惨败至少20分

今晚20:30!中国女篮VS法国女篮,杨舒予放狠话,或惨败至少20分

体育就你秀
2026-09-10 10:46:54
私吞上亿善款真相终于大白?官方正式宣布,54岁韩红身份迎来转变

私吞上亿善款真相终于大白?官方正式宣布,54岁韩红身份迎来转变

潋滟晴方DAY
2026-09-09 19:24:21
《街霸》春丽演员身材练得太夸张!替身要靠臀垫还原

《街霸》春丽演员身材练得太夸张!替身要靠臀垫还原

游民星空
2026-09-10 09:41:10
草根演员王新昉猝然离世,年仅55岁,儿子:他生意失败后转行跑龙套,在西安拍短剧时死在出租屋

草根演员王新昉猝然离世,年仅55岁,儿子:他生意失败后转行跑龙套,在西安拍短剧时死在出租屋

极目新闻
2026-09-09 22:06:15
马斯克旗下Boring Company完成30亿美元D轮融资,估值230亿美元

马斯克旗下Boring Company完成30亿美元D轮融资,估值230亿美元

IT之家
2026-09-10 13:46:05
欢迎张丹丹加入“灵活福利”大军

欢迎张丹丹加入“灵活福利”大军

布衣乱弹
2026-09-10 12:14:51
随着兹维列夫3-0,美网男单半决赛对阵浮出水面

随着兹维列夫3-0,美网男单半决赛对阵浮出水面

侧身凌空斩
2026-09-10 10:21:31
转让二手电脑遇到“仅退款”套路,卖家从浙江打顺风车直奔800公里外讨说法;警方已刑事立案,已抓获3名犯罪嫌疑人

转让二手电脑遇到“仅退款”套路,卖家从浙江打顺风车直奔800公里外讨说法;警方已刑事立案,已抓获3名犯罪嫌疑人

都市快报橙柿互动
2026-09-10 01:16:03
日本真上不得台面,亚运会给世界上了一课:没中国,就办不成生意

日本真上不得台面,亚运会给世界上了一课:没中国,就办不成生意

補懂事的孩紙
2026-09-09 17:31:53
想不到,董建华离世没几天,63岁曹可凡竟因一个举动实现口碑暴涨

想不到,董建华离世没几天,63岁曹可凡竟因一个举动实现口碑暴涨

空樽对月花独瘦
2026-09-10 14:36:36
WTT澳门冠军赛:男单16强对阵出炉!国乒仅2人,户上隼辅3:1获胜

WTT澳门冠军赛:男单16强对阵出炉!国乒仅2人,户上隼辅3:1获胜

国乒二三事
2026-09-10 14:18:18
晚上7点半!CCTV5直播国足青春风暴,韦世豪搭档3大归化,邵佳一争首胜

晚上7点半!CCTV5直播国足青春风暴,韦世豪搭档3大归化,邵佳一争首胜

篮球圈里的那些事
2026-09-09 18:37:59
1951年,23岁的志愿军卫生员不忍开枪,救下18岁受伤南韩女兵,二人隐匿山村结成夫妻,28年后才察觉妻子身份绝非普通女俘

1951年,23岁的志愿军卫生员不忍开枪,救下18岁受伤南韩女兵,二人隐匿山村结成夫妻,28年后才察觉妻子身份绝非普通女俘

唠叨说历史
2026-09-08 15:34:01
164:1,整个地球,只有美国反对

164:1,整个地球,只有美国反对

南风窗
2026-09-09 14:02:49
媒体人:国家不欠刘翔的!他自己非要留在体制内 享受最顶级待遇

媒体人:国家不欠刘翔的!他自己非要留在体制内 享受最顶级待遇

念洲
2026-08-30 09:09:35
曹可凡也没想到,董建华离世仅2天,自己竟因一举动实现口碑暴涨

曹可凡也没想到,董建华离世仅2天,自己竟因一举动实现口碑暴涨

冷紫葉
2026-09-10 14:41:23
穆里尼奥救星来了!皇马王牌即将回归!一人根治全队致命短板

穆里尼奥救星来了!皇马王牌即将回归!一人根治全队致命短板

澜归序
2026-09-10 09:10:00
绝对双赢!马刺鹈鹕交易方案,福克斯被扫地出门,马刺旧将重回圣安东尼奥

绝对双赢!马刺鹈鹕交易方案,福克斯被扫地出门,马刺旧将重回圣安东尼奥

球毛鬼胎
2026-09-10 11:26:31
亚运男篮小组赛正式打响!日韩今日出战,中国男篮明日登场迎来首秀

亚运男篮小组赛正式打响!日韩今日出战,中国男篮明日登场迎来首秀

小兰看体育
2026-09-10 09:24:27
2026-09-10 16:23:00
Timeow incentive-icons
Timeow
提猫,数码大玩家
512文章数 139关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

22岁女子与男友吵架后投江身亡:生前被迫写"卖身契"

头条要闻

22岁女子与男友吵架后投江身亡:生前被迫写"卖身契"

体育要闻

一年丢掉的积分排名,郑钦文用18天找回来

娱乐要闻

郭德纲被处罚2天,身边人传出好消息

财经要闻

重磅!金融强国建设“十五五”规划出台

汽车要闻

腾势Z9GT易三方闪充尊越型32.98万元上市

态度原创

游戏
健康
教育
时尚
军事航空

Xbox英国疑似手滑泄露《控制:共振》将首发加入XGP

牙疼,也可能跟心梗有关?!

教育要闻

刘鹓看望慰问一线教师

女人不管多大,都可以看看这些“条纹T恤”,非常减龄又简约

军事要闻

中东“两线战火”同时升级

无障碍浏览 进入关怀版