网易首页 > 网易号 > 正文 申请入驻

巴掌大超算中心跑200B大模型?技嘉桌面AI超算竞赛现场直击

0
分享至



7月26号下午,技嘉联合NVIDIA主办的“桌面AI超算竞赛”在京举行。这次活动核心玩法是利用技嘉AI TOP ATOM这台桌面AI超算平台,11队、30位开发者选手要在本地跑通推理、微调,产出能落地、可复现的解决方案,挖掘AI算力价值,最后现场演示答辩、由行业资深专家评审颁奖,整个竞赛精彩纷呈,气氛还挺燃,作为一位关注AI的数码博主,我有幸受邀观摩,在此和大家伙儿聊聊感受。

亮眼全场的桌面超算中心——技嘉AI TOP ATOM



进入会场,我一眼就锁定了参赛队伍们桌上用的小方盒——技嘉AI TOP ATOM。它比传统工作站小了不知道多少圈,但别被它呆萌的体积骗了,里面塞的是NVIDIA最新的GB10 Grace Blackwell超级芯片。



这颗芯片的20核ARM处理器和Blackwell架构GPU用NVLink-C2C技术,实现了共享128GB LPDDR5x统一内存池,带宽飙到273 GB/s。这意味着什么?CPU和GPU之间的通讯延迟大幅降低到传统PCIe5.0的1/5,FP16算力能干到31.25 TFLOPs,最惊人的是,技嘉ATOM整机功耗仅170瓦,远低于传统显卡或算力卡,ATOM这种能效比确实很让人服气了。

现场直击:200B本地大模型说跑就跑



活动现场最让我震撼的是,开发者们直接在现场用ATOM跑起了各种大模型,内存利用率达到100GB以上,甚至吃满128G内置统一内存,而且基于NVIDIA GB10 Grace Blackwell 超级芯片,ATOM的推理速度、吐字速度也快的惊人。更夸张的是,通过ConnectX网络互联,两台ATOM还能协同支持405B模型的推理,这性能直接把桌面超算的天花板往上抬了一大截。



另一大亮点是内置的趋境科技AIMA推理智能管控平台,搞过模型部署的兄弟们都懂:装驱动、搞依赖库挺耗费时间的,而AIMA内置AI Agent,能自动检测硬件、匹配最优配置、一键部署,开箱即用真不是吹的。而且它的核心功能100%离线可用——对于重视数据安全隐私的企业级场景来说,这简直是神器。而且系统还会自己跑基准测试、学习最优配置,越用越聪明,运维成本也被压到了极低。

桌面AI的民主化,从技嘉AI TOP ATOM开始



这次技嘉ATOM桌面AI超算竞赛让我感触最深的,是AI算力真正在走向民主化。以前跑大模型默认都得靠云端服务器或高价工作站,而现在一台巴掌大的设备就能轻松搞定本地AI大模型。无论个人开发者、高校师生、爱好者,都能轻松在本地离线跑模型做调校;而且它可以不依赖网络而离线使用、也无数据泄露风险,特别适配对隐私或数据安全要求很高的使用场景。



我觉得消费级桌面AI这场变革,技嘉用AI TOP ATOM这个小钢炮点起了一把火。轻量、高能效、低门槛,这才是未来AI该有的样子,这波我必须得给技嘉ATOM狠狠点赞。最后,我也希望未来能有更多的用户能用上这种AI超算平台,并做出更有价值的AI应用成果。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
理想汽车的至暗时刻

理想汽车的至暗时刻

商业研究所
2026-09-08 15:46:48
梅德韦杰夫:俄罗斯有权在安全受到威胁时使用核武器

梅德韦杰夫:俄罗斯有权在安全受到威胁时使用核武器

新京报
2026-09-10 10:49:22
不怕气死黄晓明?李晨baby惊曝恋情,现实版好朋友和前妻在一起了

不怕气死黄晓明?李晨baby惊曝恋情,现实版好朋友和前妻在一起了

八星人
2026-09-08 09:51:13
长鑫存储与长江存储被曝已准备可用三年的ASML DUV光刻机

长鑫存储与长江存储被曝已准备可用三年的ASML DUV光刻机

cnBeta.COM
2026-09-08 18:16:04
乾隆晚年最大的BUG,所有人都合规,帝国却转不动了

乾隆晚年最大的BUG,所有人都合规,帝国却转不动了

考史斋
2026-09-08 22:25:23
盘后,利好来了!北京,重磅发文

盘后,利好来了!北京,重磅发文

数据宝
2026-09-09 21:33:53
又一新股来了,2.5万元顶格申购

又一新股来了,2.5万元顶格申购

第一财经资讯
2026-09-10 09:12:31
罗体:劳塔罗与赫伊森场上各染黄,赛后拥抱化干戈

罗体:劳塔罗与赫伊森场上各染黄,赛后拥抱化干戈

懂球帝
2026-09-09 22:44:17
银行行长酒后漏嘴:六十岁以后存钱,一定别全部存在个人名下

银行行长酒后漏嘴:六十岁以后存钱,一定别全部存在个人名下

奇思妙想生活家
2026-09-05 11:27:06
深圳一公司员工韦某(男,32 岁 ),抢救无效死亡!官方公布调查报告

深圳一公司员工韦某(男,32 岁 ),抢救无效死亡!官方公布调查报告

南方都市报
2026-09-09 15:02:22
这届日本亚运会,给全世界好好上了一课:没有中国,就办不成生意

这届日本亚运会,给全世界好好上了一课:没有中国,就办不成生意

安安说
2026-09-10 10:19:31
“梅姨”真人照曝光!画像师:相似度80%以上;受害者:这张脸等了太久

“梅姨”真人照曝光!画像师:相似度80%以上;受害者:这张脸等了太久

上观新闻
2026-09-10 08:52:39
南北奥迪将分治?多方回应

南北奥迪将分治?多方回应

界面新闻
2026-09-09 20:51:26
刘畊宏直播间凉了,“老板娘”的身材戳破了多少人的减肥梦?

刘畊宏直播间凉了,“老板娘”的身材戳破了多少人的减肥梦?

看尽落尘花q
2026-08-23 19:28:46
A股:来不及等开盘了,种种迹象表明,今日周四很可能将会这样走

A股:来不及等开盘了,种种迹象表明,今日周四很可能将会这样走

虎哥闲聊
2026-09-10 07:48:56
女篮世界杯,82-80险爆大冷+大逆转,最后一个8强,世界第3险胜!

女篮世界杯,82-80险爆大冷+大逆转,最后一个8强,世界第3险胜!

刘哥谈体育
2026-09-10 05:32:05
1-8决赛签表:丁俊晖对奥康纳,吴宜泽对No86。附比赛时间,交手记录

1-8决赛签表:丁俊晖对奥康纳,吴宜泽对No86。附比赛时间,交手记录

小哆说体育
2026-09-10 07:20:26
“祸”不单行!星宇事件持续发酵,上交所出手发布警示,股价应声下挫3.07%

“祸”不单行!星宇事件持续发酵,上交所出手发布警示,股价应声下挫3.07%

火山詩话
2026-09-10 06:03:57
父亲是知名主持毕福剑,移民加拿大接受西方教育,却变成了不男不女的模样,毕福剑丢掉的不只是事业,还有女儿的二十年

父亲是知名主持毕福剑,移民加拿大接受西方教育,却变成了不男不女的模样,毕福剑丢掉的不只是事业,还有女儿的二十年

品茗赏娱
2026-09-09 08:54:49
最快18分钟送达!iPhone 18 Pro淘宝闪购首发:覆盖超2000个地区

最快18分钟送达!iPhone 18 Pro淘宝闪购首发:覆盖超2000个地区

快科技
2026-09-10 10:37:06
2026-09-10 11:59:00
Timeow incentive-icons
Timeow
提猫,数码大玩家
512文章数 139关注度
往期回顾 全部

科技要闻

一文看懂:iPhone折叠屏顶配2万6,10月才卖

头条要闻

牛弹琴:美官员抹黑中国让全世界看笑话 鲁比奥都不信

头条要闻

牛弹琴:美官员抹黑中国让全世界看笑话 鲁比奥都不信

体育要闻

一年丢掉的积分排名,郑钦文用18天找回来

娱乐要闻

郭德纲被处罚2天,身边人传出好消息

财经要闻

银行新高!新一轮周期,刚开始!

汽车要闻

腾势Z9GT易三方闪充尊越型32.98万元上市

态度原创

亲子
艺术
旅游
手机
军事航空

亲子要闻

不结婚也能生?专家提议放开单身辅助生殖,但这事儿没那么简单!

艺术要闻

禁止出境国宝!唐代孙位唯一存世真迹,宋徽宗亲笔题名

旅游要闻

过去的未来

手机要闻

全球首款阔直板!华为Pura X View首销当日卖出超18万台

军事要闻

中东“两线战火”同时升级

无障碍浏览 进入关怀版