「链接」
物理 AI 系统依赖世界模型来感知、推理和预测物理环境。但现实世界十分广阔、无法预测且瞬息万变。
无论是导航仓库的机器人,还是观测工厂车间的摄像头网络,物理 AI 系统都需要理解当前状况,推断接下来可能发生的事情,并迅速采取行动以产生影响。到目前为止,在边缘端交付此类前沿 AI 通常意味着需要牺牲模型能力来换取部署效率。
现已推出的 NVIDIA Cosmos 3 Edge 有助于消除这种权衡。这款拥有 40 亿参数的全模态模型已进行优化,可在 NVIDIA Jetson、NVIDIA RTX PRO 和 NVIDIA DGX 系统,以及 GeForce RTX GPU 上实现内存高效部署和高吞吐量。
作为 NVIDIA Cosmos 3 的扩展,这款紧凑型世界基础模型能够理解并生成文本、图像、视频、环境声音和动作。其 Mixture-of-Transformers (MoT) 架构支持在设备上使得基于物理基础的实时视觉分析和机器人动作成为可能。
Cosmos 3 Edge 在边缘端提供前沿物理 AI —— 在同级别参数模型中,其视觉分析成功率在 VANTAGE-Bench 中排名第一,并通过后训练实现了先进的机器人学习。
以上为摘要内容,请点击链接阅读完整内容:NVIDIA 在 SIGGRAPH 上展示代理式 AI 与物理 AI 成果,推动图形与仿真技术进步 | NVIDIA 英伟达博客
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.