英伟达在本周一的SIGGRAPH大会上,为机器人开发者带来了一系列全新的AI模型和基础设施,这些创新成果引发了广泛关注。其中,Cosmos Reason模型尤为引人注目,这是一款专为物理AI应用和机器人设计的视觉语言模型,其参数规模达到了惊人的70亿。
除了Cosmos Reason,英伟达还推出了Cosmos Transfer-2模型,这是对现有Cosmos世界模型系列的又一重要补充。Cosmos Transfer-2模型能够高效地从3D模拟场景或空间控制输入中生成合成数据,同时,其精简版在速度优化上更是表现出色。这些模型的主要功能是创建用于训练机器人和AI智能体的合成文本、图像和视频数据集。
Cosmos Reason凭借其强大的记忆能力和对物理原理的深刻理解,为机器人和AI智能体赋予了“推理”能力。这意味着它们能够作为规划模型,预测具身智能体可能采取的后续步骤。英伟达表示,该模型在数据策划、机器人规划和视频分析等领域具有广泛应用前景。
英伟达还发布了一款全新的神经重建库,该库包含一种先进的渲染技术,开发者可以利用传感器数据以3D形式模拟现实世界。这一技术已被整合进广受欢迎的开源模拟器CARLA中。同时,英伟达还更新了Omniverse软件开发工具包,为开发者提供了更多便利。
在机器人工作流程方面,英伟达推出了两款新服务器。其中,Nvidia RTX Pro Blackwell Server专为机器人开发工作负载设计,提供了统一的架构;而Nvidia DGX Cloud则是一个基于云的管理平台,为开发者提供了更加灵活和高效的工作环境。
英伟达此次深入机器人领域的举措,标志着该公司在寻找AI GPU新应用场景方面取得了重要进展。这些新发布的产品不仅超越了现有的AI数据中心应用,更为机器人和AI智能体的发展注入了新的活力。