英伟达在本周一的SIGGRAPH大会上,为机器人开发者带来了一系列全新的AI模型、库及基础设施,这一系列发布引起了广泛关注。其中,Cosmos Reason成为全场焦点。这款视觉语言模型拥有70亿参数,专门针对物理AI应用和机器人设计,具备强大的“推理”能力。
除了Cosmos Reason,英伟达还推出了Cosmos Transfer-2,进一步丰富了Cosmos世界模型系列。这款新模型能够加速从3D模拟场景或空间控制输入中生成合成数据,同时提供了一个速度优化更为出色的精简版。这些模型的主要目标是创建用于训练机器人和AI智能体的合成文本、图像和视频数据集。
英伟达在发布会上重点介绍了Cosmos Reason的独特能力。该模型依托其记忆和对物理原理的深刻理解,使机器人和AI智能体具备了“推理”能力。这意味着它们可以作为规划模型,推断具身智能体接下来可能采取的步骤。英伟达表示,Cosmos Reason在数据策划、机器人规划和视频分析等方面具有广泛应用前景。
英伟达还发布了新的神经重建库,该库包含一种先进的渲染技术,开发者可以利用传感器数据以3D形式模拟现实世界。这一技术已被整合进开源模拟器CARLA中,进一步提升了CARLA的模拟能力。同时,英伟达还更新了Omniverse软件开发工具包,为开发者提供了更多功能和便利。
在机器人工作流程方面,英伟达推出了两款新产品。Nvidia RTX Pro Blackwell Server专为机器人开发工作负载设计,提供了单一架构,而Nvidia DGX Cloud则是一个基于云的管理平台,为开发者提供了更加灵活和高效的工作环境。
英伟达此次深入机器人领域的举措,标志着该公司在寻找AI GPU新应用场景方面取得了重要进展。这些新发布的产品不仅丰富了英伟达的产品线,还为机器人开发者提供了更多选择和可能性,推动了AI技术在机器人领域的广泛应用。