在英伟达 GTC 大会开幕之际,一系列重要公告突显了其在推进自动驾驶技术方面的重要地位。
这家芯片制造商为汽车制造商和自动驾驶公司提供了多款英伟达品牌工具,用于支持自动驾驶汽车和创建工厂数字孪生。周二,包括 Torc、Gatik 和通用汽车在内的多家公司宣布将使用英伟达产品用于车辆生产、机器人和自动驾驶等领域。
为避免在英伟达众多硬件和软件工具品牌名称中产生混淆,以下是一个简明术语表:
Drive AGX: 英伟达的车载超级计算机,用于处理实时传感器数据。
Drive Orin SoC: 一种更先进的中央计算机系统芯片。Orin 处理来自各种传感器的数据,为 L4 级自动驾驶提供动力。
Drive Thor SoC: Thor 是更高级的选择。它针对 Transformer 架构进行了优化,可以适应生成式 AI,设计用于处理从自动驾驶操作到座舱功能再到信息娱乐系统的所有功能。
DriveOS: 这是英伟达面向其自动驾驶平台的安全操作系统,承诺提供安全的实时 AI 处理能力,并集成先进的驾驶和座舱功能。
Omniverse: 英伟达的 Omniverse 是一个仿真平台,允许汽车制造商开发和运营复杂的 AI 驱动虚拟环境,用于生成合成数据、测试自动驾驶软件、构建工厂数字孪生等。
Cosmos: Cosmos 旨在为自动驾驶汽车和机器人的物理 AI 开发提供世界模型训练支持。
除此之外,英伟达今天还发布了 Halos,这是一个面向自动驾驶汽车和未来物理 AI (如人形机器人) 的 AI 驱动安全系统。Halos 整合了英伟达多款汽车硬件和软件安全解决方案,可以将其视为一个综合性解决方案。
以下是 GTC 第二天英伟达汽车相关公告的简要总结:
通用汽车 通用汽车宣布扩大与英伟达的合作,涉及汽车制造商业务的各个方面,包括工厂、机器人和自动驾驶汽车。从工厂开始。
通用汽车表示将使用 Omniverse 和 Cosmos 来训练 AI 制造模型,帮助建设下一代工厂。Omniverse 将允许通用汽车构建工厂数字孪生,以虚拟测试新的生产流程,而不会干扰现有的车辆生产。它还将使用 Omniverse 来训练机器人平台,用于材料处理和运输等操作。
在自动驾驶汽车方面,通用汽车表示将使用英伟达的 Drive AGX 作为未来高级驾驶辅助系统和车内安全体验的车载硬件。
Gatik 得到五十铃和固特异创投支持的自动驾驶卡车公司 Gatik 也加入了英伟达的汽车生态系统。这家总部位于硅谷和多伦多的公司专注于通过自动驾驶厢式卡车进行中程物流,表示将开发和部署由 Drive Thor 加速的 Drive AGX,作为其整个卡车车队的 AI 大脑。Gatik 还表示正在 DriveOS 系统上运行其 AI 模型以确保安全性。
该初创公司指出,这项合作将帮助加速为其客户(包括沃尔玛、克罗格和泰森食品)大规模部署 L4 级自动驾驶卡车。
Plus 自动驾驶卡车软件初创公司 Plus 周二表示将使用 Cosmos 世界基础模型来加速其自动驾驶系统 SuperDrive 的测试和开发。
据该公司称,Plus 的 SuperDrive 系统构建于英伟达的 Drive AGX 平台之上。Plus 在声明中还表示,正在开发 "AV 2.0 技术,包括生成式 AI、视觉语言模型和其他基础模型"。从上述术语表可以看出,英伟达的 AGX 平台更适合 ADAS 和低级别自动驾驶。为了获得更高级别自动驾驶所需的先进传感器融合和车载计算能力,公司通常依赖英伟达的 Orin 或 Thor SoC。
TechCrunch 已联系 Plus 寻求澄清。
该初创公司最近与包括 Traton 集团、IVECO 和现代在内的商用车制造商达成协议,将 SuperDrive 集成到他们的卡车中。Plus 目前正在德克萨斯州和瑞典的公共道路上测试其技术,计划在 2027 年实现商业化。
Torc 另一家自动驾驶卡车公司 Torc 宣布正与英伟达合作开发可扩展的物理 AI 计算系统。总部位于弗吉尼亚州的 Torc(戴姆勒卡车集团的子公司)还将与生产汽车级计算平台的伟创力合作。
Torc 表示正在使用英伟达芯片架构组合,包括 Drive AGX、Drive Orin 和 DriveOS,以支持未来自动驾驶功能的部署,目标是在 2027 年实现商业化。
2024 年 10 月,该公司在德克萨斯州的封闭场地完成了首次无人驾驶测试。
沃尔沃 虽然沃尔沃并未与英伟达合作推进其自动驾驶技术,但该汽车制造商正依靠英伟达的 Blackwell GPU 来支持空气动力学模拟。
沃尔沃没有使用英伟达的 Omniverse 模拟器,而是与软件模拟公司 Ansys 合作。Ansys 的 "Fluent" 模拟软件由 8 个 Blackwell GPU 提供支持,帮助沃尔沃设计新款 EX90 电动汽车,减少空气动力学阻力,从而提高电池性能。
Ansys 表示,其 Fluent 模拟器帮助沃尔沃将总模拟运行时间从 24 小时缩短至 6.5 小时,每天可进行多次设计迭代,优化车辆设计并加快上市时间。
好文章,需要你的鼓励
这项由清华大学与NVIDIA合作的研究提出了"负例感知微调"(NFT)算法,挑战了"自我提升仅适用于强化学习"的传统观念。通过构建隐式负面策略处理错误答案,NFT在数学推理任务上匹配甚至超越了顶尖强化学习算法的表现。研究不仅证明了监督学习与强化学习在特定条件下的等价性,还展示了如何利用负面反馈显著提升大语言模型的数学能力,为AI训练方法论开辟了新视角。
这项研究提出了一种名为混合推理策略优化(HRPO)的新方法,通过强化学习使大型语言模型能够结合离散标记和连续隐藏表示进行推理。HRPO设计了创新的门控机制,初始时以标记嵌入为主,逐渐增加隐藏状态的比例,并通过强化学习优化这一混合策略。实验表明,HRPO在知识和推理任务上显著优于现有方法,甚至使小型模型达到大型模型的性能,同时展现出跨语言推理等有趣特性。
这项研究介绍了REARANK,一种基于大语言模型的创新列表式推理重排序助手。通过强化学习技术,该模型在排序前先进行明确推理,显著提升了排序性能和可解释性。仅使用179个标注样本训练的REARANK-7B在多个信息检索基准测试中表现卓越,甚至在推理密集型任务上超越了GPT-4。研究证明了结合推理能力与高效排序策略的重要性,为构建更智能的信息检索系统提供了新思路。
"当我看到梵高的每一笔中都有他的痛苦时,才明白我们看的不是作品,而是作者的人生。AI正以惊人的速度接近人类水平通用智能,让Google从'伦敦那帮疯子在搞AGI'转变为全公司共识。DeepMind让AI'合理地幻觉'来创造突破,就像Astra技术让用户第一次惊呼'AI能做到比想象更多'——这不仅是技术革命,更是重新定义创造力的开始。"