英伟达公司发布了Cosmos 3 Edge——一款专为边缘设备打造的轻量级世界模型,可直接在边缘端运行视觉推理与机器人控制任务。与此同时,英伟达还宣布了一系列合作伙伴关系,进一步将其实体AI平台深度融入日本的机器人与制造业生态。
Cosmos 3 Edge参数量达40亿,基于英伟达Nemotron系列构建,支持设备端视觉推理并可生成机器人策略。开发者只需约一天时间,即可将该模型适配至特定机器人、车辆或传感器。该模型可在英伟达边缘显卡及Jetson平台上运行,包括最新发布的T2000和T3000模块,同时也支持RTX GPU和DGX系统。
Cosmos 3 Edge是英伟达面向实体AI推出的世界基础模型平台Cosmos的延伸产品。该平台专门用于为机器人和自动化设备生成并评估训练数据。英伟达于今年6月正式发布了更大范围的Cosmos 3全模态世界模型系列。
在开发工具层面,英伟达还发布了全新的Metropolis库,据称可让开发者在智能体辅助训练和部署的加持下,构建和运营基于Cosmos的视频智能系统的速度至少提升6倍。
此次发布的重心明显指向日本市场。已有逾20家日本企业表示有意加入英伟达Cosmos联盟,涵盖工业机器人领域的发那科、安川电机和川崎重工,以及富士通、日立、NEC、软银、索尼、本田研发和丰田旗下的Preferred Networks等行业巨头。
目前,富士通已联合发那科、安川电机和川崎重工共同构建协同控制平台;软银正基于Cosmos、Omniverse和Isaac Sim搭建实体AI开发平台;Groove X公司将Jetson平台应用于其LOVOT陪伴机器人;Enactic公司则基于英伟达Isaac GR00T模型进行微调,用于养老护理机器人;Telexistence公司则将相关技术引入零售自动化场景。
"AI的下一个前沿阵地在物理世界,这对日本而言是千载难逢的历史机遇。"英伟达创始人兼首席执行官黄仁勋本周访问日本期间,在一系列发布活动上如此表示。
英伟达还与日本政府联合发布了一项被双方称为"全球首个国家级AI基础设施"的重大项目。据悉,Noetra公司将建设一座搭载27500块英伟达Rubin GPU和13750颗Vera CPU、总功耗达140兆瓦的AI工厂,并获得日本经济产业省的政策支持。该项目命名为"FRONTia",旨在为机器人、数字孪生及智能制造研发开放式多模态基础模型。
据CNBC报道,日本政府将为这一项目投入约24亿美元。日本的目标是到2040年占据全球AI机器人市场逾30%的份额,英伟达及其合作伙伴将这一市场机遇的总规模估算为1330亿美元。
黄仁勋将此次大规模布局定性为日本重振制造业优势的历史契机,并表示,这个发明了现代制造业的国家,如今正在为下一场工业革命建造AI工厂。
此次行动是英伟达不断扩大的主权AI业务的重要组成部分——在这一模式下,各国政府出资建设本土算力基础设施,而非依赖海外云服务商。这也进一步印证了实体AI(即让机器能够感知真实世界并做出行动的模型技术)在英伟达数据中心业务之外的增长战略中已居于核心地位。
Q&A
Q1:英伟达Cosmos 3 Edge模型有什么特点?
A:Cosmos 3 Edge是英伟达推出的轻量级边缘端世界模型,参数量为40亿,基于Nemotron系列构建。它支持设备端视觉推理和机器人策略生成,开发者只需约一天即可完成针对特定机器人、车辆或传感器的适配。该模型兼容英伟达Jetson平台(含T2000/T3000模块)、RTX GPU及DGX系统。
Q2:哪些日本企业加入了英伟达Cosmos联盟?
A:目前已有逾20家日本企业表态加入英伟达Cosmos联盟,涵盖发那科、安川电机、川崎重工等工业机器人龙头,以及富士通、日立、NEC、软银、索尼、本田研发和丰田旗下Preferred Networks等科技与制造业巨头,应用场景包括协同控制平台、养老护理机器人和零售自动化等多个领域。
Q3:日本国家级AI基础设施项目FRONTia的规模和目标是什么?
A:FRONTia由Noetra公司承建,将搭载27500块英伟达Rubin GPU和13750颗Vera CPU,总功耗140兆瓦,获日本经济产业省支持。日本政府计划投入约24亿美元,目标是到2040年占据全球AI机器人市场30%以上份额,该市场规模估算达1330亿美元。项目将重点研发面向机器人、数字孪生和智能制造的开放式多模态基础模型。
好文章,需要你的鼓励
这项来自明尼苏达大学等机构的研究发现,大语言模型在强化学习后训练中,只需训练中间少数几层即可匹配甚至超越全参数训练效果,且这一规律跨模型、跨任务高度稳定,为更高效的AI训练策略提供了新思路。
本文介绍VIBE框架,一套通过开放式任务评估大型音频语言模型声音诱发偏见的系统,测试12个模型后发现每个模型均存在显著性别或口音偏见。