下一代机器人将成为"通才专家"——既能理解指令、学习广泛技能,同时也可针对专门任务进行训练。
可以将它们视为既是万事通,又能精通特定工作的智能系统。
构建这些机器人需要集成的云端到机器人工作流,使数据收集和生成、控制策略训练和评估,以及安全部署到物理机器上的过程变得无缝衔接。这些通才专家系统依赖于具备推理能力的视觉语言行动(VLA)模型,以便在不同任务中进行智能感知、理解和行动。
为了加速这一转变,开放的NVIDIA Isaac平台为机器人开发者提供了构建机器人并通过NVIDIA三计算机解决方案进行规模化部署所需的一切——模型、数据管道、仿真框架、运行时库。NVIDIA甚至提供了开放的VLA模型NVIDIA Isaac GR00T N,为开发者提供强大的基础来引导和后训练他们自己的机器人智能。
这些模型、库和框架可以在云端或边缘AI基础设施上运行,现在通过集成OpenClaw等长期运行的智能体,性能得到进一步提升。
借助本周在NVIDIA GTC上发布的最新智能体友好型NVIDIA Isaac GR00T模型、Isaac机器人仿真和学习框架,以及边缘AI系统,NVIDIA为开发者提供了用于通才专家时代自主系统的全新强大工具。
这些工作流是开放且可组合的,因此开发者可以混合搭配组件,引入自己的工具和数据,加速从原型到实际部署的流程。
Q&A
Q1:什么是通才专家机器人?
A:通才专家机器人是下一代机器人的发展方向,它们既能理解指令、学习广泛技能,同时也可针对专门任务进行训练。可以将它们理解为既是万事通,又能精通特定工作的智能系统。
Q2:NVIDIA Isaac平台包含哪些功能?
A:NVIDIA Isaac是开放的机器人开发平台,为开发者提供构建机器人所需的完整工具集,包括模型、数据管道、仿真框架、运行时库等,还提供了NVIDIA Isaac GR00T N这一开放的VLA模型作为基础。
Q3:VLA模型在机器人中起什么作用?
A:VLA(视觉语言行动)模型是具备推理能力的核心技术,使通才专家机器人系统能够在不同任务中进行智能感知、理解和行动,是实现机器人智能化的关键技术基础。
好文章,需要你的鼓励
英国国家医疗服务(NHS)正将无人机纳入常规医疗物流体系。自今年2月起,无人机每天在雷恩斯公园和圣乔治医院之间运送血液等诊断样本,飞行仅需3分钟,比公路运输快约85%,且碳排放减少高达98%。目前已有逾2000名患者受益。NHS计划将该服务扩展至圣赫利尔、克罗伊登等多家医院,最终惠及约180万名患者。该网络由英国医疗初创公司Apian与谷歌旗下Wing合作运营。
AgentLens是Explyt公司联合俄罗斯学术机构开发的AI编程助手评测基准,通过分析完整人机交互轨迹而非仅看最终结果,从五个维度评估代码智能体的真实表现。
边缘AI计算厂商Aetina宣布,将在其DeviceEdge AIE-KT风冷系列和新款AIE-PT无风扇平台上支持英伟达全新Jetson T3000和T2000模块。T3000基于Blackwell GPU,最高提供865 FP4 TFLOPS算力,功耗70W;T2000则提供400 FP4 TFLOPS,面向视觉AI代理和自主移动机器人等场景。两款模块预计2027年第一季度上市,支持Nemotron、Cosmos 3等英伟达AI软件生态。
韩国梨花女子大学提出Splash框架,通过识别AI模型中的"休眠参数"并只在其中训练触觉能力,让小型多模态AI在学会感知材质触感的同时,完整保留原有视觉语言推理能力。