Niantic Spatial近日为其旗下的Scaniverse应用推出了USDZ导出功能,使机器人开发者能够将真实环境转换为可直接用于仿真的数字孪生体,并与英伟达Isaac Sim无缝对接。
这项新功能旨在解决机器人领域长期存在的"仿真到现实"落差问题。长期以来,在合成环境中训练的机器人系统往往难以应对复杂的真实世界场景。
借助Scaniverse,开发者现在可以使用360度相机采集真实环境,并生成一个USDZ文件,该文件将高斯泼溅(Gaussian Splat)与自动生成的对齐网格相结合。生成的模型可直接导入英伟达Isaac Sim,用于机器人的训练与测试。
Niantic Spatial表示,这一工作流程相比传统的RGB-LiDAR测绘系统更为简便且成本更低。传统系统的费用往往高达数万美元,而一台售价约500美元的360度相机,仅需五分钟即可完成对整条街道或大型室内空间的扫描。
该公司还指出,这项功能建立在其现有深度模型的基础之上。该模型通过直接从高斯泼溅中提取几何信息,而非依赖独立的几何扫描,从而生成更平滑、更精准的网格。
据介绍,这种方法可以通过单次采集同时构建环境的视觉表示和物理表示,有效减少渲染图像与碰撞几何体之间的对齐误差。
Niantic Spatial认为,这为基于视觉的机器人策略训练创造了更真实的环境。机器人可以直接从其未来实际工作场所的光照条件、材质纹理、杂乱摆放和表面特性中进行学习。
开发者无需完全依赖通用仿真环境进行训练,而是可以在部署前先采集客户的仓库、工厂或其他作业场所,生成仿真就绪的数字孪生体,在该模型中训练机器人策略,随后部署已针对目标环境完成训练的机器人。
Niantic Spatial表示,这种方式有望缩短部署周期,并通过持久、高保真的数字孪生体,支持机器人投入使用后策略的持续优化。
USDZ导出功能现已在Scaniverse中正式上线,适配英伟达Isaac Sim,是Niantic Spatial致力于为物理AI构建真实世界基础模型这一整体战略的重要组成部分。
Q&A
Q1:Scaniverse的USDZ导出功能是什么?有什么用?
A:Scaniverse的USDZ导出功能由Niantic Spatial推出,允许开发者使用360度相机扫描真实环境,生成包含高斯泼溅与对齐网格的USDZ文件,并将其直接导入英伟达Isaac Sim用于机器人训练和测试。这一功能主要解决机器人"仿真到现实"的落差问题,让机器人在部署前就能在真实环境的数字孪生体中完成训练。
Q2:Scaniverse相比传统LiDAR测绘方案,成本上有多大优势?
A:传统的RGB-LiDAR测绘系统价格通常高达数万美元,而使用Scaniverse只需一台约500美元的360度相机,五分钟内即可完成整条街道或大型室内空间的扫描。在成本和操作便捷性方面,Scaniverse提供了显著更优的替代方案,适合需要快速搭建仿真环境的机器人开发团队。
Q3:Scaniverse生成的数字孪生体如何提升机器人训练效果?
A:Scaniverse通过单次采集同时构建环境的视觉和物理表示,减少了渲染图像与碰撞几何体之间的对齐误差。机器人可以在真实工作场所(如仓库、工厂)对应的数字孪生体中学习实际的光照、纹理和表面特性,从而在部署后更好地适应真实环境,同时支持机器人投入使用后的策略持续优化。
好文章,需要你的鼓励
Savi Security由Patrick和Ryan Coughlin兄弟创立,融资700万美元,并正式推出iOS和Android应用。该应用可实时筛查短信、语音邮件和来电,识别AI生成的诈骗内容。其核心功能是通话实时监控,用户可在可疑通话中邀请AI助手同步监听,分析行为特征。产品以家庭为单位收费,每月8美元,不限用户数量。FTC数据显示,2025年冒充诈骗造成损失高达35亿美元,是2020年的三倍。
香港中文大学(深圳)与字节跳动联合提出FlexiSLM,首个支持动态与可控帧率的语音大模型,在输入输出两端均实现自适应帧合并,6.25赫兹下推理速度提升一倍,语音对话质量超越同规模固定帧率模型。
安全公司Synacktiv披露了Argo CD中一个未修复的高危漏洞,影响其repo-server组件的未认证gRPC端点。攻击者若能访问该端点及Redis数据库端口,可执行恶意命令、篡改部署数据,并在启用Auto Sync时自动推送恶意配置。由于Helm chart部署默认未启用网络策略保护,集群内任意受损Pod均可触发攻击。专家建议企业将Argo CD视为零级控制平面组件,实施严格的东西向流量隔离与特权访问管控。
这项研究提出DataEvolver框架,把被丢弃的"不合格训练图片"转化为改进数据收集策略的反馈,让AI文字图像生成训练数据的构建流程能自我进化,在相同数据量下显著提升文字渲染质量。