这让在家构建复杂机器人项目变得更容易。
本周早些时候,AI 开发平台 Hugging Face 发布了一个名为 SmolVLA 的开源机器人 AI 模型。Hugging Face 声称,SmolVLA 基于“兼容许可”的社区共享数据集训练,在虚拟环境和真实世界环境下均超越了许多规模更大的机器人模型。
Hugging Face 在博客文章中写道:“SmolVLA 旨在普及视觉-语言-行为 (VLA) 模型的应用,并加速向通用机器人代理的研究。SmolVLA 不仅是一个轻量但功能强大的模型,更是一种训练和评估通用机器人技术的方法。”
SmolVLA 是 Hugging Face 快速扩展低成本机器人硬件与软件生态系统努力的一部分。去年,该公司推出了 LeRobot,这是一个专注于机器人领域的模型、数据集和工具集合。最近,Hugging Face 收购了法国机器人初创公司 Pollen Robotics,并推出了多款经济实惠的机器人系统,其中包括仿人机器人,可供购买。
SmolVLA 拥有 4.5 亿参数,其训练数据来自 LeRobot Community 数据集,这是在 Hugging Face AI 开发平台上共享的特别标记的机器人数据集。参数,有时被称为“权重”,是指导模型行为的内部组件。
Hugging Face 声称,SmolVLA 足够小,可以在单一家用 GPU 上运行——甚至能够在 MacBook 上运行——并且可以在包括该公司自有机器人系统在内的“经济实惠”硬件上进行测试和部署。
更有趣的是,SmolVLA 还支持“异步推理栈”,Hugging Face 表示这一特性使模型能将机器人动作的处理与所见所听的信息处理分离。正如该公司在博客文章中解释:“由于这种分离,机器人在快速变化的环境中能够更快做出响应。”
Hugging Face 可从其平台下载 SmolVLA。当前,一位用户在 X 平台上声称已使用该模型控制第三方机器人手臂。
值得注意的是,Hugging Face 远非初露锋芒的开源机器人竞赛中唯一的参与者。Nvidia 拥有一系列开源机器人工具,而初创公司 K-Scale Labs 正在构建其所谓的“开源仿人机器人”组件。在该领域内,还有几家实力雄厚的公司,包括 Dyna Robotics、得到杰夫·贝佐斯支持的 Physical Intelligence 以及 RLWRLD。
好文章,需要你的鼓励
Jabra 推出 PanaCast 40 VBS:首款专为小会议室设计的 180° Android 智能音视频一体机
这是一项关于计算机视觉技术突破的研究,由多家知名院校联合完成。研究团队开发了LINO-UniPS系统,能让计算机像人眼一样从不同光照下的照片中准确识别物体真实的表面细节,解决了传统方法只能在特定光照条件下工作的局限性,为虚拟现实、文物保护、工业检测等领域带来重要应用前景。
字节跳动智能创作实验室发布革命性AI视频数据集Phantom-Data,解决视频生成中的"复制粘贴"问题。该数据集包含100万个跨场景身份一致配对,通过三阶段构建流程实现主体检测、多元化检索和身份验证,显著提升文本遵循能力和视频质量。
这篇文章介绍了北京人工智能研究院开发的OmniGen2模型,一个能够同时处理文字转图像、图像编辑和情境生成的全能AI系统。该模型采用双轨制架构,分别处理文本和图像任务,并具备独特的自我反思机制,能够自动检查和改进生成结果。研究团队还开发了专门的数据构建流程和OmniContext评测基准,展现了开源模型的强大潜力。