Microsoft 刚刚推出了 Magma,这是一款新型人工智能模型,旨在帮助机器人更智能地观察、理解和行动。与传统的 AI 模型不同,Magma 可以同时处理不同类型的数据——Microsoft 称这是朝着"主动式 AI"(即能够代表用户规划和执行任务的系统)迈出的重要一步。
这个结合了视觉和语言处理的模型,通过视频、图像、机器人数据和界面交互进行训练,使其比以往的模型更加多功能。
在其 Github 页面上,Microsoft 研究团队概述了 Magma 如何执行任务,比如操控机器人和导航用户界面(如点击按钮)等功能。
为了开发这项技术,该公司与马里兰大学、威斯康星大学麦迪逊分校和华盛顿大学的研究人员展开合作。
在各大科技巨头竞相开发能够自动化日常生活更多方面的 AI 代理之际,这项技术应运而生。Google 一直在推进面向机器人的语言模型,而 OpenAI 的 Operator 工具则旨在通过在专用浏览器中进行打字、点击和滚动来处理预订、订购杂货和填写表格等日常任务。
该项目的首席研究员杨建伟 (Jianwei Yang) 告诉 CNET,AI 的未来不仅仅是为聊天机器人开发多模态基础模型。
他表示:"我们认为 AI 的下一个重要步骤在于开发能够无缝理解和交互数字和物理环境的代理。"
他说,Magma 的重要性在于其弥合多模态 AI 代理差距的能力,因为传统 AI 模型在语言智能方面表现出色,但在规划和现实世界行动方面往往力不从心。
他解释道:"如今的机器人往往依赖于特定领域数据的特定任务训练,导致它们处理简单日常任务的能力有限,更不用说适应新任务和环境了。Magma 通过显著提升它们的语言和空间智能改变了这一点,使机器人能够基于数字或物理环境准确有效地执行动作。"
同时,Forrester 首席分析师兼《Random Acts of Automation》作者 Craig Le Clair 表示,这一消息与该市场研究公司预测的"2025 年 25% 的机器人项目将结合认知和物理自动化"相符。不过,他说,关于这个公告和其他类似公告是否代表真正的转折点,还是仅仅是大语言模型的又一次尝试,争论仍在继续。
Le Clair 说:"Microsoft 提供了重要的开发者能力,但现在需要在指导富有成效且安全的人机交互方面展现领导力。"
好文章,需要你的鼓励
Docker公司通过增强的compose框架和新基础设施工具,将自己定位为AI智能体开发的核心编排平台。该平台在compose规范中新增"models"元素,允许开发者在同一YAML文件中定义AI智能体、大语言模型和工具。支持LangGraph、CrewAI等多个AI框架,提供Docker Offload服务访问NVIDIA L4 GPU,并与谷歌云、微软Azure建立合作。通过MCP网关提供企业级安全隔离,解决了企业AI项目从概念验证到生产部署的断层问题。
中科院联合字节跳动开发全新AI评测基准TreeBench,揭示当前最先进模型在复杂视觉推理上的重大缺陷。即使OpenAI o3也仅获得54.87%分数。研究团队同时提出TreeVGR训练方法,通过要求AI同时给出答案和精确定位,实现真正可追溯的视觉推理,为构建更透明可信的AI系统开辟新路径。
马斯克的AI女友"Ani"引爆全球,腾讯RLVER框架突破情感理解边界:AI下半场竞争核心已转向对人性的精准把握。当技术学会共情,虚拟陪伴不再停留于脚本应答,而是通过"心与心的循环"真正理解人类孤独——这背后是强化学习算法与思考模式的化学反应,让AI从解决问题转向拥抱情感。
PyVision是上海AI实验室开发的革命性视觉推理框架,让AI系统能够根据具体问题动态创造Python工具,而非依赖预设工具集。通过多轮交互机制,PyVision在多项基准测试中实现显著性能提升,其中在符号视觉任务上提升达31.1%。该框架展现了从"工具使用者"到"工具创造者"的AI能力跃迁,为通用人工智能的发展开辟了新路径。