Microsoft 刚刚推出了 Magma,这是一款新型人工智能模型,旨在帮助机器人更智能地观察、理解和行动。与传统的 AI 模型不同,Magma 可以同时处理不同类型的数据——Microsoft 称这是朝着"主动式 AI"(即能够代表用户规划和执行任务的系统)迈出的重要一步。
这个结合了视觉和语言处理的模型,通过视频、图像、机器人数据和界面交互进行训练,使其比以往的模型更加多功能。
在其 Github 页面上,Microsoft 研究团队概述了 Magma 如何执行任务,比如操控机器人和导航用户界面(如点击按钮)等功能。
为了开发这项技术,该公司与马里兰大学、威斯康星大学麦迪逊分校和华盛顿大学的研究人员展开合作。
在各大科技巨头竞相开发能够自动化日常生活更多方面的 AI 代理之际,这项技术应运而生。Google 一直在推进面向机器人的语言模型,而 OpenAI 的 Operator 工具则旨在通过在专用浏览器中进行打字、点击和滚动来处理预订、订购杂货和填写表格等日常任务。
该项目的首席研究员杨建伟 (Jianwei Yang) 告诉 CNET,AI 的未来不仅仅是为聊天机器人开发多模态基础模型。
他表示:"我们认为 AI 的下一个重要步骤在于开发能够无缝理解和交互数字和物理环境的代理。"
他说,Magma 的重要性在于其弥合多模态 AI 代理差距的能力,因为传统 AI 模型在语言智能方面表现出色,但在规划和现实世界行动方面往往力不从心。
他解释道:"如今的机器人往往依赖于特定领域数据的特定任务训练,导致它们处理简单日常任务的能力有限,更不用说适应新任务和环境了。Magma 通过显著提升它们的语言和空间智能改变了这一点,使机器人能够基于数字或物理环境准确有效地执行动作。"
同时,Forrester 首席分析师兼《Random Acts of Automation》作者 Craig Le Clair 表示,这一消息与该市场研究公司预测的"2025 年 25% 的机器人项目将结合认知和物理自动化"相符。不过,他说,关于这个公告和其他类似公告是否代表真正的转折点,还是仅仅是大语言模型的又一次尝试,争论仍在继续。
Le Clair 说:"Microsoft 提供了重要的开发者能力,但现在需要在指导富有成效且安全的人机交互方面展现领导力。"
好文章,需要你的鼓励
ChatGPT发布三年后,物理AI成为行业最新热词。物理AI是指在硬件中实现的AI系统,能够感知周围世界并进行推理以执行操作。与传统机器人不同,物理AI具备推理、行动和与环境交互的能力。智能眼镜是物理AI的典型代表,能够看到和听到用户所体验的内容。高通专家指出,AI可穿戴设备可以为机器人提供基于真实人类体验的高质量数据集,形成良性生态系统。
德国弗劳恩霍夫研究院提出ViTNT-FIQA人脸质量评估新方法,无需训练即可评估图像质量。该方法基于Vision Transformer层间特征稳定性原理,通过测量图像块在相邻层级间的变化幅度判断质量。在八个国际数据集上的实验显示其性能可媲美现有最先进方法,且计算效率更高,为人脸识别系统提供了即插即用的质量控制解决方案,有望广泛应用于安防监控和身份认证等领域。
来自加州大学伯克利分校和康奈尔大学的研究团队,通过分析130万篇学术论文发现,使用ChatGPT等AI工具的科学家论文产出平均提升40-60%,且英语非母语研究者受益最大。
布朗大学联合图宾根大学的研究团队通过系统实验发现,AI医疗助手的角色设定会产生显著的情境依赖效应:医疗专业角色在急诊场景下表现卓越,准确率提升20%,但在普通医疗咨询中反而表现更差。研究揭示了AI角色扮演的"双刃剑"特性,强调需要根据具体应用场景精心设计AI身份,而非简单假设"更专业等于更安全",为AI医疗系统的安全部署提供了重要指导。