本周二,OpenAI 发布了新工具,旨在帮助开发者和企业使用该公司的 AI 模型和框架构建 AI 代理 - 这些代理是能够独立完成任务的自动化系统。
这些工具是 OpenAI 新推出的 Responses API 的一部分,企业可以通过该 API 开发自定义 AI 代理,实现网络搜索、公司文件扫描和网站导航等功能,类似于 OpenAI 的 Operator 产品。Responses API 将有效替代 OpenAI 的 Assistants API,后者计划在 2026 年上半年停用。
尽管科技行业还在努力向人们展示或定义"AI 代理"的真正含义,但近年来围绕 AI 代理的热度却显著增长。最近的一个例子是,中国初创公司蝴蝶效应本周早些时候因其新的 AI 代理平台 Manus 而走红,但用户很快发现该平台并未实现公司承诺的许多功能。
换句话说,OpenAI 在 AI 代理领域面临着很大的压力。
OpenAI 的 API 产品负责人 Olivier Godemont 在接受 TechCrunch 采访时表示:"展示 AI 代理的 demo 很容易,但要实现规模化却很困难,让人们经常使用更是难上加难。"
今年早些时候,OpenAI 在 ChatGPT 中引入了两个 AI 代理:能够代表用户浏览网站的 Operator 和能够编写研究报告的深度研究工具。这两个工具展示了代理技术的潜力,但在"自主性"方面仍有待提高。
现在通过 Responses API,OpenAI 希望出售支持 AI 代理的底层组件,让开发者能够构建自己的类似 Operator 和深度研究的代理应用。OpenAI 希望开发者能够使用其代理技术创建比当前更具自主性的应用。
使用 Responses API,开发者可以调用与 OpenAI ChatGPT 搜索工具相同的 AI 模型 (预览版):GPT-4o search 和 GPT-4o mini search。这些模型可以浏览网页寻找问题的答案,并在生成回复时引用来源。
OpenAI 表示,GPT-4o search 和 GPT-4o mini search 具有很高的事实准确性。在该公司的 SimpleQA 基准测试中 (用于衡量模型回答简短事实性问题的能力),GPT-4o search 得分为 90%,GPT-4o mini search 得分为 88% (分数越高越好)。相比之下,OpenAI 最近发布的更大型模型 GPT-4.5 仅得分 63%。
AI 搜索工具比传统 AI 模型更准确并不令人意外 - 理论上,GPT-4o search 可以直接查找正确答案。但是,网络搜索并未完全解决幻觉问题。除了事实准确性之外,AI 搜索工具在处理简短的导航查询时 (如"湖人队今天比分")仍然存在困难,最近的报告也表明 ChatGPT 的引用并不总是可靠的。
Responses API 还包括一个文件搜索工具,可以快速扫描公司数据库中的文件以检索信息 (OpenAI 表示不会使用这些文件训练模型)。此外,使用 Responses API 的开发者可以调用支持 Operator 的 Computer-Using Agent (CUA) 模型。该模型可以生成鼠标和键盘操作,使开发者能够自动化数据输入和应用工作流等计算机使用任务。
OpenAI 表示,企业可以选择在自己的系统上本地运行 CUA 模型 (研究预览版)。Operator 中提供的消费者版 CUA 只能在网络上执行操作。
需要明确的是,Responses API 不会解决当前困扰 AI 代理的所有技术问题。
在博客文章中,OpenAI 表示 CUA 模型"在操作系统任务自动化方面的可靠性尚未达到较高水平",而且容易出现"无意"的错误。
但是,OpenAI 表示这些只是其代理工具的早期版本,公司正在不断改进。
随着 Responses API 一起发布的还有一个名为 Agents SDK 的开源工具包,为开发者提供免费工具,用于将模型与内部系统集成、设置安全措施,以及监控 AI 代理活动以进行调试和优化。Agents SDK 是 OpenAI 去年年底发布的多代理编排框架 Swarm 的一个后续产品。
Godemont 表示,他希望 OpenAI 今年能够弥合 AI 代理演示和产品之间的差距,他认为"代理是 AI 最具影响力的应用"。这呼应了 OpenAI CEO Sam Altman 在一月份的宣言:2025 年将是 AI 代理进入劳动力市场的一年。
无论 2025 年是否真的会成为"AI 代理之年",OpenAI 的最新发布表明该公司希望从炫目的代理演示转向实用的工具。
好文章,需要你的鼓励
阿里团队开发的FantasyPortrait系统突破了传统人像动画的局限,通过隐式表情表示和掩码交叉注意力机制,实现了高质量的单人和多人肖像动画生成,特别在跨身份表情迁移方面表现出色,为视频制作和虚拟交流等领域带来新的技术可能性。
复旦大学研究团队开发的AnyI2V系统实现了从任意条件图像到视频的生成突破。该系统无需训练即可处理多种输入模态(包括3D网格、点云等),支持用户自定义运动轨迹控制,并通过创新的特征注入和语义掩模技术实现了高质量视频生成,为视频创作领域带来了革命性的便利工具。
Akamai坚持“简而未减、网络先行、拥抱开源”的独特定位。凭借“鱼与熊掌兼得”的特色,过去几年,Akamai在电商、流媒体、广告科技、SaaS、金融科技等行业客户中获得了广泛认可。
斯坦福大学研究团队开发了KL-tracing方法,能让视频生成AI模型在无需专门训练的情况下进行精确物体追踪。该方法通过在视频帧中添加微小追踪标记,利用模型的物理理解能力预测物体运动轨迹。在真实场景测试中,相比传统方法性能提升16.6%,展现了大型生成模型在计算机视觉任务中的潜力。