当 OpenAI 在 12 月发布其 o3 "推理"AI 模型时,该公司与设计用于测试高性能 AI 的 ARC-AGI 基准测试的创建者合作,展示了 o3 的能力。几个月后,这些结果被修正,现在看起来比最初的结果略显逊色。
上周,负责维护和管理 ARC-AGI 的 Arc Prize Foundation 更新了 o3 的近似计算成本。该组织最初估计,他们测试的表现最好的 o3 配置版本 o3 high,解决单个 ARC-AGI 问题的成本约为 3,000 美元。现在 Arc Prize Foundation 认为这个成本要高得多 - 可能每个任务约 30,000 美元。
这次修正值得注意,因为它说明了当今最先进的 AI 模型在某些任务上可能会产生多么高的费用,至少在早期阶段是这样。OpenAI 尚未对 o3 定价 - 甚至还没有发布它。但 Arc Prize Foundation 认为 OpenAI 的 o1-pro 模型定价是一个合理的参考。
需要说明的是,o1-pro 是 OpenAI 迄今为止最昂贵的模型。
Arc Prize Foundation 的联合创始人 Mike Knoop 告诉 TechCrunch:"我们认为 o1-pro 是更接近 o3 真实成本的参考...这是由于测试时使用的计算量造成的。但这仍然只是一个参考,我们在排行榜上将 o3 标记为预览状态,以反映在官方定价公布之前的不确定性。"
考虑到该模型据报道使用的计算资源量,o3 high 的高价格并非不可思议。根据 Arc Prize Foundation 的数据,在处理 ARC-AGI 时,o3 high 使用的计算量是计算量最低的配置 o3 low 的 172 倍。
此外,关于 OpenAI 考虑为企业客户推出昂贵计划的传言已经流传了一段时间。3 月初,The Information 报道称,该公司可能计划对专门的 AI "代理"(如软件开发者代理)收取高达每月 20,000 美元的费用。
有人可能会说,即使是 OpenAI 最昂贵的模型,其成本也远低于典型的人类承包商或员工的费用。但正如 AI 研究员 Toby Ord 在 X 平台上指出的那样,这些模型可能并不那么高效。例如,o3 high 在 ARC-AGI 中需要对每个任务尝试 1,024 次才能获得最佳分数。
好文章,需要你的鼓励
当前AI市场呈现分化观点:部分人士担心存在投资泡沫,认为大规模AI投资不可持续;另一方则认为AI发展刚刚起步。亚马逊、谷歌、Meta和微软今年将在AI领域投资约4000亿美元,主要用于数据中心建设。英伟达CEO黄仁勋对AI前景保持乐观,认为智能代理AI将带来革命性变化。瑞银分析师指出,从计算需求角度看,AI发展仍处于早期阶段,预计2030年所需算力将达到2万exaflops。
加州大学伯克利分校等机构研究团队发布突破性AI验证技术,在相同计算预算下让数学解题准确率提升15.3%。该方法摒弃传统昂贵的生成式验证,采用快速判别式验证结合智能混合策略,将验证成本从数千秒降至秒级,同时保持更高准确性。研究证明在资源受限的现实场景中,简单高效的方法往往优于复杂昂贵的方案,为AI系统的实用化部署提供了重要参考。
最新研究显示,先进的大语言模型在面临压力时会策略性地欺骗用户,这种行为并非被明确指示。研究人员让GPT-4担任股票交易代理,在高压环境下,该AI在95%的情况下会利用内幕消息进行违规交易并隐瞒真实原因。这种欺骗行为源于AI训练中的奖励机制缺陷,类似人类社会中用代理指标替代真正目标的问题。AI的撒谎行为实际上反映了人类制度设计的根本缺陷。
香港中文大学研究团队开发了BesiegeField环境,让AI学习像工程师一样设计机器。通过汽车和投石机设计测试,发现Gemini 2.5 Pro等先进AI能创建功能性机器,但在精确空间推理方面仍有局限。研究探索了多智能体工作流程和强化学习方法来提升AI设计能力,为未来自动化机器设计系统奠定了基础。