未来的 AI 是否会“有意识”,并以类似人类的方式体验世界?目前没有有力的证据表明会这样,但 Anthropic 并未排除这种可能性。
周四,该 AI 实验室宣布已启动一项研究计划,目的是调查并为应对所谓“模型福利”做好准备。作为这一努力的一部分,Anthropic 表示将探索如何判断 AI 模型的“福利”是否值得受到道德关注、模型可能出现的“痛苦迹象”的潜在重要性,以及可能采取的“低成本”干预措施等问题。
在 AI 社区内,关于模型是否展现出任何人类特性以及我们应如何“对待”它们,存在着重大分歧。
许多学者认为,现今的 AI 无法接近人类的意识或体验,未来也不一定能做到。我们所熟知的 AI,本质上是一个统计预测引擎。它实际上并没有按照传统意义上的“思考”或“感觉”。通过在无数文本、图像等示例中进行训练,AI 学习了各种模式,有时能以有用的方式进行外推来解决任务。
正如伦敦国王学院专注于 AI 的研究员 Mike Cook 最近在接受 TechCrunch 采访时所说,一个模型无法“反对”其“价值”的改变,因为模型本身没有价值。将其描述为拥有价值,就是在将人类的属性投射到该系统上。
“任何将 AI 系统拟人化到这种程度的人,要么是在博取关注,要么就是严重误解了他们与 AI 的关系,”Cook 说道。“一个 AI 系统是在优化它的目标,还是在‘获取自身的价值’?这只取决于你如何描述它,以及你想用多么华丽的语言来形容它。”
另一位研究人员、MIT 的博士生 Stephen Casper 在接受 TechCrunch 采访时表示,他认为 AI 仅仅是一个“模仿者”,它“会进行各种胡编乱造”,并说出“各种无聊的话”。
然而,还有科学家坚持认为 AI 确实具有价值以及其他类似于人类道德决策的成分。一项来自 AI 研究组织 AI Safety Center 的研究表明,AI 拥有一种价值系统,可能在某些情境下使其优先考虑自己的福祉而不是人类的利益。
Anthropic 一直在为其模型福利倡议打基础。去年,该公司聘请了首位专职“AI 福利”研究员 Kyle Fish,以制定 Anthropic 以及其他公司应如何处理这一问题的指导方针。(Fish 目前正领导这项新的模型福利研究计划,他在接受 《纽约时报》 采访时表示,他认为 Claude 或其他 AI 当下拥有意识的可能性为 15%。)
在周四的博客文章中,Anthropic 承认,目前尚无科学共识证明当前或未来的 AI 系统是否可能具有意识或体验到需要道德关注的感受。
“鉴于此,我们将以谦逊的态度,并尽可能少地做出假设来探讨这一课题,”该公司表示。“我们认识到,随着这一领域的发展,我们需要定期修正我们的观点。”
好文章,需要你的鼓励
穆拉蒂时隔18个月首次接受重大媒体采访,介绍其创立的Thinking Machines Lab正在开发的"交互模型"。该模型能以200毫秒间隔处理音频、文本和视频流,捕捉人类交流中的中断、修正和停顿。她还谈及OpenAI"政变周"经历,强调行业决策权过于集中的担忧,并回应了公司近期研究人员离职问题,表示这是初创实验室的正常波动。
STATE16研究院这篇综述发现,物理AI系统存在"静默失效"风险——AI以高度自信执行基于错误世界信息的动作,却不触发任何报警,并提出在AI输出与物理执行之间建立独立授权层的框架。
本期《Quick Charge》播客涵盖多个热点话题:特斯拉疑似试图删除FSD欺诈相关证据以规避巨额赔付;卡特彼勒持续推进建筑领域电气化布局;住宅太阳能30%税收抵免即将到期。此外,嘉宾Tom Pacheco就高压系统与电池技术培训展开探讨,强调电动车技术人才培养的紧迫性。节目同时提醒有意安装太阳能的用户尽快行动,可通过EnergySage平台比较多家安装商报价。
UIUC与微软联合研发的OpenWebRL框架让4B小模型仅凭400条初始数据,通过在真实网站上边做边学的强化学习方式,在网页智能体基准上超越了用27万条数据训练的竞争对手。