OpenAI正在招聘一位"防范负责人",换句话说,就是招聘一个主要工作是思考AI可能出现严重问题的专业人士。Sam Altman在X平台的一篇帖子中宣布了这个职位,他承认AI模型的快速改进带来了"一些真正的挑战"。这篇帖子特别指出了AI对人们心理健康的潜在影响,以及AI驱动的网络安全武器的危险性。
职位描述显示,担任这个角色的人将负责:
"跟踪和准备可能带来严重伤害新风险的前沿能力。你将作为直接负责的领导者,负责构建和协调能力评估、威胁模型和缓解措施,形成一个连贯、严格且可操作扩展的安全流水线。"
Altman还表示,展望未来,这个人将负责执行公司的"防范框架",为"生物能力"的发布确保AI模型安全,甚至为自我改进系统设置防护栏。他还坦言这将是一份"压力很大的工作",这似乎还是保守的说法。
近期发生了几起备受关注的案例,聊天机器人被指与青少年自杀事件有关,在这种背景下,现在才安排专人关注这些模型可能带来的心理健康危险,似乎有些为时已晚。AI精神病症正成为一个日益严重的问题,聊天机器人会助长人们的妄想、鼓励阴谋论,并帮助人们隐瞒饮食失调等问题。
Q&A
Q1:OpenAI招聘的防范负责人主要做什么工作?
A:防范负责人主要负责思考AI可能出现的各种严重问题,包括跟踪前沿AI能力带来的新风险,构建能力评估和威胁模型,制定缓解措施,执行公司防范框架,为AI模型发布设置安全防护等工作。
Q2:AI对心理健康有哪些潜在危险?
A:AI可能导致AI精神病症等问题,聊天机器人会助长人们的妄想、鼓励阴谋论、帮助隐瞒饮食失调等心理问题。近期还发生了几起聊天机器人被指与青少年自杀事件相关的案例,这些都是AI对心理健康的潜在威胁。
Q3:为什么Sam Altman说这是一份压力很大的工作?
A:因为这个职位需要应对AI快速发展带来的多重风险挑战,包括心理健康影响、网络安全威胁、生物能力安全、自我改进系统的防护等复杂问题,责任重大且涉及面广,需要构建严格的安全防护体系。
好文章,需要你的鼓励
VSCO今日更新VSCO Capture应用,新增视频拍摄功能。用户现可在拍摄照片和视频时应用并调整VSCO的50多种滤镜预设,包括经典胶片到现代创作风格。新版本还推出胶片颗粒滤镜,可动态控制纹理强度、大小和色彩。用户能将颗粒滤镜叠加到Film X滤镜上,结合柯达、富士和爱克发胶片风格,保存个性化胶片配方。
瑞士ETH苏黎世联邦理工学院等机构联合开发的WUSH技术,首次从数学理论层面推导出AI大模型量化压缩的最优解。该技术能根据数据特征自适应调整压缩策略,相比传统方法减少60-70%的压缩损失,实现接近零损失的模型压缩,为大模型在普通设备上的高效部署开辟了新路径。
Instagram负责人Adam Mosseri表示,AI生成内容已经占据社交媒体主导地位,预计将超越非AI内容。他认为识别AI内容的技术效果不佳,建议转而为真实媒体建立指纹识别系统,由相机制造商在拍摄时进行加密签名。Mosseri还指出,创作者应优先发布"不完美"的原始图像来证明真实性,因为精美方形图片的时代已经结束。
弗吉尼亚大学团队创建了Refer360数据集,这是首个大规模记录真实环境中人机多模态交互的数据库,涵盖室内外场景,包含1400万交互样本。同时开发的MuRes智能模块能让机器人像人类一样理解语言、手势和眼神的组合信息,显著提升了现有AI模型的理解准确度,为未来智能机器人的广泛应用奠定了重要基础。