IBM最新报告显示,急于部署AI的企业正在忽视安全和治理问题,攻击者已经开始利用松懈的协议来攻击模型和应用程序。
这些发现来自IBM发布的《2025年数据泄露成本报告》,报告显示,虽然AI相关安全事件目前只占总数的一小部分,但随着企业系统中AI应用的增加,这一比例预计将会增长。
基于2024年3月至2025年2月期间全球600家企业的数据,IBM表示其中13%的企业报告了涉及AI模型或AI应用的安全事件,并导致了违规行为。
在这些遭受泄露的企业中,几乎所有企业(97%)都表示没有建立适当的AI访问控制机制。
约三分之一遭受AI安全事件的企业出现了运营中断,犯罪分子获得了对敏感数据的未授权访问,23%的企业表示因攻击遭受了经济损失,17%的企业声誉受损。
供应链攻击是这些泄露事件的最常见原因,包括被入侵的应用程序、应用程序编程接口(API)和插件。大多数报告AI入侵的企业表示,攻击源头是提供软件即服务(SaaS)的第三方供应商。
IBM的报告特别关注未经授权或所谓的影子AI的危险,这是指在企业内部非正式使用这些工具,而IT或数据治理团队并不知情或未批准。
由于影子AI可能不被企业发现,攻击者利用其漏洞的风险增加。
报告调查发现,大多数企业(87%)没有建立治理机制来缓解AI风险。三分之二的遭受泄露的企业没有进行定期审计来评估风险,超过四分之三的企业报告称没有对其AI模型进行对抗性测试。
这并非首次将安全和治理问题作为企业AI部署的关注点。去年,The Register报道称,许多大型企业暂停了集成使用Microsoft Copilot创建的AI助手和虚拟智能体,因为这些工具会获取员工不应访问的信息。
同样在去年,分析师Gartner估计,到2025年底,至少30%涉及生成式AI的企业项目将在概念验证阶段后被放弃,原因包括数据质量差、风险控制不足、成本上升或业务价值不明确。
IBM的报告显示,许多企业为了部署AI应用,可能因为担心在技术炒作中落后而简单地绕过了安全和治理措施。
IBM安全和运行时产品副总裁Suja Viswesan表示:"报告揭示了AI系统缺乏基本访问控制,使高度敏感的数据暴露,模型容易被操控。随着AI在业务运营中的深度嵌入,AI安全必须被视为基础。不采取行动的代价不仅仅是经济损失,还有信任、透明度和控制力的丧失。数据显示AI采用和监督之间已经存在差距,威胁行为者正开始利用这一点。"
好文章,需要你的鼓励
穆拉蒂时隔18个月首次接受重大媒体采访,介绍其创立的Thinking Machines Lab正在开发的"交互模型"。该模型能以200毫秒间隔处理音频、文本和视频流,捕捉人类交流中的中断、修正和停顿。她还谈及OpenAI"政变周"经历,强调行业决策权过于集中的担忧,并回应了公司近期研究人员离职问题,表示这是初创实验室的正常波动。
STATE16研究院这篇综述发现,物理AI系统存在"静默失效"风险——AI以高度自信执行基于错误世界信息的动作,却不触发任何报警,并提出在AI输出与物理执行之间建立独立授权层的框架。
本期《Quick Charge》播客涵盖多个热点话题:特斯拉疑似试图删除FSD欺诈相关证据以规避巨额赔付;卡特彼勒持续推进建筑领域电气化布局;住宅太阳能30%税收抵免即将到期。此外,嘉宾Tom Pacheco就高压系统与电池技术培训展开探讨,强调电动车技术人才培养的紧迫性。节目同时提醒有意安装太阳能的用户尽快行动,可通过EnergySage平台比较多家安装商报价。
UIUC与微软联合研发的OpenWebRL框架让4B小模型仅凭400条初始数据,通过在真实网站上边做边学的强化学习方式,在网页智能体基准上超越了用27万条数据训练的竞争对手。