电脑操作功能(Computer Use)现已作为内置工具整合至 Gemini 3.5 Flash 中,为智能体执行电脑操作任务带来了迄今为止最强的性能表现。此前,该功能仅作为独立的 Gemini 2.5 电脑操作模型提供,如今已原生集成至 Gemini Flash 主模型之中。
Gemini 本身已在函数调用及搜索、地图等内置工具的使用方面表现出色。随着电脑操作能力的内置化,开发者现在可以借助 3.5 Flash 可靠地构建自定义智能体,使其能够在浏览器、移动端和桌面环境中进行感知、推理并采取行动。这一能力的释放,大幅提升了长周期任务与企业级自动化场景的处理效率,例如持续软件测试以及跨专业应用的知识型工作。
开发者和企业可通过 Gemini API 及 Gemini 企业智能体平台,立即开始使用 3.5 Flash 中的电脑操作功能。
在实际演示中,3.5 Flash 可利用电脑操作功能分析 Gemini 应用,并返回经过分类整理的功能列表;同时还能对自身文档进行无障碍问题审计。
确保 3.5 Flash 电脑操作功能的安全性
为降低智能体在真实环境中运行时面临的提示注入风险,Google 针对 Gemini 3.5 Flash 的电脑操作功能专门开展了定向对抗训练。与此同时,Google 还发布了两项可选的企业级安全防护机制,允许企业:
对敏感或不可逆操作要求用户进行明确确认;
一旦检测到间接提示注入,自动终止当前任务。
基于"纵深防御"理念,Google 建议开发者将上述功能与安全沙箱、人机协同验证及严格访问控制相结合,共同构建多层次防护体系。更多安全措施的详细信息,可参阅官方最佳实践文档。
目前,已有客户通过电脑操作功能实现了实际业务价值。
如需立即开始构建基于电脑操作功能的应用,可通过 Browserbase 托管的演示环境进行测试体验,或通过 Gemini API 及 Gemini 企业智能体平台查阅参考实现与开发文档,快速启动项目。
Q&A
Q1:Gemini 3.5 Flash 的电脑操作功能具体能做什么?
A:Gemini 3.5 Flash 的电脑操作功能允许智能体在浏览器、移动端和桌面环境中进行感知、推理并采取行动。开发者可借助它构建自定义智能体,完成连续软件测试、文档无障碍审计、应用功能分析等长周期和企业级自动化任务,显著提升复杂业务场景下的处理效率。
Q2:Gemini 3.5 Flash 电脑操作功能有哪些安全措施?
A:Google 采用了"纵深防御"策略,主要包括三个层面:一是针对提示注入风险进行定向对抗训练;二是提供两项可选企业级防护机制,分别是对敏感或不可逆操作要求用户明确确认,以及检测到间接提示注入时自动终止任务;三是建议开发者结合安全沙箱、人机协同验证和严格访问控制共同使用。
Q3:开发者如何开始使用 Gemini 3.5 Flash 的电脑操作功能?
A:开发者有两种方式快速上手:一是访问由 Browserbase 托管的演示环境,直接测试电脑操作功能的实际能力;二是通过 Gemini API 或 Gemini 企业智能体平台获取参考实现与开发文档,正式开始构建基于该功能的应用或自动化工作流。
好文章,需要你的鼓励
市场研究公司Klue本月初遭黑客入侵,大量客户数据被窃。Klue表示正与黑客组织Icarus沟通,并相信对方正在删除所盗数据。受影响客户包括Gong、LastPass、HackerOne等多家知名企业。然而事态趋于复杂——另一黑客团伙声称从Icarus处获取了Klue客户数据,并向客户发出勒索威胁。Klue提醒客户勿向第二方支付赎金,并建议索取数据样本以核实其真实性。
KAIST等机构提出3D HAMSTER,通过为视觉语言模型加入深度编码器和几何重建损失,让机器人规划器直接输出三维轨迹,解决了分层机器人系统中规划与执行的维度不匹配问题,显著提升了操作鲁棒性。
苹果公司对OpenAI提起诉讼,指控其窃取商业机密。据披露,前苹果系统电气工程师刘畅(Chang Liu)在离职加入OpenAI后,利用一个此前未知的身份验证零日漏洞,持续数周从苹果内部网络存储中下载大量机密文件,内容涵盖未发布产品信息、工程演示文稿及技术规格等。苹果已修复该漏洞并终止相关访问权限。此案已提交加州北区联邦法院,并要求陪审团审判。
南京大学提出Light-Omni框架,通过全局状态与潜在状态双机制,让AI视频助理无需反复推理即可实现精准记忆检索,速度提升逾12倍,准确率同步提高。