英伟达研究人员开发出一款革命性的常开视觉系统,能够在不到一毫秒的时间内检测到人脸。该系统通过"竞速休眠"技术在视觉处理后节省功耗,为自动驾驶汽车、机器人和消费电子产品提供了新的可能。
超低功耗设计理念
传统的视觉处理系统通常需要约10瓦的功率,这对于持续开启的人脸检测系统来说功耗过高。英伟达的片上系统在60帧每秒的帧率下,功耗仅为5毫瓦。
英伟达电气工程师Ben Keller在旧金山举行的IEEE国际固态电路会议上介绍了这一系统。该系统每16.7毫秒刷新处理一张新图像,但仅在5%的时间内保持全功率运行。在787微秒内,片上系统调用深度学习加速器判断是否存在人脸,准确率约为99%。
Alpha-Vision常开低功耗加速器
英伟达团队精心设计了这一系统,以实现快速检测并节省功耗。片上系统的大部分组件默认处于断电状态,只有一个功耗低于10毫瓦的子系统保持开启状态。这个子系统被称为"常开低功耗加速器",即Alpha-Vision。
竞速休眠技术创新
人脸检测器使用深度神经网络识别人脸,这需要处理大量数据,可能造成功耗流失。为了节省功耗并加快检测速度,所有必要数据都存储在本地的大容量SRAM中,总计达到2兆字节。
SRAM占据了芯片的大量空间。为了防止SRAM漏电成为功耗的主要来源,片上系统集成了深度学习加速器和近内存处理器,能够快速关闭内存组。研究人员将这种方法称为"竞速休眠"。
广阔的应用前景
英伟达团队提出了该系统的几种可能用途。集成人脸传感器的笔记本电脑可以在用户离开时关闭显示屏以节省能源,当用户返回时再次开启,提供无缝体验,无需输入密码。
Keller表示,基于这些设计的系统还可能用于为自动驾驶汽车、无人机和机器人技术提供常开视觉功能。这一技术突破为未来的智能设备和自主系统开辟了新的可能性。
Q&A
Q1:英伟达的常开视觉系统有什么特别之处?
A:英伟达开发的常开视觉系统能在不到一毫秒内检测人脸,功耗仅为5毫瓦,比传统系统的10瓦功耗大幅降低。系统使用"竞速休眠"技术,仅在5%的时间内保持全功率运行,检测准确率达到99%。
Q2:什么是"竞速休眠"技术?
A:"竞速休眠"是英伟达团队开发的节能技术。系统将所有必要数据存储在2兆字节的本地SRAM中,通过集成深度学习加速器和近内存处理器,能够在完成检测后快速关闭内存组,防止SRAM漏电造成功耗浪费。
Q3:这种人脸检测芯片可以应用在哪些设备上?
A:该芯片可应用于多种设备:笔记本电脑可在用户离开时自动关闭屏幕节能,返回时无需密码即可开启;还可用于自动驾驶汽车、无人机和机器人,为这些设备提供常开视觉功能,实现更智能的环境感知。
好文章,需要你的鼓励
腾讯等机构提出ViQ框架,通过两阶段渐进量化训练,让离散视觉编码在多模态理解和图像重建上同时追平连续特征编码器,训练速度最高提升70%。
作者对Chrome、Edge和Firefox三款主流浏览器的内置AI功能进行了实测对比。Chrome依托Gemini提供搜索摘要与提示词保存功能;Edge集成Copilot,可针对网页、PDF及多标签页进行问答;Firefox则支持多款AI聊天机器人,并提供更强的隐私保护。综合体验后,作者最终选择Edge作为AI辅助浏览的首选,但仍以Firefox作为默认浏览器。
香港科技大学与华为联合提出LISA训练方法,通过让副网络对齐"似然分数",将ControlNet等图像生成模型的训练收敛速度提升逾2.78倍,同时改善图像质量与条件控制精度。