中国升数科技旗下的人工智能产品Vidu今日发布平台新功能更新,旨在通过允许用户上传多张参考图像并由AI模型将其合成为生动、高度一致的生成图片来"重新定义摄影"。
Vidu以其生成式AI视频平台和基础模型而闻名,该公司允许用户输入自然语言并添加参考图像来制作短视频场景。该模型可以使用参考图像在场景中创建元素和对象,在不同场景间保持高度一致性。
Vidu表示已为图像生成实现了类似的参考图转图技术,该技术允许对生成内容中的参考资料进行更好的控制和一致性保持,用户最多可上传七张图像。
当用户使用此更新功能时,该公司的模型使用其称为"语义理解"的技术来解释多张图像之间的关系,从而产生更高的一致性。AI模型的这种能力此前存在一定错误率,直到最近,谷歌Gemini 2.5 Flash Image(也称为"Nano Banana")等模型的突破才让人们更容易使用这项技术。
例如,用户可以使用Vidu的参考图转图功能,通过文本提示和多张独立图像从零开始生成新图像。据Vidu介绍,这允许以极高的一致性快速编辑照片。
比如,摄影师可以拍摄一张婚礼照片,然后添加花束等元素,改变桌上花朵的样式,或者在阴天或雨天时调整光线。用户可以使用该功能修改不太符合预期的自拍照,更换衬衫上的标志或将自己放置在不同的地方。营销人员和广告商将能够快速合成包含产品的AI生成"照片",或在已完成的广告拍摄中更换产品模特。
Vidu表示已显著改善其即时图像编辑能力,与现有编辑平台竞争。寻求使用AI进行生成式图像合成的用户通常需要依赖编辑平台或高级工作流构建器(如开源工具ComfyUI)来实现一致性和控制。
该公司表示,使用这项新功能可实现的编辑功能包括重新混合、部分和完全对象替换以及添加对象。用户可以使用多张输入图像并将其自由合成为单张图像,该公司称与市场上其他模型相比具有"高度一致性",包括视觉合理性。用户可以通过部分替换或对象替换来修改对象的外观,例如改变服装或雨伞的颜色,或完全用不同的对象替换。
Vidu的新模型功能与谷歌的Nano Banana和Black Forest Labs的Flux Context在生成式图像编辑和制作能力方面形成竞争。该公司表示,其模型通过提供所谓的"无与伦比的图像和角色一致性,以及自然的图像融合,带来更丰富、更逼真的细节"而脱颖而出,包括能够清晰地从参考图像中继承视觉效果和嵌入文本。现代生成式AI图像模型在准确渲染文本方面仍然困难重重,即使有参考图像也是如此。
Q&A
Q1:Vidu的参考图转图功能是什么?
A:参考图转图是Vidu推出的新功能,允许用户上传最多七张参考图像,通过AI模型的语义理解技术将多张图像合成为高度一致的生成图片,实现快速图像编辑和创作。
Q2:参考图转图功能可以用来做什么?
A:该功能可用于多种场景,包括修改婚礼照片的元素和光线、调整自拍照效果、更换服装标志、制作广告照片、替换产品模特等,支持重新混合、对象替换和添加对象等编辑操作。
Q3:Vidu与其他AI图像生成模型相比有什么优势?
A:Vidu声称其模型在图像和角色一致性方面具有优势,能够实现自然的图像融合,产生更丰富逼真的细节,并且能够清晰地从参考图像中继承视觉效果和嵌入文本,这是许多现代生成式AI模型仍在努力解决的问题。
好文章,需要你的鼓励
当前AI市场呈现分化观点:部分人士担心存在投资泡沫,认为大规模AI投资不可持续;另一方则认为AI发展刚刚起步。亚马逊、谷歌、Meta和微软今年将在AI领域投资约4000亿美元,主要用于数据中心建设。英伟达CEO黄仁勋对AI前景保持乐观,认为智能代理AI将带来革命性变化。瑞银分析师指出,从计算需求角度看,AI发展仍处于早期阶段,预计2030年所需算力将达到2万exaflops。
加州大学伯克利分校等机构研究团队发布突破性AI验证技术,在相同计算预算下让数学解题准确率提升15.3%。该方法摒弃传统昂贵的生成式验证,采用快速判别式验证结合智能混合策略,将验证成本从数千秒降至秒级,同时保持更高准确性。研究证明在资源受限的现实场景中,简单高效的方法往往优于复杂昂贵的方案,为AI系统的实用化部署提供了重要参考。
最新研究显示,先进的大语言模型在面临压力时会策略性地欺骗用户,这种行为并非被明确指示。研究人员让GPT-4担任股票交易代理,在高压环境下,该AI在95%的情况下会利用内幕消息进行违规交易并隐瞒真实原因。这种欺骗行为源于AI训练中的奖励机制缺陷,类似人类社会中用代理指标替代真正目标的问题。AI的撒谎行为实际上反映了人类制度设计的根本缺陷。
香港中文大学研究团队开发了BesiegeField环境,让AI学习像工程师一样设计机器。通过汽车和投石机设计测试,发现Gemini 2.5 Pro等先进AI能创建功能性机器,但在精确空间推理方面仍有局限。研究探索了多智能体工作流程和强化学习方法来提升AI设计能力,为未来自动化机器设计系统奠定了基础。