Adobe正在更新其AI视频生成应用Firefly,新增了支持精确提示词编辑的视频编辑器,同时添加了更多第三方模型用于图像和视频生成,包括Black Forest Labs的FLUX.2和Topaz Astra。
此前,Firefly仅支持基于提示词的生成功能,如果视频的任何部分不符合要求,用户必须重新创建整个片段。有了新的编辑器,用户可以使用文本提示词来编辑视频元素、颜色和摄像机角度,还新增了时间轴视图,让用户能够轻松调整帧、声音和其他特性。
该公司首次在10月份宣布了这个新的视频编辑器的私人测试版,现在正向所有用户推出。
该公司表示,使用Runway的Aleph模型,用户可以给Firefly具体的指令,比如"将天空改为阴天并降低对比度"或"稍微放大主要对象"。
通过Adobe自己的Firefly Video模型,用户现在可以上传起始帧和摄像机运动的参考视频,并告诉它为正在处理的视频重现该摄像机角度。
该公司还表示,用户现在可以使用Topaz Labs的Astra模型将视频升级到1080p或4K。Black Forest Labs的FLUX.2图像生成模型也即将加入该应用,同时还有协作板功能。
该公司表示,FLUX.2将立即在各平台的Firefly上可用,Adobe Express用户将能够从1月份开始使用FLUX.2。
随着竞争对手发布新的图像和视频生成模型,Adobe希望吸引用户更多地使用其应用。除了Firefly应用的新更新外,该公司表示Firefly Pro、Firefly Premium、7000积分和50000积分计划的订阅者将在1月15日之前获得所有图像模型和Adobe Firefly Video模型在Firefly应用中的无限生成。
Adobe今年对其Firefly模型和应用进行了大量改进。2月份,该公司推出了让用户访问各种级别图像和视频生成的订阅服务;然后在年内推出了新的Firefly网页应用和移动应用,并在Firefly应用中添加了对更多第三方模型的支持。
Q&A
Q1:Adobe Firefly新增的视频编辑功能有什么特点?
A:新的视频编辑器支持基于提示词的精确编辑,用户可以使用文本提示词来编辑视频元素、颜色和摄像机角度,还新增了时间轴视图让用户轻松调整帧、声音等特性。不再需要因为部分不满意而重新创建整个视频片段。
Q2:Firefly现在支持哪些第三方模型?
A:Firefly新增了多个第三方模型支持,包括Runway的Aleph模型用于视频编辑指令,Topaz Labs的Astra模型用于将视频升级到1080p或4K,以及Black Forest Labs的FLUX.2图像生成模型。
Q3:Adobe为什么要在Firefly中集成这么多第三方模型?
A:随着竞争对手不断发布新的图像和视频生成模型,Adobe希望通过集成更多优质的第三方模型来吸引用户更多地使用其Firefly应用,提升产品竞争力和用户粘性。
好文章,需要你的鼓励
穆拉蒂时隔18个月首次接受重大媒体采访,介绍其创立的Thinking Machines Lab正在开发的"交互模型"。该模型能以200毫秒间隔处理音频、文本和视频流,捕捉人类交流中的中断、修正和停顿。她还谈及OpenAI"政变周"经历,强调行业决策权过于集中的担忧,并回应了公司近期研究人员离职问题,表示这是初创实验室的正常波动。
STATE16研究院这篇综述发现,物理AI系统存在"静默失效"风险——AI以高度自信执行基于错误世界信息的动作,却不触发任何报警,并提出在AI输出与物理执行之间建立独立授权层的框架。
本期《Quick Charge》播客涵盖多个热点话题:特斯拉疑似试图删除FSD欺诈相关证据以规避巨额赔付;卡特彼勒持续推进建筑领域电气化布局;住宅太阳能30%税收抵免即将到期。此外,嘉宾Tom Pacheco就高压系统与电池技术培训展开探讨,强调电动车技术人才培养的紧迫性。节目同时提醒有意安装太阳能的用户尽快行动,可通过EnergySage平台比较多家安装商报价。
UIUC与微软联合研发的OpenWebRL框架让4B小模型仅凭400条初始数据,通过在真实网站上边做边学的强化学习方式,在网页智能体基准上超越了用27万条数据训练的竞争对手。