推理模型在AI领域并不少见。许多公司都拥有此类技术,包括OpenAI的GPT-o3和谷歌的Gemini 2.5。但AI图像和视频公司Luma AI刚刚发布了其首款AI推理视频模型Ray3,现已上线可用。
推理模型是一种使用更多计算时间来处理请求并能回过头检查答案的AI模型。通常情况下,推理模型能提供更好的响应,无论是更详细的内容还是更低的错误率。
对于Ray3而言,这种推理能力意味着你可以创建包含更复杂动作序列的AI视频片段。通常,AI视频片段的时长在5到10秒之间。(这是最佳时长——更长的片段往往会很快变得不稳定。)因此在提示词中加入动作序列会留下很大的出错空间。Ray3花费更多时间处理提示词的能力使其能够更好地处理那些更高级的场景。
Luma AI首席执行官Amit Jain表示,推理模型的作用不仅仅是将文本转换为像素。
"它能够评估并说,'哦,这样不好,或者我需要在这方面做得更好,'"他在接受CNET采访时说道。
与聊天机器人的推理模型一样,你可以看到模型工作时采取的步骤。一个新的可视化标注工具会显示模型正在做什么——比如标记需要调整的角色和其他需要保持不变的区域。你也可以使用此功能来标记帧并突出显示你希望在后续提示中进行的更改。
其他升级功能有助于制作更好的视频片段,包括能够以16位HDR生成,这是一种更高分辨率,能为视频片段提供更精细的细节和清晰度。你还可以利用新的草稿模式,让你快速测试想法并以较低分辨率格式生成镜头。Jain解释说,你可以在草稿模式下在20秒内生成片段,然后在准备好时将其升级到高保真分辨率,这大约需要2到5分钟生成时间。
视频创作正成为生成式AI越来越常见的应用。过去一年中,许多大型科技公司都发布了AI视频模型,从Midjourney到谷歌的Veo 3。所有这些模型都旨在增强创作能力,最近的改进包括生成更高质量、包含音频(对于Veo 3)并普遍提升水平以吸引专业创作者和AI爱好者。不过,专业人士对AI生成媒体表达了许多担忧,特别是关于AI模型的训练和部署。艺术家们已经对AI公司提起了多起集体诉讼。Luma AI的隐私政策表示,它可以使用你提供的信息来改进其服务。
Q&A
Q1:Ray3推理视频模型有什么特别之处?
A:Ray3是Luma AI首款AI推理视频模型,它能够使用更多计算时间处理请求并检查答案,这使得它能够创建包含更复杂动作序列的AI视频片段,比传统AI视频模型处理高级场景的能力更强。
Q2:Ray3的可视化标注工具是如何工作的?
A:可视化标注工具会显示模型工作时采取的步骤,比如标记需要调整的角色和其他需要保持不变的区域。用户也可以使用此功能来标记帧并突出显示希望在后续提示中进行的更改。
Q3:Ray3的草稿模式有什么好处?
A:草稿模式让用户快速测试想法并以较低分辨率格式生成镜头,可以在20秒内生成片段,然后在准备好时将其升级到高保真分辨率,整个高质量生成过程大约需要2到5分钟。
好文章,需要你的鼓励
研究人员基于Meta前首席AI科学家Yann LeCun提出的联合嵌入预测架构,开发了名为JETS的自监督时间序列基础模型。该模型能够处理不规则的可穿戴设备数据,通过学习预测缺失数据的含义而非数据本身,成功检测多种疾病。在高血压检测中AUROC达86.8%,心房扑动检测达70.5%。研究显示即使只有15%的参与者有标注医疗记录,该模型仍能有效利用85%的未标注数据进行训练,为利用不完整健康数据提供了新思路。
西湖大学等机构联合发布TwinFlow技术,通过创新的"双轨道"设计实现AI图像生成的革命性突破。该技术让原本需要40-100步的图像生成过程缩短到仅需1步,速度提升100倍且质量几乎无损。TwinFlow采用自我对抗机制,无需额外辅助模型,成功应用于200亿参数超大模型,在GenEval等标准测试中表现卓越,为实时AI图像生成应用开辟了广阔前景。
AI云基础设施提供商Coreweave今年经历了起伏。3月份IPO未达预期,10月收购Core Scientific计划因股东反对而搁浅。CEO Michael Intrator为公司表现辩护,称正在创建云计算新商业模式。面对股价波动和高负债质疑,他表示这是颠覆性创新的必然过程。公司从加密货币挖矿转型为AI基础设施提供商,与微软、OpenAI等巨头合作。对于AI行业循环投资批评,Intrator认为这是应对供需剧变的合作方式。
中山大学等机构联合开发的RealGen框架成功解决了AI生成图像的"塑料感"问题。该技术通过"探测器奖励"机制,让AI在躲避图像检测器识别的过程中学会制作更逼真照片。实验显示,RealGen在逼真度评测中大幅领先现有模型,在与真实照片对比中胜率接近50%,为AI图像生成技术带来重要突破。