根据近期发布的Power On电子报,苹果用于Genmoji和Image Playground功能的图像生成模型,将在视觉质量方面获得显著提升。就目前而言,这两款工具的表现距离令人满意还差得很远。
此前已有消息称,苹果计划根据用户的相册内容及其他关键信息,为Genmoji提供个性化表情建议。但据科技记者Mark Gurman透露,这并非今年Genmoji唯一的更新方向。他表示,苹果自家模型在视觉质量方面将迎来重大提升:
"此前我曾报道,苹果正准备在iOS 27重新设计的Image Playground应用中,引入除OpenAI ChatGPT之外的第三方AI图像生成模型。而据我最新获悉,事情还不止于此:苹果用于Genmoji和Image Playground的自有模型已经得到改进,今年的图像质量将有大幅跃升。"
Image Playground和Genmoji于iOS 18.2正式亮相时,图像质量实在难言出色。Genmoji的表现尚可接受,但Image Playground的生成效果却相当粗糙,与市面上其他图像生成工具相比差距明显。当然,考虑到市面上已充斥着大量质量低劣的生成式AI应用,这在某种程度上或许无伤大雅。但既然苹果选择推出Image Playground,就不应该以如此低的水准与用户见面。
值得注意的是,Image Playground和Genmoji均依赖设备端本地模型运行。这在一定程度上解释了为何其质量不尽如人意,但并不能成为质量低下的充分理由。无论如何,今年的图像质量预计将有明显改善,不过目前尚不清楚升级后的模型是否仍将继续在设备端本地运行。
此外,苹果还将在Image Playground中引入更多第三方AI图像生成模型的支持。目前该功能仅支持ChatGPT的图像生成能力,未来有望扩展至谷歌的Nano Banana等竞品模型。
Q&A
Q1:苹果的Image Playground和Genmoji目前存在哪些问题?
A:Image Playground和Genmoji于iOS 18.2首次亮相时,图像生成质量普遍较差。Genmoji表现尚可,但Image Playground的效果十分粗糙,与市面上其他主流图像生成工具相比差距明显。两款工具均依赖设备端本地模型运行,这在一定程度上限制了生成质量,但并不能完全为其低水准表现开脱。
Q2:iOS 27中Image Playground和Genmoji会有哪些具体升级?
A:根据Mark Gurman的报道,苹果将对Genmoji和Image Playground的自有图像生成模型进行改进,视觉质量将迎来大幅提升。此外,Image Playground还将引入对第三方AI图像生成模型的支持,目前已支持ChatGPT图像生成,未来预计还会扩展至谷歌Nano Banana等更多竞品模型。
Q3:Image Playground未来是否还会继续使用设备端本地模型运行?
A:目前尚不明确。现阶段Image Playground和Genmoji均依赖设备端本地模型运行,这是影响图像质量的因素之一。iOS 27的升级将带来明显的质量改善,但苹果是否会将模型迁移至云端处理,或继续保持本地运行,目前尚无官方说明。
好文章,需要你的鼓励
腾讯等机构提出ViQ框架,通过两阶段渐进量化训练,让离散视觉编码在多模态理解和图像重建上同时追平连续特征编码器,训练速度最高提升70%。
作者对Chrome、Edge和Firefox三款主流浏览器的内置AI功能进行了实测对比。Chrome依托Gemini提供搜索摘要与提示词保存功能;Edge集成Copilot,可针对网页、PDF及多标签页进行问答;Firefox则支持多款AI聊天机器人,并提供更强的隐私保护。综合体验后,作者最终选择Edge作为AI辅助浏览的首选,但仍以Firefox作为默认浏览器。
香港科技大学与华为联合提出LISA训练方法,通过让副网络对齐"似然分数",将ControlNet等图像生成模型的训练收敛速度提升逾2.78倍,同时改善图像质量与条件控制精度。