iOS 27中最令人眼前一亮的新功能,是一项堪比科幻电影《银翼杀手》的全新照片编辑模式。只需轻轻一按,一张静态照片便能变得可交互——你可以调整拍摄角度,让画面呈现出3D效果,甚至稍微改变视角,周围的环境也会随之重新渲染生成。
作为一名多年来深度使用VR/AR设备、同时也是Apple Vision Pro重度用户,笔者在观看苹果WWDC 2026开发者大会的发布环节时,立刻意识到了这背后的技术脉络。这项功能实际上是苹果对其早已在打磨的3D工具的一次扩展与延伸,且以令人着迷的方式向外拓展。正如那张可倾斜视角的空间重构照片——笔者目前已在iOS 27开发者测试版上亲自体验——不禁好奇,下一个转角还藏着什么。
而这一切,远不止是照片编辑那么简单。
迈向可扫描世界的第一步
苹果用于实现上述3D效果的技术,名为"高斯泼溅"(Gaussian Splatting)。这正是让用户在Vision Pro头显上生成3D个人虚拟形象(Persona Avatar)的同款AI技术,也是苹果地图如今能够呈现更为清晰逼真的3D地图的幕后功臣。这项技术近年来持续演进,已能将3D物体、真实环境乃至视频,转化为令人信服的可漫游虚拟世界。
Vision Pro上已有不少应用展示了覆盖整个城市街区的高斯泼溅场景——将真实空间捕捉并转化为令人叹为观止的虚拟世界。事实上,笔者今年冬天曾在Polys Awards颁奖典礼上为其中的优秀作品颁奖(获奖作品Pfarrkirche Kefermarkt的截图附于文中,可供欣赏)。Meta的Quest头显同样支持扫描用户所在空间,并利用这项技术生成可行走的3D复现场景,效果同样震撼。
在笔者看来,这代表着摄影与视频的未来走向,也将改变我们记录和重温记忆的方式。但目前,苹果尚未将这项技术直接引入原生相机应用。
苹果正在以循序渐进的方式推进高斯泼溅技术的落地。今年WWDC上,苹果在iOS的"空间重构"功能中展示了这一技术;同时,Vision Pro新增了全景照片转换工具,可将此前拍摄的全景图转化为360度沉浸式3D环境,让用户在其中办公或创作;此外,苹果还对3D地图视图进行了升级——尽管尚未将其带入Vision Pro的沉浸式模式,但去年三星Galaxy XR头显上的谷歌3D地图已足够令人印象深刻。
各项技术正在悄然汇聚
笔者去年曾与苹果Vision团队就Vision Pro上的Persona虚拟形象功能进行深入交流,当时苹果首次披露了高斯泼溅作为这项精准面部捕捉技术核心引擎的细节。此次iOS 27与VisionOS 27的新功能同样沿用了相同的高斯泼溅模型,但实现了新的应用效果。
在笔者看来,"空间重构"功能与去年可将照片转化为空间场景并在Vision Pro上以令人惊叹的立体效果呈现的功能颇为相似,区别在于交互性更强——无论是在Vision Pro上点头,还是前后倾斜手机,都能感受到3D视差效果。当然,这项功能也存在类似的局限:无法真正深入照片内部,也无法实现360度全方位旋转,只能在AI推算出的有限角度范围内进行切换。
不过,能够重新固定视角并将其永久保存,是一项全新的功能。这种可控感,让笔者有种步入完整3D高斯泼溅场景的真实体验。
当然,要构建更大范围的扫描场景,需要更多照片进行拼接融合。这或许正是苹果下一步的方向——毕竟已有不少开发者在其他平台上率先实现了这一点。
笔者期待苹果能提供一种方式,将同一地点的多张照片自动拼合成完整场景,甚至重建一个可以行走其中的空间。VisionOS 27中新增的全景转换工具虽然笔者尚未亲测,但已在某种程度上接近这一目标——只是目前还停留在"环绕体验"阶段,尚不支持真正的空间漫步。
笔者相信这一天终将到来。但苹果首先需要推出真正价格亲民的沉浸式眼镜或头显,而苹果的智能眼镜产品最早也要等到明年,且初代产品可能甚至不配备显示屏。不过,售价3500美元的Vision Pro已完全具备进行全房间扫描的能力,苹果完全可以通过原生应用加以实现;iPhone的相机功能也有望持续进化。
归根结底,这将是沉浸式视频与照片真正意义上的未来。而眼下,我们已经能够从这些散落在各处的细节中,隐约瞥见它的轮廓。
Q&A
Q1:苹果"空间重构"功能是什么?能实现什么效果?
A:空间重构是iOS 27新增的照片编辑功能,基于高斯泼溅(Gaussian Splatting)AI技术,可以将一张普通静态照片转化为可调整视角的3D图像。用户可以在一定角度范围内自由旋转视角,AI会自动推算并生成超出原始画面范围的环境内容,还可以将新视角固定保存。
Q2:高斯泼溅技术在苹果产品中还有哪些应用?
A:高斯泼溅技术在苹果生态中已有多处应用:一是Vision Pro上的Persona虚拟形象,通过该技术实现高精度面部3D捕捉;二是苹果地图的3D视图,画面更清晰逼真;三是VisionOS 27新增的全景照片转换工具,可将普通全景图转为360度沉浸式3D环境。苹果正在多个方向上逐步推进这项技术的落地。
Q3:苹果未来会不会推出扫描真实空间并生成可行走虚拟场景的功能?
A:目前苹果尚未推出此类功能,但技术基础已基本具备。Vision Pro硬件完全有能力实现全房间级别的3D扫描,VisionOS 27的全景转换工具也在朝这个方向迈进。不过,要让更多用户体验到这类功能,苹果还需要推出价格更亲民的头显或智能眼镜产品,预计最早也要等到明年。
好文章,需要你的鼓励
欧洲量子计算初创公司Alice & Bob正式推出其首款完整量子硬件平台——Helium量子系统,标志着该公司从量子芯片制造商升级为完整系统开发商。该系统基于独特的"猫量子比特"架构,仅需18个猫量子比特即可实现首个逻辑量子比特的编码,并集成了处理器架构、控制电子设备及监控软件Starboard。系统功耗仅40千瓦,支持量子与经典计算资源的协同部署,面向高性能计算场景开放研究合作。
本研究发现AI视频生成中物理幻觉的根源是去噪过程中的相位侵蚀,并提出免训练方法PhaseLock,用两步推理的运动先验引导完整生成,物理一致性平均提升6.2分。
Intuit首席AI官Ashok Srivastava对外界盛传的"AI颠覆SaaS"论调保持冷静,认为SaaS行业的演变本是持续循环的一部分。他表示,公司通过引入AI智能体,过去一年开发速度提升40%,五年内开发效率提升12倍。QuickBooks Live订阅量因AI加入翻倍增长,QuickBooks Capital平台同比增长73%。Srivastava同时强调,Intuit拒绝"Token最大化"策略,坚持以服务客户为核心,在合规监管环境下稳步推进AI落地。
本研究测试了5种AI适配方法在11种音乐风格和弦预测上的表现,发现和弦符号确能携带风格信息但不完整,控制词条与完整适配器效果相当。