苹果的新AI照片编辑工具大多能用,有好有坏
苹果在iOS 27中首次为iPhone带来了真正的AI照片编辑功能,包括改进的Clean Up、Extend和Spatial Reframing。Clean Up现在能在云端处理,效果显著提升;Extend可以扩展照片边缘,但限制较多;Spatial Reframing通过添加三维空间来重新构图,但有时会产生不真实的结果。这些工具都会添加AI修改标签,但标签效果有限。整体而言,苹果的AI编辑相对克制,但仍引发了对照片真实性的担忧。
全球最常用的相机刚刚获得了首批严肃的AI照片编辑功能,我认为我们都没有准备好。
就AI照片编辑而言,iOS 27的新功能相比谷歌Pixel手机等设备上的功能还算温和。但对于iPhone来说,它们标志着原生照片应用允许用户对照片进行编辑的一个转折点。我的意思是回忆。我是说,我自己都不确定了。
这些新功能目前是iOS 27开发者测试版的一部分,请注意,苹果在面向公众发布之前可能继续进行调整。本次更新有三个(或者两个半)新的AI编辑功能。新的Clean Up工具算半个,因为它以前就存在,但效果太差,几乎不算数。那是让你从照片背景中移除不速之客的工具,今年它得到了重大升级。还有Extend,让你使用AI在边缘画入一些看起来合理的填充内容来扩展照片边缘。还有Spatial Reframing,它模拟移动相机环绕场景的效果,让你重新构图现有照片。这是三者中最雄心勃勃也可能是最成问题的一个。
但首先说说Clean Up。它现在确实很好用了。它不再仅使用本地模型来移除物体和填充细节,现在还可以使用云端更强大的模型。这是谷歌多年来一直在做的事情,也是为什么谷歌的Magic Editor工具远胜于苹果去年推出的版本。完全本地的Clean Up在绘制令人信服的细节来替换移除内容方面表现不佳。它会留下奇怪的伪影,通常得不偿失。Clean Up 2.0?它胜任了工作。
使用AI从照片中移除东西是我最不感到不安的生成式编辑工具。我会用来移除孩子鼻子上的鼻屎或从背景中移除陌生人。iOS中这个新版本毫无问题地完成了所有这些,我认为它会在iPhone用户中流行起来。
上升到下一个复杂性和“何为照片”的层次,有Extend。将其视为反向裁剪。它让你扩展画面边缘,如果你构图过于紧凑,想给主体多一点空间,可能会用上。Extend允许你这样做,但仅限于一定程度。它似乎避免编辑人物,有时会告诉你照片只能向特定方向扩展。它也只添加少量填充,这最大限度地减少了可能被滥用的花样。我很欣赏这一点。像Clean Up一样,它令人信服地完成了工作。它似乎倾向于寻找对称性,这通常有效。它添加了原始图像中画框外的一部分拉力赛车,添加了一个与已有的后视镜相匹配的侧镜。
它似乎不像三星早期那样热衷于在照片中编造内容。但我确实发现它在一个边桌上添加了一盆盆栽植物;看起来相当令人信服,但我知道那不是真的植物。如果我把那张照片放在Instagram上,我会感到奇怪。
Extend在二维空间中处理照片;Spatial Reframing增加了第三个维度。它基于现有功能使照片看起来有点3D效果,允许你重新构图,就好像你物理移动了相机并改变了对场景的视角。你不能走得太远——只能大致达到最初拍照时手臂能移动的范围。但想法是如果你拍照时没有完全对准,可以修正构图。
这很符合我的A型性格。有时我对我拍的照片什么都喜欢,除了如果我能向左挪一步,避免在主体前有分散注意力的东西不是更好吗?你不可能总是实时捕捉到这些。这些正是Spatial Reframing设计用于的细微调整。
看起来合理,但即使微小的调整也有引入存在混乱的空间。我试着重新构图为在WWDC主题演讲后与苹果高管举行的技术讲座上拍的一张照片。因为我坐在旁边,台上的一个高管在原始照片中大部分被遮挡。我改变了构图,AI基本上编造了一个坐在Craig Federighi旁边的人。
预测二维空间中应该出现什么似乎比三维空间容易。Spatial Reframing与Extend的结果反映了这一点。它们更奇怪。离主体越远,“重新构图”的余地越小,AI生成的内容越逼真。但最终得到的图像与你实际拍的照片只有微妙差异,那我们在做什么呢?
在拍摄距离较近的照片中,事情变得奇怪。“重新构图”的效果更显著,AI需要更努力填补缝隙。你可以改变自拍中的视角,但这意味着AI需要在你的脸上填补更多细节,这很快会进入恐怖谷。即使在其有限的调整范围内,它也会使面部看起来略为扭曲和“不对劲”。它更容易凭空编造东西。当然,能够从不完美的构图中挽救照片听起来不错。但在实践中,我不认为我喜欢它。
一个小的安慰是,用这些AI工具编辑的图像会获得Synth ID标签,表明它们已被AI修改。当我上传图片时,Instagram会识别这些信息,但只有点击该图片的“AI信息”菜单时才会显示。标签目前并非一个万无一失的解决方案,我认为更大的危险是,我们通常可以信任某人从手机上拍摄和发布的照片的观念正在迅速瓦解。苹果当然不是这里最激进的参与者。但哪怕引入一点点关于边桌上盆栽植物来源的怀疑,或者某人是否真的站在他们拍照时所处位置的怀疑,长此以往都会积累成很多麻烦。
摄影:Allison Johnson / The Verge