蘋果的新AI照片編輯工具大多能用,有好有壞
蘋果在iOS 27中首次為iPhone帶來了真正的AI照片編輯功能,包括改進的Clean Up、Extend和Spatial Reframing。Clean Up現在能在雲端處理,效果顯著提升;Extend可以擴展照片邊緣,但限制較多;Spatial Reframing通過添加三維空間來重新構圖,但有時會產生不真實的結果。這些工具都會添加AI修改標籤,但標籤效果有限。整體而言,蘋果的AI編輯相對剋制,但仍引發了對照片真實性的擔憂。
全球最常用的相機剛剛獲得了首批嚴肅的AI照片編輯功能,我認為我們都沒有準備好。
就AI照片編輯而言,iOS 27的新功能相比谷歌Pixel手機等設備上的功能還算温和。但對於iPhone來説,它們標誌着原生照片應用允許用户對照片進行編輯的一個轉折點。我的意思是回憶。我是説,我自己都不確定了。
這些新功能目前是iOS 27開發者測試版的一部分,請注意,蘋果在面向公眾發佈之前可能繼續進行調整。本次更新有三個(或者兩個半)新的AI編輯功能。新的Clean Up工具算半個,因為它以前就存在,但效果太差,幾乎不算數。那是讓你從照片背景中移除不速之客的工具,今年它得到了重大升級。還有Extend,讓你使用AI在邊緣畫入一些看起來合理的填充內容來擴展照片邊緣。還有Spatial Reframing,它模擬移動相機環繞場景的效果,讓你重新構圖現有照片。這是三者中最雄心勃勃也可能是最成問題的一個。
但首先説説Clean Up。它現在確實很好用了。它不再僅使用本地模型來移除物體和填充細節,現在還可以使用雲端更強大的模型。這是谷歌多年來一直在做的事情,也是為什麼谷歌的Magic Editor工具遠勝於蘋果去年推出的版本。完全本地的Clean Up在繪製令人信服的細節來替換移除內容方面表現不佳。它會留下奇怪的偽影,通常得不償失。Clean Up 2.0?它勝任了工作。
使用AI從照片中移除東西是我最不感到不安的生成式編輯工具。我會用來移除孩子鼻子上的鼻屎或從背景中移除陌生人。iOS中這個新版本毫無問題地完成了所有這些,我認為它會在iPhone用户中流行起來。
上升到下一個複雜性和“何為照片”的層次,有Extend。將其視為反向裁剪。它讓你擴展畫面邊緣,如果你構圖過於緊湊,想給主體多一點空間,可能會用上。Extend允許你這樣做,但僅限於一定程度。它似乎避免編輯人物,有時會告訴你照片只能向特定方向擴展。它也只添加少量填充,這最大限度地減少了可能被濫用的花樣。我很欣賞這一點。像Clean Up一樣,它令人信服地完成了工作。它似乎傾向於尋找對稱性,這通常有效。它添加了原始圖像中畫框外的一部分拉力賽車,添加了一個與已有的後視鏡相匹配的側鏡。
它似乎不像三星早期那樣熱衷於在照片中編造內容。但我確實發現它在一個邊桌上添加了一盆盆栽植物;看起來相當令人信服,但我知道那不是真的植物。如果我把那張照片放在Instagram上,我會感到奇怪。
Extend在二維空間中處理照片;Spatial Reframing增加了第三個維度。它基於現有功能使照片看起來有點3D效果,允許你重新構圖,就好像你物理移動了相機並改變了對場景的視角。你不能走得太遠——只能大致達到最初拍照時手臂能移動的範圍。但想法是如果你拍照時沒有完全對準,可以修正構圖。
這很符合我的A型性格。有時我對我拍的照片什麼都喜歡,除了如果我能向左挪一步,避免在主體前有分散注意力的東西不是更好嗎?你不可能總是實時捕捉到這些。這些正是Spatial Reframing設計用於的細微調整。
看起來合理,但即使微小的調整也有引入存在混亂的空間。我試着重新構圖為在WWDC主題演講後與蘋果高管舉行的技術講座上拍的一張照片。因為我坐在旁邊,台上的一個高管在原始照片中大部分被遮擋。我改變了構圖,AI基本上編造了一個坐在Craig Federighi旁邊的人。
預測二維空間中應該出現什麼似乎比三維空間容易。Spatial Reframing與Extend的結果反映了這一點。它們更奇怪。離主體越遠,“重新構圖”的餘地越小,AI生成的內容越逼真。但最終得到的圖像與你實際拍的照片只有微妙差異,那我們在做什麼呢?
在拍攝距離較近的照片中,事情變得奇怪。“重新構圖”的效果更顯著,AI需要更努力填補縫隙。你可以改變自拍中的視角,但這意味着AI需要在你的臉上填補更多細節,這很快會進入恐怖谷。即使在其有限的調整範圍內,它也會使面部看起來略為扭曲和“不對勁”。它更容易憑空編造東西。當然,能夠從不完美的構圖中挽救照片聽起來不錯。但在實踐中,我不認為我喜歡它。
一個小的安慰是,用這些AI工具編輯的圖像會獲得Synth ID標籤,表明它們已被AI修改。當我上傳圖片時,Instagram會識別這些信息,但只有點擊該圖片的“AI信息”菜單時才會顯示。標籤目前並非一個萬無一失的解決方案,我認為更大的危險是,我們通常可以信任某人從手機上拍攝和發佈的照片的觀念正在迅速瓦解。蘋果當然不是這裏最激進的參與者。但哪怕引入一點點關於邊桌上盆栽植物來源的懷疑,或者某人是否真的站在他們拍照時所處位置的懷疑,長此以往都會積累成很多麻煩。
攝影:Allison Johnson / The Verge