Appleの新しいAI写真編集ツールは、良くも悪くもほとんど機能する

世界で最も使われているカメラが、初めて本格的なAI写真編集機能を手に入れた。そして、私たちはその準備ができていないと思う。

AI写真編集という点では、iOS 27の新機能は、例えばGoogleのPixelスマートフォンでできることに比べれば、かなりおとなしい。しかしiPhoneにとって、これはネイティブの写真アプリで写真に施せる編集の転換点を表している。つまり思い出？いや、もう自分でも何を言っているのかわからない。

これらの新機能は現在iOS 27の開発者ベータ版に含まれており、Appleが一般公開前に調整を続ける可能性があることに留意してほしい。今回のアップデートには、3つ（あるいは2つ半）の新しいAI編集機能がある。新しいClean Upツールは半分とカウントする。なぜなら以前から存在したが、あまりに酷くて実質的に機能していなかったからだ。これは写真の背景から写り込みを除去するツールで、今年大幅にアップグレードされた。次にExtendは、AIを使って写真の端にそれらしい塗りつぶしを追加し、写真を拡張する機能だ。そしてSpatial Reframingは、カメラをシーン内で動かしたような効果を模倣し、既存の写真を再構図できるようにする。これが3つの中で最も野心的で、おそらく最も問題のある機能だ。

まず最初に、Clean Up。これは実際に良くなった。以前はオンデバイスのモデルのみで物体を除去し詳細を補完していたが、現在はクラウド上のより強力なモデルも利用できる。これはGoogleが何年も前から行っていることであり、同社のMagic EditorツールがAppleが昨年導入したバージョンよりはるかに優れていた理由だ。完全オンデバイスのClean Upは、除去したものを置き換える説得力のある詳細を描き出すのが得意ではなかった。奇妙なアーティファクトを残し、一般的に手間に対して価値がなかった。Clean Up 2.0？それは仕事をやってのける。

写真から物を除去するためにAIを使うことは、私が最も気兼ねなく使える生成編集ツールだ。子供の鼻くそを除去したり、背景から見知らぬ人を除去するのに使うだろう。iOSのこの新しいバージョンは問題なくそれらを行い、iPhoneユーザーに人気が出ると思う。

次の複雑さと「写真とは何か」のレベルに進むと、Extendがある。これを逆のトリミングと考えてほしい。フレームの端を拡張できるため、例えば被写体に対して構図がタイトすぎて、もう少し余裕を持たせたい場合に使える。Extendはこれを行うが、限度がある。人物への編集を避ける傾向があり、写真が特定の方向にしか拡張できないと教えてくれることもある。追加されるパディングも少量で、悪用の可能性を最小限に抑えている。私はそれを評価する。Clean Upと同様に、説得力を持って機能する。対称性を探す傾向があるようで、通常はうまくいく。元の画像でフレームからはみ出していたラリーカーの一部を追加し、既存のものと一致するサイドミラーを加えた。

Samsungの初期の取り組みのように、写真に何かをでっち上げることに熱心ではなさそうだ。しかし、サイドテーブルに鉢植えを追加しているのを見つけた。かなり説得力があるように見えるが、それが本物の植物ではないことはわかっている。もしその写真をInstagramに投稿したら、気持ち悪く感じるだろう。

Extendは写真を二次元空間で扱う。Spatial Reframingは三次元を追加する。既存の機能を基に、写真を3D風に見せ、あたかも物理的にカメラを動かしてシーンの視点を変えたかのように再構図できる。あまり遠くには行けず、元の写真を撮ったときに腕を動かせた範囲程度だ。しかし、撮影時にフレーミングを完璧にできなかった場合に修正できるというアイデアだ。

これは私のタイプAの性格に訴える。時々、撮った写真のすべてが気に入るが、左に一歩移動して被写体の前の気を散らすものを避けられなかったらもっと良かったのにと思うことがある。そういうことはリアルタイムで常に気づけるわけではない。Spatial Reframingはそうした微調整のために設計されている。

妥当に思えるが、微調整であっても実存的な混乱を引き起こす余地がある。WWDC基調講演後のApple幹部とのテックトークで撮った写真のフレーミングを変更してみた。私は脇に座っていたため、ステージ上の幹部の一人は元のショットでほとんど隠れていた。フレーミングを変更すると、AIはCraig Federighiの隣に座っている人をでっち上げた。

二次元空間で次に来るべきものを予測するのは、三次元よりも簡単な問題のようだ。Spatial Reframingの結果はExtendと比較してそれを反映している。より奇妙だ。被写体から遠ければ遠いほど、「再構図」できる余地は少なくなり、AI生成のものはより現実的になる。しかし、実際に撮った写真と微妙にしか違わない画像になってしまい、その時点で何をしているのだろう？

被写体がカメラに近い写真では、事態は奇妙になる。「再構図」の効果はより劇的で、AIはギャップを埋めるためにより多くを働かせる必要がある。自撮り写真で視点を変えることができるが、それはAIが顔にさらに詳細を追加する必要があることを意味し、すぐに不気味の谷に入る。限られた調整範囲内でも、顔が少しゆがんで「おかしく」見えることがある。もともと存在しなかったものをでっち上げる傾向が強い。確かに、構図が完璧ではなかった写真を救えると聞けばいい感じがする。実際には、私は好きではないと思う。

これらのAIツールで編集された画像には、AIで変更されたことを示すSynth IDラベルが付けられるのは小さな慰めだ。いくつかの画像をアップロードした際、Instagramはこの情報を検出したが、その画像の「AI情報」メニューをタップしないと表示されない。ラベルは現時点では完全な解決策ではなく、より大きな危険は、誰かがスマートフォンで撮影して投稿した写真を通常は信頼できるという考えが急速に崩れつつあることだ。Appleはもちろんここで最も大胆なプレイヤーではない。しかし、サイドテーブルの観葉植物の出所や、誰かが写真を撮ったと思われる場所に実際に立っていたかどうかについて、ほんの少しの疑念を導入するだけでも、長い目で見れば多くの問題を引き起こす可能性がある。

写真撮影：Allison Johnson / The Verge