写真から物や人物を削除するのが、数回タップするだけで完了します。 クレジット:Lifehacker
Apple、Google、Samsungは、スマートフォンから健康アプリ、スマートウォッチまで、様々な分野で競争を繰り広げており、その競争はAIツールにも及んでいます。これらのテクノロジー大手はいずれも、モバイル写真編集アプリにAIを活用したオブジェクト除去機能を提供しており、画面を1、2回タップするだけで、不要な人物、木、手など、写真を台無しにするあらゆるものを除去できると謳っています。
しかし、Apple、Google、SamsungがAIによるオブジェクト除去機能を提供しているからといって、ツールの性能が同等というわけではありません。これらの機能の性能比較については、オンラインでもかなり話題になっているため、直接比較してオブジェクト除去性能を比較検討する必要があるように思われます。
これらのAIツールはすべて同じように動作します。もちろん、ツールは除去対象の物体の背後に何があるのかを正確に把握しているわけではありませんが、周囲のピクセルに含まれる手がかりと、基盤となるモデルに組み込まれた画像トレーニングを組み合わせることで、かなり正確な推測を行うことができます。そして、その推測の精度が最終結果の品質を左右します。
このテストでは、クリーンアップ(iOS版Appleフォトアプリ内)、マジック消しゴム(Android版Googleフォト内)、オブジェクト消しゴム(One UIのSamsungギャラリーアプリ内)の3つのツールを取り上げます。これらのツールはすべて、該当アプリで画像を開くとオプションとして表示されます。テストのために、Taan Huyn氏、Tolga Ahmetler氏、Marek Piwnicki氏から素晴らしい写真をいくつか拝借しました。
(比較画像について簡単に説明します。さまざまなデバイスを使用して保存したため、解像度に多少のばらつきがありますが、これは問題の AI ツールとはまったく関係がないため、画像の鮮明さはほとんど無視できます。)
写真からランプを削除するのに最適な AI ツールはどれですか?
元の写真。 クレジット: Taan Huyn/Unsplash
最初の写真チャレンジ、つまり上の画像からランプを取り除くという課題は、ある面では比較的簡単ですが、他の面では複雑です。壁と窓に関してはAIにとって役立つガイドラインがいくつかありますが、影も処理する必要があります(ランプの背後の壁に影がかかっている場合も含みますが、AIはこれを除去する必要があることを認識できません)。
まず最初にApple Clean Upを使いました。このツールは、私が落書きしたランプをきちんと認識してくれました。光の効果も気に入っています。そして、除去作業が完了すると、後ろの壁がきれいに埋められました。窓ガラスの作業も大部分は問題ありませんでした。しかし、オブジェクトが除去された痕跡として、奇妙なアーティファクトがいくつか残っていました。
次にGoogle Magic Eraserを試しました。ランプは消去候補として表示されませんでしたが、選択は非常に簡単で、境界線も正確に描かれていました。残念ながら、作業の大部分はうまくいきましたが、Magic Eraserは上部にランプシェードの痕跡を残し、まるで以前そこにあったものが幽霊のように残ってしまいました。
最後に、Samsung Object Eraserを試してみました。こちらはオブジェクトの選択が少し面倒でした。Samsung Galleryではズームやパンが難しく、自動選択の精度も低かったです。しかし、削除の仕上がりは3つの中で最も優れており、壁と窓の両方が正確に塗りつぶされました。
左がApple、中央がGoogle、右がSamsung。 クレジット:Lifehacker
写真から人物を削除するのに最も優れた AI 写真ツールはどれですか?
元の写真。 クレジット: Tolga Ahmetler/Unsplash
2つ目の写真チャレンジは、この街の風景から歩いている男性を消すことです。これは非常に難しい課題です。AIは、メインの被写体の後ろにある白い車のほとんどを想像し、道路とその標識も埋めなければなりません。しかも、このシーンは暗く、前景に焦点が合っており、背景が徐々にぼやけていくという状況です。
Apple Clean Upでは、ツールの自動選択機能は前景の男性ではなく背景の車を消そうとしましたが、前景の男性を選択するのは簡単でした。AIによるフィルの結果は不均一で、シーンの奥に行くほど悪化し、後ろの車はピクセル化された乱雑な画像になってしまいました。
Googleマジック消しゴムも、前景ではなく背景の人物を消そうとしました。暗くて濡れた道路を背景に男性を判別するのに苦労し、さらに男性全体を消し去ることとピクセルを正しく置き換えることにも苦労しました。画像全体の間違った部分からピクセルを借用してしまい、黄色い線さえも安定して消せませんでした。
Samsung Object Eraserについては、選択処理が少しぎこちなかったものの、最終的には背景から男性の人物を完璧に選択しました。そして、削除処理も非常に優れており、男性が消えた後に車と道路をリアルに再現できた唯一のAIでした。完璧ではありませんが、おそらくほとんどの人は一目見て騙されるでしょう。
これまでのところどう思いますか?
左がApple、中央がGoogle、右がSamsung。 クレジット:Lifehacker
写真から自転車を削除するのに最適な AI 写真ツールはどれですか?
元の写真。 クレジット: Marek Piwnicki/Unsplash
この3つ目の写真チャレンジでは、自転車をシーンから取り除くことで、AIが周囲のフィールドについて多くの情報を得ることができます。自転車の後ろにほとんど見えないフェンスが難易度を高めているため、これらのツールがフェンスをそのまま残そうとするのか、それともフェンスを無視して芝生だけを捉えようとするのか、興味がありました。
この画像では、自転車全体を選択するのにApple Clean Upは何度か試行錯誤する必要がありました。自転車が単一のオブジェクトとして認識されていないためかもしれません。選択が完了すると、Clean Upは空白部分を埋めるのにかなり熟練していましたが、作成された緑とフェンスには不整合が見られました。
Google Magic Eraserも、自転車全体を選択するのに何度か試行錯誤する必要がありました。フィールドだけでなくフェンスも塗りつぶそうとしたため、結果はひどいものではありませんでしたが、明らかなエラーもありました。例えば、自転車のホイールスポークの一部はまだ残っています。Apple Clean Upよりは多少はましだったかもしれませんが、それほど大きな差はありませんでした。
一般の人と同じように、Samsung Object Eraserは最初から正確な選択範囲を作成するのに最も優れており、残ったスペースに説得力のある何かを配置するのにも優れています。フィールドとフェンスの両方が正確かつリアルに塗りつぶされており、これは編集されていない写真として簡単に見分けられます。
左がApple、中央がGoogle、右がSamsung。 クレジット:Lifehacker
最終判定:サムスンのツールが最も優れている
まず最初に言っておきたいのは、こうしたタスクでは結果が異なる場合があります。ソーシャルメディアやインターネット全体で同様の比較チャレンジが行われているので、その違いが分かるでしょう。写真にはそれぞれ異なる特徴があり、AIツールごとにオブジェクトの除去に対するアプローチも異なります。
私のテストでは、Galaxy AIとSamsungのObject Eraserが明らかに勝者です。このツールはピクセルの置き換えよりも時間がかかるようで、画像内の他の場所からピクセルをコピー&ペーストするのではなく、実際に画像を生成します。路上の車の写真を見ればそれが分かります。これはAIが想像した車であり、実際の車ではありませんが、本物そっくりの写真に仕上がっています。
AppleとGoogleの性能はまずまずで、ほぼ互角でした。選択は簡単で(実際、Samsungよりも簡単です)、より単純な削除タスクも問題なく処理されます。しかし、これらのAI削除機能は、背景の見え方に関する手がかりが少ない複雑な操作では苦戦する傾向があります。
結局のところ、AIによる物体除去ツールだけを理由にスマートフォンを買い替える人は少ないでしょう。しかし、これら3社のAI関連製品の進歩をグラフ化してみるのは興味深いものです。また、GoogleフォトとそのMagic EraserはすべてのAndroidおよびiOSデバイスで利用可能であり、AppleとSamsungは追いつく(あるいは先行する)プレッシャーにさらされています。