Photoshop (beta)のジェネレーティブ塗りつぶしを試してみる

最近、何かと話題が多い生成AI。私の使っているAdobeのフォトプランでも、「ジェネレーティブ塗りつぶし」が搭載されたPhotoshopのベータ版が使えるようになっていたので、試してみた。ちなみに私はAIの専門家でも画像処理のプロでもないので、あくまでお遊びのレポート、ということで^^

ジェネレーティブ塗りつぶしは、MidjourneyやStable Diffusionなどで広く知られるようになった、言葉での指示に基づくAI画像生成を、Adobeが修復ブラシの機能として利用できるようにしたもの。選択範囲を指定してピンポイントで画像修正ができる点は同じだが、画像内に存在しなかった要素を自在に追加できる点が大きく異なる。

ではさっそくやってみよう。

ジェネレーティブ塗りつぶし説明の題材:正面向きのダイサギ Subject of generative fill explanation: front-facing egret
今回のベースとなる写真。水たまりにいるダイサギが正面を向いてこちらを見つめている。被写体の雰囲気は気に入っているが、背景の変な位置にカワウが入ってきてしまった。また背景は工事中で黒シートがかぶせてあり、自然の地形ではない。

まずカワウの周辺を選択する。選択範囲を作成するとジェネレーティブ塗りつぶしのためのプロンプト(指示文)入力欄が出現するので、どういう処理をしたいか打ち込む。ベータ版はまだ英語のみしか対応しないので英語で入力。

使用したプロンプトの説明 explanation of the prompt used
シンプルに”Remove the bird”としてみた

「生成」ボタンをポチっと実行すると、10~20秒程度で完了。

ジェネレーティブ塗りつぶし説明の題材:背景の鳥の除去 Subject of generative fill explanation: removal of a background bird
カワウさん、綺麗に消滅。水面が不自然なバージョンもあったが、これは違和感がないだろう。
ジェネレーティブ塗りつぶし説明の題材:マスキングエリア Subject of generative fill explanation: masking area
赤いオーバーレイのない部分が選択範囲。

今回のカワウは他に重なっている物体もなく、周辺も水面であるため、従来の修復ブラシツールで対応できなくもないが、面積が広いと骨が折れそう。ジェネレーティブ塗りつぶしだと、水面の反射に加え、ボケ感まで写真全体と一発で馴染ませてくれるので、圧倒的に早い。

次に、殺風景な工事中の背景を自然の風景に変える。ダイサギを除く背景の上半分を選択して以下のプロンプトを入力。

使用したプロンプトの説明 explanation of the prompt used
「ダークブラウンの、荒く大きな岩でできた湖岸」と指示。
ジェネレーティブ塗りつぶし説明の題材:背景の置換 Subject of generative fill explanation: switching background
こんな感じに。ボケ味、色温度やライティングに違和感が少なく、元写真と良く馴染む背景に置換された。
ジェネレーティブ塗りつぶし説明の題材:マスキングエリア Subject of generative fill explanation: masking area
選択範囲はこんな感じ。

ちなみに以下2枚は生成された別のバージョン。若干、ダイサギの頭が変形しているものもあるが、それほど悪くはない結果だと思う。

ジェネレーティブ塗りつぶし説明の題材:背景バリエーション Subject of generative fill explanation: variation of the background
ジェネレーティブ塗りつぶし説明の題材:背景バリエーション Subject of generative fill explanation: variation of the background

お次に、正面を向いているダイサギの顔を横に向けてみる。この写真は正面顔が気に入っているのだが、鳥の写真としては横顔が一般的だろう。

ジェネレーティブ塗りつぶし説明の題材:右向きのサギ Subject of generative fill explanation: right-facing egret
首の途中から顔全体を選択して、横向きの顔にするように指示した結果。悪くないが、矩形で選択した境目から、首が変な方向に曲がっているのが気になる。

そこで、選択範囲外のエリアも考慮して画像を修正するように指示を出してみた。

使用したプロンプトの説明 explanation of the prompt used
「サギの顔を真正面から右に変える。首は、選択した領域の外にある首と滑らかに並ぶようにする」と指示。lineが最適な語かは自信なし。
ジェネレーティブ塗りつぶし説明の題材:右向きのサギ Subject of generative fill explanation: right-facing egret
さっきよりも良い感じになった。喉元のくびれがまだ気になる。

喉元のくびれの部分をピンポイントで選択して、太くする。

使用したプロンプトの説明 explanation of the prompt used
「首を太く、もっと滑らかに」
真ん中はOKだが、他のバージョンは何なんだ
ジェネレーティブ塗りつぶし説明の題材:右向きのサギ Subject of generative fill explanation: right-facing egret
だいぶ自然になった。どうだろうか?

実は全体写真では分かりづらいが、細かく見ると違和感が残る部分がある。背景を修正する際の選択範囲の影響で、首と背景の境界線に不自然な帯が見える。これを除去してみる。

ジェネレーティブ塗りつぶし説明の題材:拡大図 Subject of generative fill explanation: zoom-in
首の真ん中、右側の境界が白く滲んだようになっている
使用したプロンプトの説明 explanation of the prompt used
「首と背景の境界線上にある不自然なボケを除去する」

こうなった。境界線の滲みが消えてすっきりした。若干、首の太さも変わっているが、元画像と比較しなければ許容範囲だろう。

ジェネレーティブ塗りつぶし説明の題材:拡大図 Subject of generative fill explanation: zoom-in
首と背景の境界線の修正後

一応、これで完成形となった。もっと注文を付けると、ダイサギの顔がややのっぺりした質感でディテールに乏しい、嘴の彩度が高いなど色々ある。とはいえ、ぱっと見の仕上がりは恐ろしいほど違和感がない。

実際は選択範囲の取り方、プロンプトの書き方で試行錯誤が必要だが、これから更に洗練されていくに違いない。

Lightroomに搭載されたAIノイズリダクションも超強力だし、本当に魔法のような世界になってきたと実感。これでSNSには映えまくる画像がいっそう氾濫するでしょう。その飽和点を迎えた先はどうなるのやら。

ジェネレーティブ塗りつぶし説明の題材:最終版 Subject of generative fill explanation: finished
今回はこれで完成

以下、少し番外編として失敗例も。

首と背景の境界線修正のため、単に「首と背景の境界をもっと自然に修正せよ」と指示した場合の例。首から何やら骨のようなものや鳥の頭が飛び出してきた。怖い。

ジェネレーティブ塗りつぶし説明の題材:失敗例 Subject of generative fill explanation: example of failure
やはりどうなってほしいのか、具体的に指示するのが良さそう

ダイサギの顔ののっぺり感を解消するために、周辺と同程度の輝度ノイズを加えようとした場合の例。「add luminance noise」のように指示しても、noiseを「画像(オブジェクト)の乱雑さ」という風に解釈しているのかもしれない。更にカオスになってしまった。

ジェネレーティブ塗りつぶし説明の題材:失敗例 Subject of generative fill explanation: example of failure
ジェネレーティブ塗りつぶし説明の題材:失敗例 Subject of generative fill explanation: example of failure

コメントを残す

メールアドレスが公開されることはありません。 が付いている欄は必須項目です