mieki256's diary

久々に画像生成AIツールを ―― Stable Diffusion web UI forge版を起動して触っていたので、せっかくだから顔の固定ができないか試してみたくなってきた。

ググったところ、以下のような方法で、顔の固定ができることになっているらしい。

• ControlNet の Reference Only を使う。
• sd-webui-faceswap という拡張機能を使う。

_【Stable Diffusion Web UI】ControlNet Reference onlyの使い方 | 業界最安級GPUクラウド | GPUSOROBAN
_Stable Diffusionで同じ人物の画像が作れる『reference only』を使う方法 | romptn Magazine
_Stable Diffusionで同じ顔を再現する方法をご紹介! | romptn Magazine
_2024年7月最新!同じ顔を生成するreference_only(adain)の使い方とベストな設定 - Stable Diffusion攻略図鑑
_本気で同じ顔を量産したいなら、これだけ見ればOK 【Stable Diffusion顔固定の徹底解説】|AIビジネスマスター
_Stable Diffusionで顔を入れ替えできる拡張機能『sd-webui-faceswap』の使い方! | romptn Magazine
_IntellectzProductions/sd-webui-faceswap: FaceSwap Extension - Automatic 1111
_Releases - facefusion/facefusion-assets
_Stable Diffusionで顔を入れ替えできる拡張機能『sd-webui-faceswap』の使い方! | romptn Magazine
_sd-webui-faceswap 顔の入れ替え | パソコン修理のわたなべ

とりあえず、両方共試してみたのだけど、期待した結果にならない…。

どうやら全然違う画像に対して、顔だけスポンと入れ替える、みたいなことは難しいようだなと…。Reference Only を使う場合は、参照画像から派生した雰囲気の画像を生成する感じになるっぽい。faceswapの場合は、結果画像がかなり無理をしている感じの見た目になる印象で…。まあ、もうちょっと実験してみよう…。