【失敗無し】Stable Diffusion Photomakerで同じ顔の人物を確実に生成するテクニック | IT技術者のDTM奮闘記
画像生成AI

【失敗無し】Stable Diffusion Photomakerで同じ顔の人物を確実に生成するテクニック

桜の咲く春の季節に外でほほ笑んでいる女性のAI写真 画像生成AI

※本ページはプロモーションが含まれています

スポンサーリンク

はじめに

Stable Diffusionで、同じ顔の人物を生成したいと思ったことはありませんか?
写真集や立ち絵画像の生成で顔が変わってしまい困ったことはありませんか?

この記事では参照画像と同じ顔の画像を生成できるPhotomakerという機能の使い方を紹介します。

この記事では以下のことが理解できます。

  • Stable Diffusion WebUI ForgeでPhotomakerを使う方法
  • Photomakerの効果
スポンサーリンク

Photomakerとは?

参照画像の人物の特徴を維持したまま、画像生成が行える技術・手法です。

通常、人物を維持して画像生成するには事前学習(LoRAなど)が必要ですが、Photomakerでは1枚の画像だけで学習不要です。

同じように事前学習無しで顔を固定する手法は、FaceIDやControlnetのReference Onlyがありますが、精度や参照画像に近い人物を生成できる点でPhotomakerは優れています。

Photomakerの使い方

PhotomakerはHagging Faceでデモ版が公開されていますが、今回はStable Diffusion WebUI Forgeに組み込まれている機能を使用して、ローカルPCで実行する手順を紹介します。

Stable Diffusion WebUI Forgeのインストール方法については、以下の記事で解説しています。

画像生成に使用するチェックポイントモデルはSDXLベースモデルを設定してください。
SD1.5ベースモデルは対応していないので、Photomakerが正常動作しません。

  • STEP1
    モデルのダウンロード・インストール

    PhotomakerのモデルをHugging faceからダウンロードします。

    ダウンロードしたファイルは「Forgeフォルダ」→「models」→「ControlNet」に保存します。

  • STEP2
    ControlNetの設定

    WebUI Forgeのホーム画面左下に表示されている「ControlNet Integrated」をクリックして展開します。

    その後、参照画像をドラッグ&ドロップするか、クリックしてロードします。

    ControlNet Integratedに画像をドラッグ&ドロップするよう促している

    次に以下項目をチェックします。

    • Enable:有効化
    • Pixel Perfect:解像度を画像から取得
    • Control TypeからPhotoMakerをチェック
    Enable、Pixel Perfect、PhotoMakerをチェックするよう促している

    モデルのインストールが問題無ければ、
    Preprocessorに「ClipVision (Photomaker)」、
    Modelに「photomaker-v1」が自動設定されます。
    (反映されない場合は手動で設定してください)

  • STEP3
    プロンプトの設定

    プロンプトに「a photo of photomaker」を必ず追加してください。
    その他のプロンプトは自由です。

    ここまで、設定したら画像生成するだけです。

    2Dイラストでも「a photo of photomaker」が使えます。
    その他「a illustration of photomaker」などが有効です。

ここまでの使い方についてYouTube動画も投稿しています。合わせてご確認ください。

Photomakerの効果を確認

参照画像の生成及び、画像生成モデルはjuggernautXLを使用しています。

ブロンドショートヘアー女性のAI写真
juggernautXLで生成した参照画像

最初のテストは参照画像と同じようなプロンプトを追加して生成してみます。

ブロンドショートヘアー女性のAI写真が4枚並んでいる
Photomakerで生成した画像(クリックで拡大表示)

参照画像と同じ人物に見える画像が生成できました。

次にプロンプトに関係の無いワードを追加して遊んでみました。

ブロンドショートヘアー女性で体がサイボーグになったAI写真
cyborg beautyを追加
ブロンドショートヘアーで眼鏡をかけている女性のAI写真
glassesを追加
ブロンドショートヘアー女性がパーカーを着てネオン街に立っているAI写真
hoodie, neon, in the cityを追加

どれも精度が高いですね。
これなら写真集や、グラビア用の画像にも使い易いです!

おすすめテレワーク・デスクワークグッズ

四六時中デスクワークの筆者がおすすめする、デスクワークグッズを紹介します。

nov
nov

作業効率の他、QOL爆上がりの商品を紹介していくから是非チェックしてね!

ごちゃごちゃしたケーブルとは、さようなら!

USB充電の他、使用するUSB機器が増えたから必須だね

モニターアームの超定番!これを使えばデスクが広々~

目線が上がって肩こり解消にもぴったり

付箋サイズの電子メモパッドは、急な連絡にもすご~く便利!

ヘッドフォン音質、マイク音質共に良好!会議にぴったりヘッドセット

無線で、静かなオフィスでも問題無い静音スイッチ採用のマウス

机が狭い?それなら大丈夫、ロジクールのトラックボール使おう

薄型のキーボードなのに打鍵感が最高だね

コンパクトなキーボードを探しているならコレ!

スポンサーリンク

まとめ

今回はStable Diffusion WebUI ForgeでPhotomakerを使う方法を紹介しました。

Photomakerはサンプル画像の通り、期待通りの画像が生成できましたね。

FaceIDと比較すると、より参照画像と近い顔が生成できるので現状はイチオシの機能です。

AI画像生成が捗る高コスパグラフィックボード

最高の生成スピードを求めるならコレ!

最新の4000シリーズから、バランスが丁度いいグラボ!

注目
セーターを着た日本人女性のAI写真
Stable Diffusionの使い方・記事まとめ【Stable Diffusion WebUIの使い方】
Stable Diffusion関連の記事が増えてきたので、使い方に関する記事をまとめました。
注目
黒髪のアニメ調女性のAIイラスト
Stable Diffusionのアニメ系イラストが得意なモデル8選!
アニメ調のイラストが得意なStable Diffusionのおすすめモデルを紹介していきます
注目
黒のロングヘアー女性のAIイラスト
美少女2次元イラストに最適なモデル5選!!【Stable Diffusion モデル紹介】
2Dイラストに最適なStable Diffusionのおすすめモデルを紹介していきます。
注目
金髪のサイボーグボディの女性のAI写真
Stable Diffusionのリアル・実写系が得意なモデル5選!【Stable Diffusion モデル紹介】
リアル・実写系に最適なStable Diffusionのおすすめモデルを紹介していきます。
注目
ショートヘアー日本人女性のAI写真
Stable DiffusionのおすすめNSFWモデル8選!!【最新版】
NSFW画像の生成が得意なStable Diffusionのおすすめモデルを紹介していきます。
注目
オフィスに立つ日本人女性のAI写真
SDXLベースでNSFW画像が生成できるおすすめモデル10選【Stable Diffusionモデル紹介】
SDXLベースモデルでNSFWコンテンツに特化したモデルを紹介していきます。
注目
コートを着た日本人女性のAI写真
Stable Diffusionのおすすめモデルを用途別に紹介するよ
Stable Diffusionで使用できるおすすめモデルを用途別に紹介していきます
注目
侍姿の女性のAIイラスト
ComfyUIのインストール手順を画像付きで解説【軽量、高速なStable Diffusionクライアント】
Stable Diffusionの軽量・高速なクライアントComfyUIのインストール手順を紹介します。
注目
茶髪女性が町中に立っているAI写真
【簡単】Fooocusのインストールと使い方を紹介します!
Fooocusのインストールから簡単な使い方を解説していきます。Fooocusは数あるStable Diffusion WebUIの中でも、軽量かつシンプルなクライアントアプリです。
注目
タートルネックを着た黒髪女性のAI写真
Stable Diffusionを高速化するSDPAを紹介します【Stable Diffusion WebUIの使い方】
高速化が可能となるSDPAの使い方を紹介します。

Comment

タイトルとURLをコピーしました