画像生成を行っていて困るのが、背景。特に同じような背景を維持しつつ、ポーズや服装を変えると、なかなか背景がイメージ通りにならないことってありますよね。
背景をプロンプト指定した場合によく発生する問題点はこちら
・服装の色が背景に引っ張られるまたは、その逆
・背景のカラーによっては髪色まで変化してしまう。
・LoRaダウンロードサイトで拾ったLoRaで固定をしようとすると、学習元の顔や、絵柄に生成画像が引っ張られる。
上記のようなことが起きてなかなかほしい画像が念写できないことがしばしばあります。
プロンプトで固定することも可能ではないのですが、 一枚一枚プロンプトで固定するには大変な苦労が必要です。生成時間もばかになりません。
このような場合は、オリジナルでLoRaを作成すほか道はありません。
自分の使ってるモデルに合わせた特別なトレーニング専用モデルを作成し、学習させる部分だけにフォーカスしたデータセットを作成することが必要です。
これが作成できれば学習画像から可能な限り学習目的の部分を抽出することが可能になり、狙った画像の生成を高確率で行うことができます。