MENU

■LoRAとは? stable diffusion(ai自動生成ツール)の追加モデルデータ 

LoRAは、Stable Diffusion(AI自動生成ツール)の既存のモデルに追加データを適用するための、技術です。この技術は、訓練可能なパラメーター数とGPUメモリー要件を減らすことができます。

メインとなるチェックポイントモデルに加えて、LoRAモデルを追加で適応させることにより、LoRAを追加で学習させることができます。通常、LoRAモデルはチェックポイントモデルの10〜100倍小さくなるため、モデルコレクションが豊富な人々にとって魅力的であり、利用されています。

従来はチェックポイントモデル自体を修正したりマージする必要がありましたが、LoRAであればLoRAモデルのみ付け替えすることで即座に作風を変えることができるため非常に利便性が高いです。

また、LoRAはStable Diffusionモデルのクロスアテンション層に、プロンプトに対して適用可能であり、画像表現を関連付けることもできます。LoRAのトレーニングには約8分かかり、約5MBのモデルを生成することができます。

目次

■LoRAの導入方法 使い方  aiで理想のイラストを作成しよう

LoRAの提供サイトは、非常に使いやすく、手軽に導入できます。ダウンロードには、CivitaiまたはHugging Faceから取得可能です。Civitaiでは、さまざまなLoRAの中から好みに合ったモデルを選択することができ、右上のフィルター機能を使用してLoRAのみを表示することができます。

safetensorsファイルをダウンロードしてから、そのファイルをstable-diffusion-webui → models → LoRAフォルダにインストールするだけで、導入は完了です。次に、Stable Diffusionの画面に移動します。

LoRAを適用する場合は、「トリガーワード」と呼ばれるプロンプトを入力する必要があります。これは、「このLoRAを適用してください」というメッセージをStable Diffusionに伝えるためです。トリガーワードは、LoRAのダウンロードページに記載があるため、事前に確認することをお勧めします。

Stable Diffusionは、手動でのコピペを行うことなく、自動入力することも可能な画面を提供しています。右側に存在する花札アイコンをクリックし、『LoRA』タブを開くことで、利用可能なLoRAの一覧を確認するこができます。もし、新しく導入したLoRAが表示されていない場合は、『LoRA』タブの右側にあるRefreshボタンを押下することで最新情報が更新されます。今回実行したいLoRAを選択するだけで、トリガーワードがプロンプト欄に自動で入力されるので、非常に便利です。

■LoRA 追加学習について LoRAを作成する方法は?

LoRAとは、「Low-Rank Adaptation」の略語であり、既存のモデルに新たな被写体を取り込んで、そのモデルを追加学習させる手法の一種です。LoRAは、Stable Diffusion系のモデルを使用して、特定のキャラクターのイラストを生成する場合に効果的に活用されることができます。

通常、目当てのキャラクターの特徴を表すキーワードを含めて、ガチャを引くことで似たようなイラストを生成する必要がありますが、LoRAを使用することで、目的のキャラクター・絵柄のイラストを決定することが可能です。

LoRAは、他の手法に比べて学習にかかる時間が短く、比較的低スペックなPCでも学習処理を実行できます。また、モデルファイルのサイズも極めて軽量であります。

■LoRA モデル

主にイラスト作成向けのLoRAモデルを紹介します。

Gacha splash LoRA


名前のとおりガチャのようなイラストを作成できます。デザイン性が高く、付加モデルとして完成度も高いです。

https://civitai.com/models/13090/gacha-splash-lora

Figma Anime Figures


まるで実物のフィギュアのように見えるようイラストが加工されます。遊び心のあるモデルですが、被写体が非常に立体感のあるイラストを作成することができます。

https://civitai.com/models/7984/figma-anime-figures

Anime Tarot Card Art Style LoRA


名前のとおりタロットカードのようなイラストを作成できます。

https://civitai.com/models/11177/anime-tarot-card-art-style-lora

Standing Full Body with Background Style LoRA


キャラの全身を移した立ち絵のイラストを作成できます。

https://civitai.com/models/16997/standing-full-body-with-background-style-lora

[LoRA]Flat_Color


独特の彩色を施したイラストを作成できます。

https://civitai.com/models/6433/loraflatcolor

LightLine Art LoRA


美少女キャラ的なデザインを踏襲しつつ鮮やかなイラストを作成できます。

https://civitai.com/models/19068/lightline-art-lora

[LuisaP] Pixel art LoRA


ドット絵のようなピクセルで加工することができます。

https://civitai.com/models/10706/luisap-pixel-art-lora

■LoRA 作り方

「sd-webui-train-tools」は、WebUI(1111)上でLoRA学習ができる拡張機能で可能です。この拡張機能を使用することで、煩雑なインストール、複雑なディレクトリ構成、フォルダ名の命名規則などの面倒から解放されます。

よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!

この記事を書いた人

コメント

コメントする

目次