【生成AI】モデルが必要なおすすめ拡張機能 - tsukimisoba/Blog GitHub Wiki
モデルが必要なおすすめ拡張機能は、主に ControlNet、LoRA、T2I-Adapter、IP-Adapter などです。それぞれに対応するモデルファイル(.safetensorsや.pt)を導入する必要があります。
| 拡張機能名 | 必要なモデル | モデル形式 | 用途 |
|---|---|---|---|
| ControlNet | control_canny-fp16.safetensorscontrol_openpose-fp16.safetensorscontrol_depth-fp16.safetensors など | .safetensors | 構図・ポーズ・線画・深度などを制御 |
| Additional Networks | LoRAモデル(例:anime-face.safetensors)Hypernetwork(.pt)Textual Inversion(.pt, .bin) | .safetensors, .pt, .bin | キャラ・絵柄・構図などの追加学習モデル |
| T2I-Adapter | t2iadapter_canny_sd15.safetensorst2iadapter_depth_sd15.safetensors など | .safetensors | ControlNet類似の構図制御(軽量・高速) |
| IP-Adapter | ip-adapter_sd15.safetensorsip-adapter-plus-face_sd15.safetensors など | .safetensors | 顔・スタイル・構図の参照画像による制御 |
| Inpaint Anything | segment-anything.pth(SAMモデル) | .pth | 自動領域分割+インペイント |
| OpenPose Editor | openpose.pth(OpenPoseモデル) | .pth | GUIでポーズ編集(ControlNetと併用) |
次は、薫さんの生成したいジャンル(メカ、人物、背景など)に合わせて、どの拡張とモデルを組み合わせると最適かをご提案できます。ジャンルを教えていただければ、構成を絞り込めますよ。
**モデルが必要なおすすめ拡張機能は、主に ControlNet、LoRA、T2I-Adapter、IP-Adapter などです。それぞれに対応するモデルファイル(.safetensorsや.pt)を導入する必要があります。**| 拡張機能名 | 必要なモデル | モデル形式 | 用途 |
|---|---|---|---|
| ControlNet |
control_canny-fp16.safetensorscontrol_openpose-fp16.safetensorscontrol_depth-fp16.safetensors など |
.safetensors |
構図・ポーズ・線画・深度などを制御 |
| Additional Networks | LoRAモデル(例:anime-face.safetensors)Hypernetwork( .pt)Textual Inversion( .pt, .bin) |
.safetensors, .pt, .bin
|
キャラ・絵柄・構図などの追加学習モデル |
| T2I-Adapter |
t2iadapter_canny_sd15.safetensorst2iadapter_depth_sd15.safetensors など |
.safetensors |
ControlNet類似の構図制御(軽量・高速) |
| IP-Adapter |
ip-adapter_sd15.safetensorsip-adapter-plus-face_sd15.safetensors など |
.safetensors |
顔・スタイル・構図の参照画像による制御 |
| Inpaint Anything |
segment-anything.pth(SAMモデル) |
.pth |
自動領域分割+インペイント |
| OpenPose Editor |
openpose.pth(OpenPoseモデル) |
.pth |
GUIでポーズ編集(ControlNetと併用) |
| モデル種別 | 配置フォルダ |
|---|---|
| ControlNet | extensions/sd-webui-controlnet/models/ |
| LoRA | models/Lora/ |
| Hypernetwork | models/hypernetworks/ |
| Textual Inversion | embeddings/ |
| T2I-Adapter |
models/T2I-Adapter/(拡張によって異なる) |
| IP-Adapter |
models/IP-Adapter/(または拡張指定) |
| SAMモデル |
segment-anything/(Inpaint Anything拡張内) |
- ControlNetモデル:[Hugging Face – webui/ControlNet-modules-safetensors](https://huggingface.co/webui/ControlNet-modules-safetensors)
- LoRAモデル:[Civitai – LoRAカテゴリ](https://civitai.com/tag/LoRA)
- T2I-Adapterモデル:[Hugging Face – T2I-Adapter](https://huggingface.co/TencentARC/T2I-Adapter)
- IP-Adapterモデル:[Hugging Face – IP-Adapter](https://huggingface.co/h94/IP-Adapter)
- SAMモデル:[Meta – Segment Anything](https://github.com/facebookresearch/segment-anything)
| 目的 | 拡張機能 | モデル例 |
|---|---|---|
| ポーズ制御 | ControlNet + OpenPose Editor | control_openpose-fp16.safetensors |
| 線画から生成 | ControlNet + Canny | control_canny-fp16.safetensors |
| 顔のスタイル参照 | IP-Adapter | ip-adapter-plus-face_sd15.safetensors |
| キャラ追加 | Additional Networks(LoRA) | anime-character-lora.safetensors |
| 領域修正 | Inpaint Anything | segment-anything.pth |
次は、薫さんの生成したいジャンル(メカ、人物、背景など)に合わせて、どの拡張とモデルを組み合わせると最適かをご提案できます。ジャンルを教えていただければ、構成を絞り込めますよ。