LoRA

現在、最も一般的になりつつある学習方法。小さなVRAMでも大きなモデルを微調整することができる。

HyperNetwork

個人的なオススメ学習方法。絵柄の調整であれば、この学習方法は簡単で精度がそこそこ出るので、かなり良い候補として挙げられる。

この方の記事とかだと、けっこうわかりやすく紹介してくれている。

なお、イラスト系の学習をする場合は、BLIPではなくDeepDanbooruを用いたほうがいい。

現時点ではおそらくSDXL非対応

DreamBooth

モデル全体を少ないstep数で調整することができる学習方法。だが、大抵の場合はLoRAで十分。しかし、LoRAは一部分しかモデルのパラメータを変更しないのに対し、DreamBoothはモデル全体を変更してくれる利点がある。