stable diffusion的微调和lora微调代码版本_stable diffusion微调代码

作者：小小林熬夜学编程 | 2024-04-24 09:17:43

踩

stable diffusion微调代码

目前业界主流的sd训练基本都是基于diffusers和ldm的，这是huggingface的训练库，后者是stability ai在compvis等机构的基础上完善的，我目前工作上推理一般采用webui架构，训练采用diffusers，因此需要把webui的ckpt或者safetensors转成huggingface形式，在基于diffusers的lora训练，很多都是基于kohya_ss的，一般就是添加一些新的lora方法，另一种就是基于kohya_ss封装套个壳，方便训练。目前主流看来，还是关注diffusers官方的训练脚本，整个流程比较简洁，对比其他三方的脚本。

safetensors版本->convert->huggingface版本

huggingface版本->diffusers训练->huggingface版本lora权重bin文件->convert->safetensors

1.diffusers版本

https://www.wpsshop.cn/w/小小林熬夜学编程/article/detail/478683