LoRA 相关信息如下:
模型微调:
微调脚本:
LoRA 微调脚本见:,单机多卡的微调可通过修改脚本中的include localhost:0 来实现。
全量参数微调脚本见:。
加载微调模型:
LoRA 微调:基于 LoRA 微调的模型参数见基于 Llama2 的中文微调模型,LoRA 参数需和基础模型参数结合使用。通过加载预训练模型参数和微调模型参数,示例代码中,base_model_name_or_path 为预训练模型参数保存路径,finetune_model_path 为微调模型参数保存路径。
全量参数微调:调用方式同模型调用代码示例,只需修改其中的模型名称或保存路径。
在 SD 中的应用:
儿童绘本风格插画:可以生成儿童绘本风格插画,起作用的主要是“KIDS ILLUSTRATION”风格 lora,可搭配不同大模型使用,如官方案例中的超拟真大模型“Realistic Vision”。
Fooocus 介绍:LoRA 模型默认放在 Fooocus_win64_1110\\Fooocus\\models\\loras。Fooocus 程序默认用到 3 个 SDXL 的模型,包括一个 base、一个 Refiner 和一个 LoRA。单独安装时需下载三个模型,如 SDXL 基础模型:https://huggingface.co/stabilityai/stablediffusionxlbase1.0/resolve/main/sd_xl_base_1.0_0.9vae.safetensors 等。若部署了 SD 秋叶包,可共用模型(大模型和 LoRA),修改 Fooocus_win64_1110\\Fooocus\\modules\\path.py 文件中的路径,配置好后点击 run.bat 文件启动。
2025-02-22