需按五步完成Stable Diffusion角色训练:一、准备50+张多角度高清无干扰图像;二、用Dreambooth扩展创建新模型;三、预处理图像并自动打标;四、配置触发词与参数启动训练;五、手动注入触发词并验证生成效果。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

如果您希望在Stable Diffusion中训练一个专属角色模型,但尚未明确具体操作路径,则可能是由于训练流程涉及多个环节的协同配置。以下是完成角色训练的完整流程步骤:
一、准备高质量角色图像素材
角色训练效果高度依赖原始图像质量与多样性,需确保图像清晰、主体突出、角度覆盖全面,并避免干扰元素影响特征学习。
1、收集不少于50张目标角色的正面、侧面、半侧、仰视、俯视等多角度图像。
2、统一裁剪为高分辨率尺寸,推荐至少768×768像素,显存充足时可设为1024×1024。
3、剔除存在严重遮挡(如手部挡脸)、复杂背景(如文字广告牌)、极端光影(如逆光剪影)或过度美颜失真的图像。
4、将所有图像存入单一文件夹,路径中禁止包含中文字符或空格,例如使用 D:\sd_train\role_yunyun\in。
二、启用Dreambooth扩展并创建新模型
Dreambooth是当前最主流的角色微调方法,通过注入少量样本即可实现对基础模型的精准重绑定,避免破坏原有泛化能力。
1、启动Stable Diffusion WebUI,确认已安装Dreambooth扩展且版本兼容(建议v1.7.0+)。
2、进入“Train”选项卡 → 点击“Dreambooth”子页 → 点击“Create”按钮。
3、在“Model Name”栏输入自定义名称,例如role_yunyun;在“Base Model”下拉菜单中选择适配人像的基础模型(如chilloutmix、realisticVisionV6)。
4、点击“Create”后,系统将生成模型保存路径,例如 D:\sd_webui\models\dreambooth\role_yunyun。
三、执行图像预处理与自动打标
预处理阶段将统一缩放图像尺寸、去除边缘畸变,并为每张图生成初步文本描述,为后续训练提供语义锚点。
1、切换至“Train” → “Preprocess images”页面。
2、在“Source directory”填入原始图像文件夹路径(如 D:\sd_train\role_yunyun\in)。
3、在“Destination directory”指定输出路径(如 D:\sd_train\role_yunyun\out),该路径将自动生成对应txt标签文件。
4、设置“Width”与“Height”为一致值(如768),勾选“Use BLIP”或“Use DeepBooru”任一选项,不勾选“Create mirrored copies”以防镜像引入伪特征。
5、点击“Preprocess”,待界面显示Preprocessing finished.即完成。
四、配置并启动Dreambooth训练任务
训练参数直接影响收敛速度与角色保真度,需根据GPU显存容量与图像数量合理设定批次与步数。
1、返回“Dreambooth”子页,在“Model Name”中再次输入已创建的模型名 role_yunyun。
2、在“Instance Prompt”中填写触发词,格式为a photo of sks person(sks为默认占位符,可替换为自定义唯一标识如 vvv)。
3、在“Class Prompt”中填写通用类别描述,例如a photo of a person,用于约束先验分布。
4、设置“Max Train Steps”:50张图建议设为800–1200步;若显存≥12GB,可启用xformers加速并开启fp16精度。
5、点击“Start Training”,观察日志中出现 step 0 / 800… 并持续更新,即表示训练已正常运行。
五、手动注入触发词并验证模型可用性
训练完成后模型不会自动注册进提示词系统,需显式加载并测试其是否响应预设触发词。
1、训练结束时,模型权重将保存于 D:\sd_webui\models\dreambooth\role_yunyun\latest.safetensors。
2、重启WebUI,在文生图界面的正向提示词框中手动输入sks person(或您设定的其他触发词)。
3、在“Checkpoint”下拉菜单中选择基础模型(非dreambooth模型),再于“Embeddings”或“Lora”区域加载对应角色权重(部分版本需手动复制latest.safetensors至embeddings目录并重命名为role_yunyun.pt)。
4、生成图像时若人物面部结构、发型、服饰风格稳定复现,即表明角色模型已成功激活。










