Stable Diffusion怎么训练LoRA SD模型LoRA炼丹详细全流程【教程】


LoRA模型训练需七步:一、确认NVIDIA显卡≥6GB显存、CUDA可用、Python 3.10;二、下载部署kohya_ss;三、准备15–30张高质量正方形图像;四、用BLIP/DeepBooru打标并优化;五、配置SD1.5基模、LoRA参数(Dim=128, Alpha=64);六、启动训练并监控显存与日志;七、在SD WebUI中加载测试,权重设0.8–1.2并含触发词。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

stable diffusion怎么训练lora sd模型lora炼丹详细全流程【教程】

如果您已安装 Stable Diffusion WebUI 并希望训练专属 LoRA 模型,但对数据准备、参数配置与训练流程不熟悉,则可能是由于缺乏标准化操作路径导致训练失败或效果不佳。以下是完成 LoRA 模型训练的全流程步骤:

一、确认硬件与基础环境

LoRA 训练对 GPU 显存和 CUDA 兼容性有明确要求,本地训练需确保显卡驱动与 Python 环境满足最低依赖。未达标的设备将无法启动训练进程或中途崩溃。

1、检查显卡型号是否为 NVIDIA 系列,且显存 ≥ 6GB;

2、运行 nvidia-smi 命令验证驱动状态与 CUDA 可见性;

3、确认 Python 版本为 3.10.x,避免使用 3.11 或更高版本引发 kohya_ss 兼容异常;

4、若使用 Windows 系统,需提前安装 Microsoft Visual C++ 2019 Redistributable;

5、在命令行中执行 python -c "import torch; print(torch.cuda.is_*ailable())",返回 True 表示 CUDA 正常启用。

二、下载并部署训练工具包

kohya_ss 是当前最主流的 LoRA 训练 WebUI,它封装了全部训练脚本与前端界面,无需手动编写训练命令,大幅降低入门门槛。

1、访问 GitHub 官方仓库:https://github.com/kohya-ss/sd-scripts

2、点击绿色 Code 按钮 → Download ZIP,保存至非系统盘(如 D:\kohya);

3、解压后进入目录,双击运行 setup_windows.bat(Windows)或 setup_linux.sh(Linux);

4、等待自动安装依赖库,过程中出现多次 yes/no 提示时,全部按回车接受默认选项;

5、安装完成后,双击 gui.bat 启动 WebUI,浏览器自动打开 http://127.0.0.1:7860。

三、准备高质量训练图像集

图像质量与多样性直接决定 LoRA 复刻精度。低分辨率、模糊、背景杂乱或角度单一的图片将导致模型泛化能力差,无法稳定生成指定特征。

1、收集 15–30 张目标主体图像,涵盖正面、侧面、半身、全身、不同光照与表情;

2、统一裁剪为正方形,推荐尺寸为 512×512 像素,使用在线工具或 Python PIL 批量处理;

3、对真人图像建议使用 AI 抠图工具(如 rembg 或阿里云 API)去除背景,仅保留主体;

4、将所有图像保存至新建文件夹,例如 D:\lora_train\input\,禁止中文路径与空格;

5、命名采用纯英文+数字,如 chara_01.pngchara_02.png,避免特殊符号。

四、图像自动打标与标签优化

标签是模型理解图像语义的关键输入,错误或冗余标签会干扰特征学习。BLIP 适用于写实类图像,DeepBooru 更适合二次元风格,需按需选择。

1、在 WebUI 左侧导航栏点击 Image Captioning

2、设置输入目录为刚才创建的 input 文件夹,输出目录设为同级 captioned 文件夹;

3、模型选择 BLIP(真人)或 DeepBooru(二次元),勾选 Overwrite existing captions

4、点击 Run 开始批量生成 .txt 标签文件;

Fotor AI Image Upscaler Fotor AI Image Upscaler

Fotor推出的AI图片放大工具

Fotor AI Image Upscaler 73 查看详情 Fotor AI Image Upscaler

5、打开任意生成的 .txt 文件,手动删减无关标签(如 blurry_background、lowres),保留核心特征词(如 1girl、long_hair、red_dress);

6、在所有 .txt 中统一添加基础触发词,例如 masterpiece, best quality, 1girl,置于每行开头。

五、配置 LoRA 训练参数

参数组合影响收敛速度、过拟合风险与最终风格还原度。过大 batch_size 易显存溢出,过小则训练缓慢;学习率过高导致震荡,过低则难以收敛。

1、在 WebUI 中切换至 Train 标签页;

2、Base Model 选择已下载的 SD 1.5 大模型(.safetensors 文件),路径填入 models/Stable-diffusion/your_model.safetensors

3、设置 Output Directory 为新路径,如 D:\lora_train\output\

4、LoRA Type 选择 LoRA,Network Dim 设为 128,Network Alpha 设为 64

5、Training Steps 填 1000–2000,取决于图像数量与复杂度;

6、Learning Rate 设置为 1e-4(即 0.0001),Optimizer 选 AdamW8bit

7、勾选 Cache LatentsNo Token Padding,提升训练稳定性。

六、启动训练并监控过程

训练启动后需持续观察日志输出与显存占用,异常中断可能由路径错误、显存不足或标签格式问题引起,及时暂停可避免无效耗时。

1、点击页面右下角 Train 按钮,后台开始构建训练任务;

2、切换至终端窗口(或 WebUI 日志面板),查看实时输出,确认出现 Starting training... 字样;

3、观察 GPU 显存占用是否稳定在 90% 以下,若持续 100% 且无进度更新,立即关闭并调低 batch_size;

4、每 200 步自动生成一张预览图,保存于 output 目录下的 sample 子文件夹;

5、当控制台显示 S*ing checkpoint... 且生成 .safetensors 文件时,表示单次训练完成。

七、测试与验证 LoRA 效果

生成结果需在原始 SD WebUI 中加载验证,仅依赖训练界面预览图无法判断真实泛化能力。触发词缺失或权重不当会导致特征不显现。

1、将生成的 .safetensors 文件复制至 models/Lora/ 目录;

2、重启 SD WebUI,在文生图界面下方找到 Add network: Lora 下拉框;

3、选择刚加入的模型,设置权重为 0.8–1.2(过高易过拟合,过低特征弱);

4、Prompt 中必须包含训练时统一添加的触发词,例如 1girl, red_dress, masterpiece

5、生成图像后比对五官结构、服饰纹理、姿态一致性,若关键特征缺失,需返回调整标签或重训。

以上就是Stable Diffusion怎么训练LoRA SD模型LoRA炼丹详细全流程【教程】的详细内容,更多请关注其它相关文章!


# python  # 十堰seo网址  # 营口seo推广哪个适用  # 网站建设流程怎么写  # 肇庆医疗网站建设平台  # 景点冬日营销推广策略  # 勾选  # 过低  # 开源  # 过高  # 高质量  # 双击  # 命令行  # 离线  # 显存  # linux  # redis  # 前端  # git  # windows  # github  # 显卡  # 浏览器  # 工具  # 阿里云  # nvidi  # 设为  # 罗源提供seo服务电话  # 大型网站建设网页推广  # 龙泉驿区网站推广公司  # 网站推广软件选哪家  # 数字网站建设需要 


相关栏目: 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894


相关推荐: 深剖Apple Vision Pro中暗藏的“AI”  北京市通用人工智能产业创新伙伴计划名单公布,京东科技入选“算力伙伴”  苹果AR头显商标与华为撞车,在中国或改名  Valve Index VR 头显销量下滑,上市四年的长青树渐失光彩  走进首家“元宇宙”未来工厂,卡奥斯探知工业之旅出发!  AI与5G的强强联合:唤醒数字时代的无尽潜能  网易易盾 AI Lab 论文入选 ICASSP 2025!黑科技让语音识别越“听”越准  微软和谷歌面临的人工智能困境:需要投入大量资金才能获得盈利  《上古卷轴5》AI高清材质包优化游戏中所有怪物  特斯拉门店可能启动机器人卖车?也许不是你想的那样  “智能体动作生成技术”现身WAIC:游戏AI技术为机器人科创注入新动力  苹果推出全新沉浸式 AR 体验应用“Deep Field”  小艺主导智慧交互升级,借助AI大模型增强能力  中国联通推出“极光一号”5G机载终端,适配大疆等品牌无人机设备  MetaGPT AI 模型开源:可模拟软件公司开发过程,生成高质量代码  13条咒语挖掘GPT-4最大潜力,Github万星AI导师火了,网友:隔行再也不隔山了  旷视入选北京市通用人工智能产业创新伙伴计划  360发布数字安全和人工智能的强大结合:360安全大模型  AI教父Bengio:我感到迷失,对AI担忧已成「精神内耗」!  OpenAI宣布在伦敦设立海外分部,要招揽“世界级人才”  【澎湃原动力】人工智能产业协同创新中心:全产业链资源在这里汇聚  尼康尼克尔Z 180-600mm f/5.6-6.3 VR镜头发布:12499元 拍鸟神器  埃森哲俞毅:AI时代我们需要新的“摩尔定律”  Valve 将拒绝采用 AI 生成未知版权内容的游戏上架 Steam  AI室内设计软件流行,室内设计行业如何应对效率变革  OpenAI CEO 阿尔特曼到访日本,对全球 AI 协调合作表示乐观  人工智能赋能无人驾驶:商业化进程再提速  微软Bing聊天机器人电脑端即将支持语音提问  传字节内测对话式 AI 产品,代号「Grace」;马斯克嘲讽苹果 头显;比亚迪 F 品牌定名「方程豹」  套娃不可取:研究人员证实用AI生成的结果训练AI将导致模型退化  AI新视野,增长新势能,伙伴云受邀出席笔记侠创业讲真话AI峰会  卫星通信牵引物联网竞争升维,模组厂商如何决胜百亿市场?  马斯克预测:特斯拉全自动驾驶将在今年实现 对AI深度变化感到担忧  微软bing聊天推出AI购物工具 可进行比价并查看历史最低价  「社交达人」GPT-4!解读表情、揣测心理全都会  AYANEO AIR 1S 掌机发布:R7 7840U,预订价 4699 元起  华为4G5G通信物联网收费标准公布,多年研发成果,十年花费近万亿  苹果AI战略与微软谷歌大相径庭,到底是领先还是落后?  面向AI大模型,腾讯云首次完整披露自研星脉高性能计算网络  纪录片 《寻找人工智能》全集1080P超清  GPT-4最全攻略来袭!OpenAI官方发布,六个月攒下来的使用经验都在里面了  OpenAI CEO 山姆・阿尔特曼呼吁 AI 领域中美应当合作  “具身智能”引爆机器人产业,看绝影Lite3/X20四足机器人有何特别之处?  周鸿祎参加中美青年科技创新峰会,分享人工智能创新机遇  Win11 的画图应用将包含 Windows Copilot 的 AI 工具整合  人工智能写作检测工具不靠谱,美国宪法竟被认为是机器人写的  从数据中心到发电站:人工智能对能源使用的影响  小红书陷入麻烦!被指控未经许可使用用户图片进行AI训练  人工智能赋能广西自然资源领域监测监管  “技术+实践+生态”三箭齐发,京东方抢占物联网高地 

 2025-12-17

了解您产品搜索量及市场趋势,制定营销计划

同行竞争及网站分析保障您的广告效果

点击免费数据支持

提交您的需求,1小时内享受我们的专业解答。

运城市盐湖区信雨科技有限公司


运城市盐湖区信雨科技有限公司

运城市盐湖区信雨科技有限公司是一家深耕海外推广领域十年的专业服务商,作为谷歌推广与Facebook广告全球合作伙伴,聚焦外贸企业出海痛点,以数字化营销为核心,提供一站式海外营销解决方案。公司凭借十年行业沉淀与平台官方资源加持,打破传统外贸获客壁垒,助力企业高效开拓全球市场,成为中小企业出海的可靠合作伙伴。

 8156699

 13765294890

 8156699@qq.com

Notice

We and selected third parties use cookies or similar technologies for technical purposes and, with your consent, for other purposes as specified in the cookie policy.
You can consent to the use of such technologies by closing this notice, by interacting with any link or button outside of this notice or by continuing to browse otherwise.