欢迎光临
我们一直在努力

LoRA训练实战57:Anima Controlnet模型保姆级训练教程,助你实现生图的精确控制!

一、Anima Controlnet模型训练

Anima Controlnet:通过线稿精确控制生成图片的结构

1.准备素材

素材组成:需要准备两组图片,一组是线稿图,一组是目标图(结果图)

命名规则:两组图片的文件名需要一一对应,例如线稿图0001.png对应目标图0001.png

存储方式:分别保存在两个不同的文件夹下

2.使用LoRA训练大师训练

1)数据集

数据集添加:可以添加无限个数据集,每组数据集包含目标图和参考图

数据对应:目标组选择效果图,参考组选择线稿图

2)自动打标

打标要求:目标组图片需要打标

操作流程:直接使用自动打标功能,点击开始打标即可自动完成

注意打标语言:需要使用英文标签

3)模型训练

基础设置

任务命名:需要为训练任务命名,例如"Anima_Controlnet_V2"

训练类型:选择"Anima Control LLLite"

主要关注:重点需要关注训练数据集部分

控制图路径:选择一个线稿图作为控制图路径

参数检查:填写完提示词和控制图路径后,点击检查训练参数

保存训练:确认无误后点击保存

开始训练:进入模型训练界面点击开始训练

训练过程中可查看 :

过程采样

loss曲线

模型输出

输出内容:训练过程中会产出多个Controlnet模型

模型测试:可以选择任意步数的模型进行测试

复制使用:将选中的模型复制到ComfyUI models/controlnet文件夹下

3.示例

工作流准备:使用Anima动漫模型和工作流,可通过comfyui搅拌站模型广场获取

线稿获取:上传图片获取其线稿图

Controlnet应用:中间添加应用Anima Controlnet节点

模型选择:选择训练好的1万步模型

提示词设置:可以复制之前写好的提示词或自行编写

效果对比:

使用Controlnet时,生成的图片结构还原度高

不使用Controlnet时,仅根据提示词生成的图片结构差异较大

二、知识小结
步骤 核心操作 技术要点 工具/资源
素材准备 准备线稿图与目标图组 文件命名需一一对应 文件夹分类存储
自动打标 目标图组英文标签处理 使用自动化打标功能 Lora训练大师
模型配置 新建ControlNet训练任务 训练类型选择"Anima Control LLLite" 支持多数据集加载
训练监控 过程采样与loss曲线查看 实时生成效果预览 可视化训练面板
模型应用 工作流集成控制模型 线稿结构精确控制 ComfyUI工作流
效果对比 启用/停用ControlNet对比 结构保持度验证 提示词大师辅助生成

可点击下方原文链接观看视频教程👇

https://comfyit.cn/blog/284/?invite_code=TSH

赞(0)
未经允许不得转载:171主机测评 » LoRA训练实战57:Anima Controlnet模型保姆级训练教程,助你实现生图的精确控制!
分享到: 更多 (0)

评论 抢沙发

  • 昵称 (必填)
  • 邮箱 (必填)
  • 网址