模型相关

#5
by SophiaDz001 - opened

想咨询一下,楼主是基于哪个模型训练的呀?是用的什么训练方法呢?

基于basil_mix模型所制作。训练方式是DreamBooth

非常感谢,请问您的训练集数量是多少呢?训练集图像尺寸是多少呀

500+素材,开启了arb,分辨率最长边1024

强!!!非常感谢,受益匪浅,如果我基于DreamBooth训练一个自己想要的风格,不知道您这边有没有相关的学习指南推荐不

500+素材,开启了arb,分辨率最长边1024

@xiaolxl 请问作者arb是什么?怎么设置模型生成1024大小的图片?谢谢~~!

强!!!非常感谢,受益匪浅,如果我基于DreamBooth训练一个自己想要的风格,不知道您这边有没有相关的学习指南推荐不

可以去我B站看看,搜索xiaolxl就行

500+素材,开启了arb,分辨率最长边1024

@xiaolxl 请问作者arb是什么?怎么设置模型生成1024大小的图片?谢谢~~!

arb:Aspect Ratio Bucketing - https://github.com/NovelAI/novelai-aspect-ratio-bucketing
模型生成1024大小的图片:webui文生图界面下方可以设置生成的图片大小

额。出来的图和示例图完全不一样呢,比如:

按 e1.png 为样本出来的图,我的是:

额。出来的图和示例图完全不一样呢,比如:

按 e1.png 为样本出来的图,我的是:

直接解析试试

额。出来的图和示例图完全不一样呢,比如:

按 e1.png 为样本出来的图,我的是:

直接解析试试

是直接png info解析的。
出来的效果差异很大。我是SD-WEBUI最新版本,VAE选NONE或其他都没太大区别。
其他参数全默认。

额。出来的图和示例图完全不一样呢,比如:

按 e1.png 为样本出来的图,我的是:

直接解析试试

是直接png info解析的。
出来的效果差异很大。我是SD-WEBUI最新版本,VAE选NONE或其他都没太大区别。
其他参数全默认。
我按照e1.png出的图是这样的

00003-2770088632.png

额。出来的图和示例图完全不一样呢,比如:

按 e1.png 为样本出来的图,我的是:

直接解析试试

是直接png info解析的。
出来的效果差异很大。我是SD-WEBUI最新版本,VAE选NONE或其他都没太大区别。
其他参数全默认。
我按照e1.png出的图是这样的

00003-2770088632.png

我webUi有Eta 噪声种子偏移(ENSD - Eta noise seed delta):31337
Clip 跳过层:2
出图模型是没有fix的最初的那一个

额。出来的图和示例图完全不一样呢,比如:

按 e1.png 为样本出来的图,我的是:

直接解析试试

是直接png info解析的。
出来的效果差异很大。我是SD-WEBUI最新版本,VAE选NONE或其他都没太大区别。
其他参数全默认。
我按照e1.png出的图是这样的

00003-2770088632.png

我webUi有Eta 噪声种子偏移(ENSD - Eta noise seed delta):31337
Clip 跳过层:2
出图模型是没有fix的最初的那一个

ENSD - Eta noise seed delta):31337
设定之后一样了,感谢作者!

500+素材,开启了arb,分辨率最长边1024

@xiaolxl 请问作者arb是什么?怎么设置模型生成1024大小的图片?谢谢~~!

arb:Aspect Ratio Bucketing - https://github.com/NovelAI/novelai-aspect-ratio-bucketing
模型生成1024大小的图片:webui文生图界面下方可以设置生成的图片大小

@xiaolxl 谢谢回答!请问500+图片训练的话,需要多少显存?

500+素材,开启了arb,分辨率最长边1024

@xiaolxl 请问作者arb是什么?怎么设置模型生成1024大小的图片?谢谢~~!

arb:Aspect Ratio Bucketing - https://github.com/NovelAI/novelai-aspect-ratio-bucketing
模型生成1024大小的图片:webui文生图界面下方可以设置生成的图片大小

@xiaolxl 谢谢回答!请问500+图片训练的话,需要多少显存?

这个我没有具体测试过,我的训练显存并非只有一个素材数量的影响,无法给你具体的参考,但是db训练一般需要12G以上的大小

@xiaolxl 请问基于basil_mix模型,只适合训练人物相关的主题吗?别的主题可以吗?比如中国结

@xiaolxl 请问基于basil_mix模型,只适合训练人物相关的主题吗?别的主题可以吗?比如中国结

可以

@xiaolxl 请问基于basil_mix模型,只适合训练人物相关的主题吗?别的主题可以吗?比如中国结

可以

@xiaolxl 请问非人物主题训练也需要开启lora选项吗?

@xiaolxl 请问基于basil_mix模型,只适合训练人物相关的主题吗?别的主题可以吗?比如中国结

可以

@xiaolxl 请问非人物主题训练也需要开启lora选项吗?

国风2,3是dreambooth训练,没有用到lora,国风1是lora训练的

@xiaolxl 作者好,用您的方法,使用600张中国结照片训练6万步,得到了一个不错的效果,非常感谢!但为什么生成的图片不够写实?是模型本身效果就这样吗?还是需要什么特殊的操作?

00110-3037833710-{{best quality}},{{masterpiece}},{highres},{an extremely delicate and beautiful},original,extremely detailed wallpaper,green chi.png
00111-2604453373-{{best quality}},{{masterpiece}},{highres},{an extremely delicate and beautiful},original,extremely detailed wallpaper,green chi.png
00175-3622626400-{{best quality}},{{masterpiece}},{highres},{an extremely delicate and beautiful},original,extremely detailed wallpaper,a chinese.png
00211-320070167-{{best quality}},{{masterpiece}},{highres},{an extremely delicate and beautiful},original,extremely detailed wallpaper,yellow ch.png
00108-3043026126-{{best quality}},{{masterpiece}},{highres},{an extremely delicate and beautiful},original,extremely detailed wallpaper,yellow ch.png

@xiaolxl 作者好,用您的方法,使用600张中国结照片训练6万步,得到了一个不错的效果,非常感谢!但为什么生成的图片不够写实?是模型本身效果就这样吗?还是需要什么特殊的操作?

00110-3037833710-{{best quality}},{{masterpiece}},{highres},{an extremely delicate and beautiful},original,extremely detailed wallpaper,green chi.png
00111-2604453373-{{best quality}},{{masterpiece}},{highres},{an extremely delicate and beautiful},original,extremely detailed wallpaper,green chi.png
00175-3622626400-{{best quality}},{{masterpiece}},{highres},{an extremely delicate and beautiful},original,extremely detailed wallpaper,a chinese.png
00211-320070167-{{best quality}},{{masterpiece}},{highres},{an extremely delicate and beautiful},original,extremely detailed wallpaper,yellow ch.png
00108-3043026126-{{best quality}},{{masterpiece}},{highres},{an extremely delicate and beautiful},original,extremely detailed wallpaper,yellow ch.png

关键词加入3D,负面词加入2d,效果不明显加权重再试试

500+素材,开启了arb,分辨率最长边1024

请问下训练集可以分享一下吗

500+素材,开启了arb,分辨率最长边1024

请问下训练集可以分享一下吗

抱歉,这个不方便提供

@xiaolxl 请问作者,用您的方法基于basil mix模型训练某个物件(比如中国结)。我发现生成的模型,只能生成中国结,失去了生成其他东西的能力。请问这是什么原因呢?谢谢!!

@xiaolxl 请问作者,用您的方法基于basil mix模型训练某个物件(比如中国结)。我发现生成的模型,只能生成中国结,失去了生成其他东西的能力。请问这是什么原因呢?谢谢!!

训练到了过拟合状态

请问下arb预处理您是怎么操作的呢?通过arb生成一些训练集(这部分脚本可以看看嘛),还是能整合到webui里面呢

请问下arb预处理您是怎么操作的呢?通过arb生成一些训练集(这部分脚本可以看看嘛),还是能整合到webui里面呢

dreambooth的webui插件自带arb功能

@xiaolxl 想问下,关键词是每张图自己定义的还是直接反推的啊

@xiaolxl 想问下,关键词是每张图自己定义的还是直接反推的啊

一般是使用别人的tag进行修改

@xiaolxl 大佬 以您提供的训练思路,训练人物时, 如何避免或者降低人脸畸变呢?

Sign up or log in to comment